Преглед на файлове

make max_tokens same - 10240

Jeff Tang преди 6 месеца
родител
ревизия
9ac5dd12fb
променени са 1 файла, в които са добавени 1 реда и са изтрити 1 реда
  1. 1 1
      end-to-end-use-cases/coding/text2sql/eval/llama_text2sql.py

+ 1 - 1
end-to-end-use-cases/coding/text2sql/eval/llama_text2sql.py

@@ -309,7 +309,7 @@ def collect_response_from_llama(
                 api_key=api_key,
                 model=model,
                 prompt=cur_prompt,
-                max_tokens=4096,
+                max_tokens=10240,
                 temperature=0,
                 stop=["--", "\n\n", ";", "#"],
             )