Domů Procházet Nápověda
Přihlásit se
radu
/
LLamaRecipes
zrcadlo https://github.com/facebookresearch/llama-recipes.git
Sledovat 1
Oblíbit 0
Rozštěpit 0
Soubory Úkoly 0 Wiki
Strom: 181a3fb68e
Větve Značky
LLamaRecipes
/
recipes
/
3p_integration
Pia Papanna 8dc0578702 Fixing broken file paths před 1 rokem
..
hf_text_generation_inference 8dc0578702 Fixing broken file paths před 1 rokem
lamini 8dc0578702 Fixing broken file paths před 1 rokem
vllm 8dc0578702 Fixing broken file paths před 1 rokem
README.md 8dc0578702 Fixing broken file paths před 1 rokem
llama-on-prem.md 8dc0578702 Fixing broken file paths před 1 rokem

README.md

Running Llama 3 On-Prem with vLLM and TGI

This tutorial shows how to use Llama 3 with vLLM and Hugging Face TGI to build Llama 3 on-prem apps.