Pia Papanna
8dc0578702
Fixing broken file paths
|
1 年間 前 | |
|---|---|---|
| .. | ||
| hf_text_generation_inference | 1 年間 前 | |
| lamini | 1 年間 前 | |
| vllm | 1 年間 前 | |
| README.md | 1 年間 前 | |
| llama-on-prem.md | 1 年間 前 | |
README.md
Running Llama 3 On-Prem with vLLM and TGI
This tutorial shows how to use Llama 3 with vLLM and Hugging Face TGI to build Llama 3 on-prem apps.