 Hamid Shojanazeri
|
c4e96af6ee
clean up
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
ceaf6301e9
remove the unused code
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
a7fe0396c5
update to main
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
7ad5bd5ef2
adding inference updates
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
7ec390bfc8
aliging special tokens in toeknizer with HF latest
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
15053268b4
adding dist checkpoint handler for signle gpu
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
25b60ee835
adding fsdp checkpoint loading
|
vor 2 Jahren |
|
Hamid Shojanazeri
|
37dac0ebc5
adding time and tp config and new pad token
|
vor 2 Jahren |
 chauhang
|
4767f09ecd
Initial commit
|
vor 2 Jahren |
