 oobabooga
|
6e843a11d6
Fix FlexGen in chat mode
|
vor 2 Jahren |
|
oobabooga
|
fa58fd5559
Proper way to free the cuda cache
|
vor 2 Jahren |
|
oobabooga
|
700311ce40
Empty the cuda cache at model.generate()
|
vor 2 Jahren |
|
oobabooga
|
78ad55641b
Remove duplicate max_new_tokens parameter
|
vor 2 Jahren |
|
oobabooga
|
65326b545a
Move all gradio elements to shared (so that extensions can use them)
|
vor 2 Jahren |
|
oobabooga
|
9ae063e42b
Fix softprompts when deepspeed is active (#112)
|
vor 2 Jahren |
|
oobabooga
|
7224343a70
Improve the imports
|
vor 2 Jahren |
|
oobabooga
|
1dacd34165
Further refactor
|
vor 2 Jahren |
|
oobabooga
|
ce7feb3641
Further refactor
|
vor 2 Jahren |
