 oobabooga
|
1dacd34165
Further refactor
|
vor 2 Jahren |
|
oobabooga
|
ce7feb3641
Further refactor
|
vor 2 Jahren |
|
oobabooga
|
98af4bfb0d
Refactor the code to make it more modular
|
vor 2 Jahren |
|
oobabooga
|
18e0ec955e
Improve some descriptions in --help
|
vor 2 Jahren |
|
oobabooga
|
ced5d9ab04
Update README.md
|
vor 2 Jahren |
|
oobabooga
|
b18071330f
Update README.md
|
vor 2 Jahren |
|
oobabooga
|
c72892835a
Don't show *-np models in the list of choices
|
vor 2 Jahren |
|
oobabooga
|
95e536f876
Merge branch 'main' of github.com:oobabooga/text-generation-webui
|
vor 2 Jahren |
|
oobabooga
|
044b963987
Add stop parameter for flexgen (#105)
|
vor 2 Jahren |
|
oobabooga
|
b4a7f5fa70
Update README.md
|
vor 2 Jahren |
|
oobabooga
|
ea21a22940
Remove redundant preset
|
vor 2 Jahren |
|
oobabooga
|
b8b3d4139c
Add --compress-weight parameter
|
vor 2 Jahren |
|
oobabooga
|
193fb1660a
Conversion seems to work better this way
|
vor 2 Jahren |
|
oobabooga
|
eef6fc3cbf
Add a preset for FlexGen
|
vor 2 Jahren |
|
oobabooga
|
311404e258
Reuse disk-cache-dir parameter for flexgen
|
vor 2 Jahren |
|
oobabooga
|
f3c75bbd64
Add --percent flag for flexgen
|
vor 2 Jahren |
|
oobabooga
|
b83f51ee04
Add FlexGen support #92 (experimental)
|
vor 2 Jahren |
|
oobabooga
|
e52b697d5a
Add bf16 back here (the fp16 -> bf16 conversion takes a few seconds)
|
vor 2 Jahren |
|
oobabooga
|
bc856eb962
Add some more margin
|
vor 2 Jahren |
|
oobabooga
|
444cd69c67
Fix regex bug in loading character jsons with special characters
|
vor 2 Jahren |
|
oobabooga
|
f867285e3d
Make the circle a bit less red
|
vor 2 Jahren |
|
oobabooga
|
e4440cd984
Make highlighted text gray in cai-chat mode
|
vor 2 Jahren |
|
oobabooga
|
bb1dac2f76
Convert the download option (A-Z) to upper case
|
vor 2 Jahren |
|
oobabooga
|
d7a738fb7a
Load any 13b/20b/30b model in 8-bit mode when no flags are supplied
|
vor 2 Jahren |
|
oobabooga
|
c1de491c63
No need to have bf16 support here
|
vor 2 Jahren |
|
oobabooga
|
8123c5b01a
Sort the imports
|
vor 2 Jahren |
|
oobabooga
|
77846ceef3
Minor change
|
vor 2 Jahren |
|
oobabooga
|
e195377050
Deprecate torch dumps, move to safetensors (they load even faster)
|
vor 2 Jahren |
|
oobabooga
|
14ffa0b418
Fix line breaks in --chat mode
|
vor 2 Jahren |
|
oobabooga
|
58520a1f75
Update README.md
|
vor 2 Jahren |
