 oobabooga
|
ea21a22940
Remove redundant preset
|
2 vuotta sitten |
|
oobabooga
|
b8b3d4139c
Add --compress-weight parameter
|
2 vuotta sitten |
|
oobabooga
|
193fb1660a
Conversion seems to work better this way
|
2 vuotta sitten |
|
oobabooga
|
eef6fc3cbf
Add a preset for FlexGen
|
2 vuotta sitten |
|
oobabooga
|
311404e258
Reuse disk-cache-dir parameter for flexgen
|
2 vuotta sitten |
|
oobabooga
|
f3c75bbd64
Add --percent flag for flexgen
|
2 vuotta sitten |
|
oobabooga
|
b83f51ee04
Add FlexGen support #92 (experimental)
|
2 vuotta sitten |
|
oobabooga
|
e52b697d5a
Add bf16 back here (the fp16 -> bf16 conversion takes a few seconds)
|
2 vuotta sitten |
|
oobabooga
|
bc856eb962
Add some more margin
|
3 vuotta sitten |
|
oobabooga
|
444cd69c67
Fix regex bug in loading character jsons with special characters
|
3 vuotta sitten |
|
oobabooga
|
f867285e3d
Make the circle a bit less red
|
3 vuotta sitten |
|
oobabooga
|
e4440cd984
Make highlighted text gray in cai-chat mode
|
3 vuotta sitten |
|
oobabooga
|
bb1dac2f76
Convert the download option (A-Z) to upper case
|
3 vuotta sitten |
|
oobabooga
|
d7a738fb7a
Load any 13b/20b/30b model in 8-bit mode when no flags are supplied
|
3 vuotta sitten |
|
oobabooga
|
c1de491c63
No need to have bf16 support here
|
3 vuotta sitten |
|
oobabooga
|
8123c5b01a
Sort the imports
|
3 vuotta sitten |
|
oobabooga
|
77846ceef3
Minor change
|
3 vuotta sitten |
|
oobabooga
|
e195377050
Deprecate torch dumps, move to safetensors (they load even faster)
|
3 vuotta sitten |
|
oobabooga
|
14ffa0b418
Fix line breaks in --chat mode
|
3 vuotta sitten |
|
oobabooga
|
58520a1f75
Update README.md
|
3 vuotta sitten |
|
oobabooga
|
c8eab98fd2
Add an example of usage for the API
|
3 vuotta sitten |
|
oobabooga
|
c92f347c94
Merge pull request #90 from SillyLossy/regexp
|
3 vuotta sitten |
 SillyLossy
|
ded890c378
Escape regexp in message extraction
|
3 vuotta sitten |
|
oobabooga
|
8c9dd95d55
Print the softprompt metadata when it is loaded
|
3 vuotta sitten |
|
oobabooga
|
f79805f4a4
Change a comment
|
3 vuotta sitten |
|
oobabooga
|
05e9da0c12
Update README.md
|
3 vuotta sitten |
|
oobabooga
|
b1add0e586
Update README.md
|
3 vuotta sitten |
|
oobabooga
|
55bb5e5ef0
Bump accelerate version
|
3 vuotta sitten |
|
oobabooga
|
995bcfcf5e
Minor style change
|
3 vuotta sitten |
|
oobabooga
|
d58544a420
Some minor formatting changes
|
3 vuotta sitten |
