 oobabooga
|
1cb9246160
Adapt to the new model names
|
hace 2 años |
|
oobabooga
|
010b259dde
Update documentation
|
hace 2 años |
|
oobabooga
|
0bec15ebcd
Reorder imports
|
hace 2 años |
 Maya Eary
|
41ec682834
Disable kernel threshold for gpt-j
|
hace 2 años |
|
Maya Eary
|
1c075d8d21
Fix typo
|
hace 2 años |
|
Maya Eary
|
c8207d474f
Generalized load_quantized
|
hace 2 años |
|
oobabooga
|
49c10c5570
Add support for the latest GPTQ models with group-size (#530)
|
hace 2 años |
 EyeDeck
|
dcfd866402
Allow loading of .safetensors through GPTQ-for-LLaMa
|
hace 2 años |
|
oobabooga
|
db4219a340
Update comments
|
hace 2 años |
|
oobabooga
|
7618f3fe8c
Add -gptq-preload for 4-bit offloading (#460)
|
hace 2 años |
|
oobabooga
|
9a3bed50c3
Attempt at fixing 4-bit with CPU offload
|
hace 2 años |
 askmyteapot
|
53b6a66beb
Update GPTQ_Loader.py
|
hace 2 años |
|
oobabooga
|
265ba384b7
Rename a file, add deprecation warning for --load-in-4bit
|
hace 2 años |
