ChenMnZ/Llama-2-7b-EfficientQAT-w4g128-BitBLAS
Text Generation
•
26B
•
Updated
•
4
EfficientQAT (BitBLAS format)
EfficientQAT quantized models with BitBLAS data format.
-
-
ChenMnZ/Llama-3-8b-instruct-EfficientQAT-w4g128-BitBLAS
Text Generation • 29B • Updated • 7 -
ChenMnZ/Llama-3-8b-instruct-EfficientQAT-w2g64-BitBLAS
Text Generation • 29B • Updated • 5 -
ChenMnZ/Llama-3-8b-instruct-EfficientQAT-w2g128-BitBLAS
Text Generation • 29B • Updated • 5 -
ChenMnZ/Llama-3-8b-EfficientQAT-w4g128-BitBLAS
Text Generation • 29B • Updated • 5 -
ChenMnZ/Llama-3-8b-EfficientQAT-w2g64-BitBLAS
Text Generation • 29B • Updated • 5 -
ChenMnZ/Llama-3-8b-EfficientQAT-w2g128-BitBLAS
Text Generation • 29B • Updated • 4 -
ChenMnZ/Llama-3-70b-instruct-EfficientQAT-w4g128-BitBLAS
Text Generation • 276B • Updated • 4 -
ChenMnZ/Llama-3-70b-instruct-EfficientQAT-w2g64-BitBLAS
Text Generation • 276B • Updated • 6 -
ChenMnZ/Llama-3-70b-instruct-EfficientQAT-w2g128-BitBLAS
Text Generation • 276B • Updated • 7 -
ChenMnZ/Llama-3-70b-EfficientQAT-w4g128-BitBLAS
Text Generation • 276B • Updated • 5 -
ChenMnZ/Llama-3-70b-EfficientQAT-w2g64-BitBLAS
Text Generation • 276B • Updated • 5 -
ChenMnZ/Llama-3-70b-EfficientQAT-w2g128-BitBLAS
Text Generation • 276B • Updated • 5 -
ChenMnZ/Llama-2-7b-EfficientQAT-w2g64-BitBLAS
Text Generation • 26B • Updated • 6 -
ChenMnZ/Llama-2-7b-EfficientQAT-w2g128-BitBLAS
Text Generation • 26B • Updated • 5 -
ChenMnZ/Llama-2-70b-EfficientQAT-w4g128-BitBLAS
Text Generation • 275B • Updated • 5 -
ChenMnZ/Llama-2-70b-EfficientQAT-w2g128-BitBLAS
Text Generation • 274B • Updated • 2 -
ChenMnZ/Llama-2-13b-EfficientQAT-w4g128-BitBLAS
Text Generation • 51B • Updated • 5 -
ChenMnZ/Llama-2-13b-EfficientQAT-w2g64-BitBLAS
Text Generation • 51B • Updated • 9 -
ChenMnZ/Llama-2-13b-EfficientQAT-w2g128-BitBLAS
Text Generation • 51B • Updated • 6