Model Intelligence Sheet
quantumstocks/qwen-finance-0.8b-gguf overview
qwen finance 0.8b gguf : GGUF This model was finetuned and converted to GGUF format using Unsloth https://github.com/unslothai/unsloth . Example usage : For te…
Runs locally from ~195.5 MB disk (4 GB VRAM class GPUs with llama.cpp / guIDE).
Repository Files & Downloads
Model Details
| Model ID | quantumstocks/qwen-finance-0.8b-gguf |
|---|---|
| Author | quantumstocks |
| Pipeline | — |
| License | — |
| Base model | unsloth/Qwen3.5-0.8B |
| Last modified | 2026-08-13T14:29:39.000Z |
Model README
---
tags:
- gguf
- llama.cpp
- unsloth
- vision-language-model
datasets:
- ianncity/GLM-5.2-Finance-80000x
base_model:
- unsloth/Qwen3.5-0.8B
---
qwen-finance-0.8b-gguf : GGUF
This model was finetuned and converted to GGUF format using Unsloth.
Example usage:
- For text only LLMs:
llama-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja - For multimodal models:
llama-mtmd-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja
Available Model files:
Qwen3.5-0.8B.Q8_0.ggufQwen3.5-0.8B.F16-mmproj.gguf
This was trained 2x faster with Unsloth
---
language:
- en
base_model: unsloth/Qwen3.5-0.8B
tags:
- finance
- unsloth
- qwen
- gguf
- text-generation
datasets:
- ianncity/GLM-5.2-Finance-80000x
---
# Qwen-Finance-0.8B (GGUF)
Эта модель является результатом дообучения (fine-tuning) языковой модели `unsloth/Qwen3.5-0.8B` на финансовом датасете.
## Детали обучения
* **Базовая модель:** `unsloth/Qwen3.5-0.8B`
* **Обучающий датасет:** [`ianncity/GLM-5.2-Finance-80000x`](https://huggingface.co/datasets/ianncity/GLM-5.2-Finance-80000x)
* **Фреймворк:** Unsloth (обучение прошло в 2 раза быстрее и с меньшим потреблением памяти).
* **Формат:** GGUF (квантование `q8_0`).
## Описание датасета
Датасет `ianncity/GLM-5.2-Finance-80000x` содержит 80 000+ пар диалогов (вопрос-ответ), сфокусированных на сложных финансовых темах: кредитование, устойчивое развитие (ESG), высокочастотный трейдинг (HFT), арбитраж, микрофинансовые рынки и нормативное регулирование.
## Использование
Поскольку модель сохранена в формате GGUF, её можно запустить локально на CPU или GPU через `llama.cpp`, Ollama или LM Studio.
### Пример запуска через llama.cpp:
llama-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja
Run quantumstocks/qwen-finance-0.8b-gguf with guIDE
Download guIDE — the AI-native code editor with local LLM inference and 69 built-in tools.
Source: Hugging Face · Compare models