GraySoft
Projects Models Compare Cloud benchmarks FAQ Download guIDE →
Model Intelligence Sheet

quantumstocks/qwen-finance-0.8b-gguf overview

qwen finance 0.8b gguf : GGUF This model was finetuned and converted to GGUF format using Unsloth https://github.com/unslothai/unsloth . Example usage : For te…

ggufqwen3_5llama.cppunslothvision-language-modeldataset:ianncity/GLM-5.2-Finance-80000xbase_model:unsloth/Qwen3.5-0.8Bbase_model:quantized:unsloth/Qwen3.5-0.8Bendpoints_compatibleregion:usconversational

Runs locally from ~195.5 MB disk (4 GB VRAM class GPUs with llama.cpp / guIDE).

Downloads
0
Likes
0
Pipeline

Repository Files & Downloads

2 GGUF files detected
Direct downloads for local inference
FileTypeQuantizationSizeLink
Qwen3.5-0.8B.F16-mmproj.ggufGGUFGGUF195.5 MBDownload
Qwen3.5-0.8B.Q8_0.ggufGGUFGGUF795.0 MBDownload

Model Details

Model IDquantumstocks/qwen-finance-0.8b-gguf
Authorquantumstocks
Pipeline
License
Base modelunsloth/Qwen3.5-0.8B
Last modified2026-08-13T14:29:39.000Z

Model README

---

tags:

  • gguf
  • llama.cpp
  • unsloth
  • vision-language-model

datasets:

  • ianncity/GLM-5.2-Finance-80000x

base_model:

  • unsloth/Qwen3.5-0.8B

---

qwen-finance-0.8b-gguf : GGUF

This model was finetuned and converted to GGUF format using Unsloth.

Example usage:

  • For text only LLMs: llama-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja
  • For multimodal models: llama-mtmd-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja

Available Model files:

  • Qwen3.5-0.8B.Q8_0.gguf
  • Qwen3.5-0.8B.F16-mmproj.gguf

This was trained 2x faster with Unsloth

<img src="https://raw.githubusercontent.com/unslothai/unsloth/main/images/unsloth%20made%20with%20love.png" width="200"/>

---
language:
  - en
base_model: unsloth/Qwen3.5-0.8B
tags:
  - finance
  - unsloth
  - qwen
  - gguf
  - text-generation
datasets:
  - ianncity/GLM-5.2-Finance-80000x
---

# Qwen-Finance-0.8B (GGUF)

Эта модель является результатом дообучения (fine-tuning) языковой модели `unsloth/Qwen3.5-0.8B` на финансовом датасете. 

## Детали обучения
* **Базовая модель:** `unsloth/Qwen3.5-0.8B`
* **Обучающий датасет:** [`ianncity/GLM-5.2-Finance-80000x`](https://huggingface.co/datasets/ianncity/GLM-5.2-Finance-80000x)
* **Фреймворк:** Unsloth (обучение прошло в 2 раза быстрее и с меньшим потреблением памяти).
* **Формат:** GGUF (квантование `q8_0`).

## Описание датасета
Датасет `ianncity/GLM-5.2-Finance-80000x` содержит 80 000+ пар диалогов (вопрос-ответ), сфокусированных на сложных финансовых темах: кредитование, устойчивое развитие (ESG), высокочастотный трейдинг (HFT), арбитраж, микрофинансовые рынки и нормативное регулирование.

## Использование
Поскольку модель сохранена в формате GGUF, её можно запустить локально на CPU или GPU через `llama.cpp`, Ollama или LM Studio.

### Пример запуска через llama.cpp:

llama-cli -hf quantumstocks/qwen-finance-0.8b-gguf --jinja

Run quantumstocks/qwen-finance-0.8b-gguf with guIDE

Download guIDE — the AI-native code editor with local LLM inference and 69 built-in tools.

Download guIDE → · Browse 524k+ models · Compare models

Source: Hugging Face · Compare models