admin-lima/phi35-saude-amazonia-gguf overview
Phi 3.5 mini — GGUF Q4 K M · Saúde Coletiva Amazônia sLLM offline Potencialidades dos Pequenos Modelos de Linguagem sLLMs como Assistentes Offline na Saúde Col…
Runs locally from ~2.23 GB disk (4 GB VRAM class GPUs with llama.cpp / guIDE).
Repository Files & Downloads
| File | Type | Quantization | Size | Link |
|---|---|---|---|---|
| phi35-saude-amazonia.Q4_K_M.gguf | GGUF | GGUF | 2.23 GB | Download |
Model Details
| Model ID | admin-lima/phi35-saude-amazonia-gguf |
|---|---|
| Author | admin-lima |
| Pipeline | text-generation |
| License | mit |
| Base model | microsoft/Phi-3.5-mini-instruct |
| Last modified | 2026-06-25T02:46:58.000Z |
Model README
---
language:
- pt
license: mit
library_name: transformers
pipeline_tag: text-generation
base_model: microsoft/Phi-3.5-mini-instruct
tags:
- text-generation
- sft
- phi3
- portuguese
- health
- offline-llm
- gguf
- quantized
- q4_k_m
---
Phi-3.5-mini — GGUF Q4_K_M · Saúde Coletiva Amazônia (sLLM offline)
> Potencialidades dos Pequenos Modelos de Linguagem (sLLMs) como Assistentes Offline na Saúde Coletiva: Curadoria Informacional contra Assimetrias na Amazônia Isolada. (ENANCIB 2026 / GT 8 — Ciência da Informação)
📋 Resumo
_sLLM_ (small LLM) em português para apoiar profissionais de saúde em comunidades isoladas da Amazônia, operando 100% offline com grounding (RAG) em um corpus oficial do SUS. A tese: a curadoria da informação — mais que o porte do modelo — determina a confiabilidade. Treinado em 1.000 diálogos clínicos sintéticos curados (pilares P3 Saúde Indígena e P5 Atenção Primária).
🧩 Este artefato — GGUF Q4_K_M (deploy smartphone)
GGUF quantizado Q4_K_M (~4 bits/peso, ~2.4 GB) derivado do fundido fp16 (admin-lima/phi35-saude-amazonia-merged) via llama.cpp. Voltado para inferência offline.
Como rodar (100% offline):
- Desktop/servidor:
llama.cpp(llama-cli -m <arquivo>.gguf) oullama-cpp-python. - Smartphone: apps Chatterbox, LM Studio, Maid ou PocketPal — abra o
.gguf.
./llama-cli -m phi35-saude-amazonia-gguf.Q4_K_M.gguf \
--chat-template chatml # Phi-3.5 / Qwen2.5: template system/user/assistant
Chat template: system / user / assistant (mesmo do Phi-3.5-mini).
📊 Resultados (conjunto hold-out, n=33)
| Modelo | Porte | TRR | FRR | F1 | Halluc. |
|---|---|---|---|---|---|
| Phi-3.5-mini (QLoRA) | 3.8B | 0.929 | 0.266 | 0.813 | 0.03 |
| Qwen2.5-0.5B (LoRA) | 500M | 0.857 | 0.053 | 0.889 | 0.03 |
TRR — relevância da resposta · FRR — taxa de recusa · F1 — F1 de recusa (recusar o que está fora do escopo) · Halluc. — taxa de alucinação.
🔗 Artefatos relacionados
| Artefato | Repositório |
|---|---|
| Dataset (SFT) | admin-lima/sllm-amazonia-saude-sft |
| Phi-3.5-mini — adapter | admin-lima/phi35-saude-amazonia-lora |
| Phi-3.5-mini — fundido fp16 | admin-lima/phi35-saude-amazonia-merged |
| ✅ Phi-3.5-mini — GGUF Q4_K_M | admin-lima/phi35-saude-amazonia-gguf |
| Qwen2.5-0.5B — adapter | admin-lima/qwen05b-saude-amazonia-lora |
| Qwen2.5-0.5B — fundido fp16 | admin-lima/qwen05b-saude-amazonia-merged |
| Qwen2.5-0.5B — GGUF Q4_K_M | admin-lima/qwen05b-saude-amazonia-gguf |
🛡️ Limitações e uso responsável
- Não é dispositivo médico nem substitui avaliação profissional. Use como apoio à decisão.
- Deve operar acoplado ao corpus RAG (pilares oficiais do SUS) para grounding.
- Treinado em dados sintéticos em PT-BR com foco regional (Amazônia); pode ter lacunas.
- Alucinação ≈ 3 % (não nula) — sempre verifique informações críticas.
- Mantenha o modelo offline em ambientes sem conectividade; respeite a privacidade dos dados locais.
📜 Licença
Derivado de microsoft/Phi-3.5-mini-instruct. Distribuído sob a licença do modelo base (mit). Dataset sintético próprio.
📚 Citação (preliminar)
@misc{sllm_amazonia_saude_2026,
title = {sLLMs Offline de Saúde Coletiva na Amazônia},
author = {admin-lima},
year = {2026},
note = {ENANCIB 2026 / GT 8 — pré-print}
}Run admin-lima/phi35-saude-amazonia-gguf with guIDE
Download guIDE — the AI-native code editor with local LLM inference and 69 built-in tools.
Source: Hugging Face · Compare models