GraySoft
Projects Models Compare Cloud benchmarks FAQ Download guIDE →
Model Intelligence Sheet

admin-lima/phi35-saude-amazonia-gguf overview

Phi 3.5 mini — GGUF Q4 K M · Saúde Coletiva Amazônia sLLM offline Potencialidades dos Pequenos Modelos de Linguagem sLLMs como Assistentes Offline na Saúde Col…

transformersgguftext-generationsftphi3portuguesehealthoffline-llmquantizedq4_k_mptbase_model:microsoft/Phi-3.5-mini-instructbase_model:quantized:microsoft/Phi-3.5-mini-instructlicense:mitendpoints_compatibleregion:usconversational

Runs locally from ~2.23 GB disk (4 GB VRAM class GPUs with llama.cpp / guIDE).

Downloads
0
Likes
0
Pipeline
text-generation

Repository Files & Downloads

1 GGUF files detected
Direct downloads for local inference
FileTypeQuantizationSizeLink
phi35-saude-amazonia.Q4_K_M.ggufGGUFGGUF2.23 GBDownload

Model Details

Model IDadmin-lima/phi35-saude-amazonia-gguf
Authoradmin-lima
Pipelinetext-generation
Licensemit
Base modelmicrosoft/Phi-3.5-mini-instruct
Last modified2026-06-25T02:46:58.000Z

Model README

---

language:

- pt

license: mit

library_name: transformers

pipeline_tag: text-generation

base_model: microsoft/Phi-3.5-mini-instruct

tags:

- text-generation

- sft

- phi3

- portuguese

- health

- offline-llm

- gguf

- quantized

- q4_k_m

---

Phi-3.5-mini — GGUF Q4_K_M · Saúde Coletiva Amazônia (sLLM offline)

> Potencialidades dos Pequenos Modelos de Linguagem (sLLMs) como Assistentes Offline na Saúde Coletiva: Curadoria Informacional contra Assimetrias na Amazônia Isolada. (ENANCIB 2026 / GT 8 — Ciência da Informação)

📋 Resumo

_sLLM_ (small LLM) em português para apoiar profissionais de saúde em comunidades isoladas da Amazônia, operando 100% offline com grounding (RAG) em um corpus oficial do SUS. A tese: a curadoria da informação — mais que o porte do modelo — determina a confiabilidade. Treinado em 1.000 diálogos clínicos sintéticos curados (pilares P3 Saúde Indígena e P5 Atenção Primária).

🧩 Este artefato — GGUF Q4_K_M (deploy smartphone)

GGUF quantizado Q4_K_M (~4 bits/peso, ~2.4 GB) derivado do fundido fp16 (admin-lima/phi35-saude-amazonia-merged) via llama.cpp. Voltado para inferência offline.

Como rodar (100% offline):

  • Desktop/servidor: llama.cpp (llama-cli -m <arquivo>.gguf) ou llama-cpp-python.
  • Smartphone: apps Chatterbox, LM Studio, Maid ou PocketPal — abra o .gguf.
./llama-cli -m phi35-saude-amazonia-gguf.Q4_K_M.gguf \
  --chat-template chatml  # Phi-3.5 / Qwen2.5: template system/user/assistant

Chat template: system / user / assistant (mesmo do Phi-3.5-mini).

📊 Resultados (conjunto hold-out, n=33)

| Modelo | Porte | TRR | FRR | F1 | Halluc. |

|---|---|---|---|---|---|

| Phi-3.5-mini (QLoRA) | 3.8B | 0.929 | 0.266 | 0.813 | 0.03 |

| Qwen2.5-0.5B (LoRA) | 500M | 0.857 | 0.053 | 0.889 | 0.03 |

TRR — relevância da resposta · FRR — taxa de recusa · F1 — F1 de recusa (recusar o que está fora do escopo) · Halluc. — taxa de alucinação.

🔗 Artefatos relacionados

| Artefato | Repositório |

|---|---|

| Dataset (SFT) | admin-lima/sllm-amazonia-saude-sft |

| Phi-3.5-mini — adapter | admin-lima/phi35-saude-amazonia-lora |

| Phi-3.5-mini — fundido fp16 | admin-lima/phi35-saude-amazonia-merged |

| ✅ Phi-3.5-mini — GGUF Q4_K_M | admin-lima/phi35-saude-amazonia-gguf |

| Qwen2.5-0.5B — adapter | admin-lima/qwen05b-saude-amazonia-lora |

| Qwen2.5-0.5B — fundido fp16 | admin-lima/qwen05b-saude-amazonia-merged |

| Qwen2.5-0.5B — GGUF Q4_K_M | admin-lima/qwen05b-saude-amazonia-gguf |

🛡️ Limitações e uso responsável

  • Não é dispositivo médico nem substitui avaliação profissional. Use como apoio à decisão.
  • Deve operar acoplado ao corpus RAG (pilares oficiais do SUS) para grounding.
  • Treinado em dados sintéticos em PT-BR com foco regional (Amazônia); pode ter lacunas.
  • Alucinação ≈ 3 % (não nula) — sempre verifique informações críticas.
  • Mantenha o modelo offline em ambientes sem conectividade; respeite a privacidade dos dados locais.

📜 Licença

Derivado de microsoft/Phi-3.5-mini-instruct. Distribuído sob a licença do modelo base (mit). Dataset sintético próprio.

📚 Citação (preliminar)

@misc{sllm_amazonia_saude_2026,
  title  = {sLLMs Offline de Saúde Coletiva na Amazônia},
  author = {admin-lima},
  year   = {2026},
  note   = {ENANCIB 2026 / GT 8 — pré-print}
}

Run admin-lima/phi35-saude-amazonia-gguf with guIDE

Download guIDE — the AI-native code editor with local LLM inference and 69 built-in tools.

Download guIDE → · Browse 524k+ models · Compare models

Source: Hugging Face · Compare models