Sari la conținutul principal

Conversații cu modele AI locale

De ce modele AI locale?

Lucrul local cu modelele AI oferă avantaje semnificative:

  • Inherently sigur - datele tale rămân pe computerul tău și nu sunt trimise niciodată către servere externe
  • Fără costuri suplimentare - modelele locale nu au costuri API pe utilizare
  • Confidențialitate garantată - ideal pentru documente și informații sensibile

De ce Ollama?

Ollama este un instrument care îți permite să rulezi ușor modelele AI local. Este instalat pe fiecare computer în mod independent, astfel încât nu există limitări privind numărul de utilizatori - nu este neceserver partajat.

Instalarea Ollama

  1. Accesează pagina de download Ollama
  2. Descarcă versiunea pentru sistemul tău de operare (Windows, macOS sau Linux)
  3. Instalează Ollama urmând installerul
  4. După instalare, Ollama rulează automat în fundal

Instalarea unui model lingvistic

După instalarea Ollama trebuie să descarci cel puțin un model lingvistic:

  1. Deschide interfața Ollama (prin pictograma din bara de sistem sau terminal)
  2. Descarcă un model lingvistic la alegere

Model recomandat

Alege, de preferință, un model care are capacități tool și vision:

  • Tool capabilities - modelul poate utiliza toate uneltele disponibile în aplicație, cum ar fi căutarea pe internet și generarea de imagini
  • Vision capabilities - modelul poate analiza și descrie imagini
Model recomandat

qwen3-vl:4b oferă un echilibru bun între viteză și capacități de tool/vision. Instalează acest model prin terminal:

ollama pull qwen3-vl:4b

Alegerea modelului în funcție de hardware

Performanța unui model depinde în mare măsură de hardware-ul calculatorului tău:

HardwareRecomandare
Limitat (8GB RAM, fără GPU)Alege modele mai mici (1-4B parametri)
Mediu (16GB RAM, GPU de bază)Modele până la 7B parametri
Puternic (32GB+ RAM, GPU modern)Modele mai mari posibile (13B+)
Viteza vs. calitate

Un model mai mic, în general, oferă performanțe mai bune în termeni de viteză, dar poate oferi răspunsuri mai puțin precise. Experimentează pentru a găsi cel mai bun echilibru pentru situația ta.

Configurarea în aplicația desktop

Odată ce Ollama rulează cu un model instalat, aplicația desktop îl detectează automat. Poți apoi să selectezi modelul local în chat ca alternativă la modelele din cloud.

Modele disponibile cu suport tool/vision

Vezi lista completă pe ollama.com/library. Filtrează după modele cu:

  • etichetă Tools pentru capabilități de tool
  • etichetă Vision pentru recunoaștere vizuală

Opțiuni populare:

  • qwen3-vl:4b - Compact, rapid, tool + vision
  • llama3.2-vision - Capabilități Vision
  • mistral - Taskuri generale rapide