Turkcell LLM Yerel Çıkarım Nasıl Alınır
Bu rehber ne yapar
Turkcell LLM Yerel Çıkarım kararında model adı, kuantizasyon, bağlam penceresi ve Türkçe cevap tutarlılığı aynı deftere yazılır. Bu rehber tek koşuyla o defterin ilk satırını üretir. Bu iş sonunda Turkcell LLM 7B için tarihli bir karar kanıtı oluşur, RTX 3060 12GB sınıfı donanım not edilir ve ölçüm Türkçe halüsinasyon direnci ile ilişkilendirilir. Akış GitHub Actions ile yürür; daha geniş bağlam Kurs G003: Türkçe İstem ve Şablon içinde işlenir.
Yasal uyarı: Bu içerik eğitim amaçlı teknik çalışma notudur; hukuki görüş, mevzuat yorumu, uyum belgesi veya profesyonel danışmanlık değildir. Kişisel veri, sağlık, finans, çocuk/öğrenci verisi, telif veya regüle sektörlerde gerçek uygulamadan önce yetkin hukuk/uyum uzmanıyla yazılı değerlendirme alın.
Operatör notu: Turkcell LLM Yerel Çıkarım Nasıl Alınır: Model seçiminde tek skor yerine bağlam, kuantizasyon ve Türkçe cevap tutarlılığını aynı kararda saklayın. Orta seviyede komutun yanında hata modunu da yazın; gelecekteki bakım çoğu zaman bu satırdan başlar. Bu rehberde beklenen kanıt outputs/turkcell-llm-cikarim.txt dosyasıdır.
Ön koşullar
- Ubuntu 24.04 LTS ya da eşdeğer geliştirme ortamı.
- Yerel çalışma zamanı kontrolü:
git --version. - Turkcell LLM Yerel Çıkarım: Karşılaştırılacak en az bir yerel model etiketi; örnek çalışmada model indirme yerine karar dosyası üretilir.
- Terminal çıktısı UTF-8 olmalı; Windows tarafında şüphede kalırsanız
chcpçıktısını kaydedin.
Adımlar
- Kanıt klasörünü aç. Turkcell LLM Yerel Çıkarım için çıktıyı
turkcell llm cikarimadıyla ayır; aynı klasöre log ve kısa rapor da girecek.
mkdir -p outputs logs reports
- Küçük kanıtı üret. Turkcell LLM Yerel Çıkarım için Model kararında sonuç kadar model etiketi ve kuantizasyon notu da önemlidir; aynı istemi sonra tekrar koşacaksınız. Bu komut gerçek veriyi çağırmadan Turkcell LLM 7B etiketini karar dosyasına işler.
mkdir -p outputs
printf '%s\n' 'turkcell-llm-cikarim | model=turkcell-llm-7b | kontrol=tamam' 'komut=ollama list' 'metric=local_models' | tee outputs/turkcell-llm-cikarim.txt
ollama list
- Özeti kilitle. Turkcell LLM Yerel Çıkarım özetini daha sonra değişiklik yakalamak için kullanacaksınız; Türkçe halüsinasyon direnci notunu bu hash ile birlikte saklayın.
sha256sum outputs/turkcell-llm-cikarim.txt
- Türkçe kırılmayı ara. Turkcell LLM Yerel Çıkarım Nasıl Alınır cevabı ortasında İngilizceye kayarsa sistem istemine tek dil kısıtı ekleyin ve aynı girdiyi tekrar çalıştırın. Çıktı temizse GitHub Actions tarafındaki sıradaki adıma geçebilirsiniz.
Maliyet karar kaydı
TRY maliyet notu: Bu rehberdeki ölçüm teknik davranışı anlamak içindir; donanım tam yükte uzun süre çalışacaksa maliyet hesabını TCO karar kaydı içinde ayrı tutun. Ev, ofis ve sanayi tarifesi aynı varsayım değildir. kWh fiyatını canlı fiyat etiketi gibi değil; tarih, tarife türü ve kaynakla birlikte karar kaydına yazın.
Doğrulama
Tek komutla son durumu doğrula:
test -s outputs/turkcell-llm-cikarim.txt && sed -n '1,3p' outputs/turkcell-llm-cikarim.txt
Beklenen çıktı:
turkcell-llm-cikarim | model=turkcell-llm-7b | kontrol=tamam
kanıt: outputs/turkcell-llm-cikarim.txt
Türkçe karakter kontrolü: ı ş ç ğ ö ü
Yaygın Hatalar
- `command not found: github` — GitHub Actions kurulu değil ya da kabuk PATH içinde değil. Çözüm: aracı resmi kurulum yoluyla ekleyin, sonra aynı kabukta sürüm komutunu çalıştırın.
- `Error: model not found` — Turkcell LLM 7B etiketi yerel önbellekte yok veya yanlış yazıldı. Çözüm:
ollama listçıktısını kanıt dosyasına ekleyin ve model adını küçük farklara karşı kontrol edin. - `Türkçe karakterler bozuk` — Turkcell LLM Yerel Çıkarım Nasıl Alınır çıktısında Türkçe harfler okunmuyorsa kodlama katmanı karışmıştır. Çözüm:
localeçıktısını kontrol edin ve dosyayı UTF-8 olarak tekrar üretin. - `outputs/turkcell-llm-cikarim.txt yok` — Rehberin sonunda beklenen kanıt dosyası oluşmamış. Çözüm: önce çalışma klasörünü oluşturun, sonra karar kanıtı adımını tek başına tekrar çalıştırın.
Veri koruma uyarısı: Bu rehber KVKK uyum kararı vermez. Kişisel veri içeren örnekleri üretimde kullanmadan önce amaç, saklama süresi, erişim yetkisi ve yurtdışı aktarım ihtimalini yetkin hukuk/uyum uzmanıyla doğrulayın. Başlangıç noktası: KVKK ve AI.
İlgili rehberler
- llama.cpp Sunucu Nasıl Başlatılır — kardeş iş
- vLLM OpenAI Uyumlu Sunucu Nasıl Açılır — sıradaki kontrol
- Kurs G003: Türkçe İstem ve Şablon — kurs bağlamı
İlgili katalog girişleri
- Turkcell LLM 7B — bu rehberde kullanılan model
- RTX 3060 12GB — test edilen donanım sınıfı
- Türkçe halüsinasyon direnci — karşılaştırma metriği
- GitHub Actions — kullanılan çalışma aracı
- KVKK ve AI — veri işleme notu