Token Sayım CLI Nasıl Yazılır

Bu rehber ne yapar

Token Sayım CLI rehberi komutu küçük, tekrar koşulabilir ve dosyaya kanıt bırakan hale getirir. Solo çalışırken bu disiplin, bir hafta sonra kendi notunuza güvenmenizi sağlar. Bu iş sonunda Llama 3.3 70B için tarihli bir karar kanıtı oluşur, RTX 3060 12GB sınıfı donanım not edilir ve ölçüm Türkçe halüsinasyon direnci ile ilişkilendirilir. Akış Python ile yürür; daha geniş bağlam Kurs G005: LoRA ve Veri Hazırlığı içinde işlenir.

Yasal uyarı: Bu içerik eğitim amaçlı teknik çalışma notudur; hukuki görüş, mevzuat yorumu, uyum belgesi veya profesyonel danışmanlık değildir. Kişisel veri, sağlık, finans, çocuk/öğrenci verisi, telif veya regüle sektörlerde gerçek uygulamadan önce yetkin hukuk/uyum uzmanıyla yazılı değerlendirme alın.
Operatör notu: Token Sayım CLI Nasıl Yazılır: CLI akışının değeri komutun idempotent olmasıdır; aynı komut ikinci kez koşunca çıktıyı bozuyorsa işletim defteri eksiktir. Orta seviyede komutun yanında hata modunu da yazın; gelecekteki bakım çoğu zaman bu satırdan başlar. Bu rehberde beklenen kanıt outputs/token-sayim-cli.json dosyasıdır.

Ön koşullar

  • Ubuntu 24.04 LTS ya da eşdeğer geliştirme ortamı.
  • Yerel çalışma zamanı kontrolü: python -V.
  • Token Sayım CLI: Komutların yazabileceği outputs, logs ve reports klasörleri; sürüm bilgisini aynı klasöre koyun.
  • Terminal çıktısı UTF-8 olmalı; Windows tarafında şüphede kalırsanız chcp çıktısını kaydedin.

Adımlar

  1. Kanıt klasörünü aç. Token Sayım CLI için çıktıyı token sayim cli adıyla ayır; aynı klasöre log ve kısa rapor da girecek.
mkdir -p outputs logs reports
  1. Küçük kanıtı üret. Token Sayım CLI için CLI işi ikinci kez koşulduğunda aynı dosya düzenini korumalı; aksi halde otomasyon güvenilmez olur. Bu komut gerçek veriyi çağırmadan Llama 3.3 70B etiketini karar dosyasına işler.
mkdir -p outputs
python - <<'PY'
from pathlib import Path
Path("outputs/token-sayim-cli.json").write_text('{"model":"llama-3-3-70b","status":"kontrol-tamam"}\n', encoding="utf-8")
print("outputs/token-sayim-cli.json yazıldı")
PY
  1. Özeti kilitle. Token Sayım CLI özetini daha sonra değişiklik yakalamak için kullanacaksınız; Türkçe halüsinasyon direnci notunu bu hash ile birlikte saklayın.
python - <<'PY'
from hashlib import sha256
from pathlib import Path
p = Path("outputs/token-sayim-cli.json")
print(sha256(p.read_bytes()).hexdigest(), p)
PY
  1. Türkçe kırılmayı ara. Token Sayım CLI Nasıl Yazılır sırasında Türkçe ekler ve özel adlar token sayısını şişiriyorsa aynı test cümlesini kısa ve uzun biçimde iki kez kaydedin. Çıktı temizse Python tarafındaki sıradaki adıma geçebilirsiniz.

Doğrulama

Tek komutla son durumu doğrula:

python - <<'PY'
import json
from pathlib import Path
p = Path("outputs/token-sayim-cli.json")
data = json.loads(p.read_text(encoding="utf-8"))
print(p.exists(), data["status"])
print("kanıt:", p)
print("model:", data["model"])
PY

Beklenen çıktı:

True kontrol-tamam
kanıt: outputs/token-sayim-cli.json
model: llama-3-3-70b

Yaygın Hatalar

  • `ModuleNotFoundError` — Python ortamı rehber için beklenen paketi görmüyor. Çözüm: python -V çıktısını kaydedin, sanal ortamı etkinleştirin ve komutu aynı kabukta tekrar çalıştırın.
  • `output file is empty` — Komut başarılı dönmüş gibi görünse de kanıt dosyasına içerik yazmamış. Çözüm: outputs/token-sayim-cli.json dosyasını silip komutu tekrar çalıştırın; ikinci koşuda dosya boyutunu kontrol edin.
  • `Türkçe karakterler bozuk` — Token Sayım CLI Nasıl Yazılır çıktısında Türkçe harfler okunmuyorsa kodlama katmanı karışmıştır. Çözüm: locale çıktısını kontrol edin ve dosyayı UTF-8 olarak tekrar üretin.
  • `outputs/token-sayim-cli.json yok` — Rehberin sonunda beklenen kanıt dosyası oluşmamış. Çözüm: önce çalışma klasörünü oluşturun, sonra karar kanıtı adımını tek başına tekrar çalıştırın.
Veri koruma uyarısı: Bu rehber KVKK uyum kararı vermez. Kişisel veri içeren örnekleri üretimde kullanmadan önce amaç, saklama süresi, erişim yetkisi ve yurtdışı aktarım ihtimalini yetkin hukuk/uyum uzmanıyla doğrulayın. Başlangıç noktası: KVKK ve AI.

İlgili rehberler

İlgili katalog girişleri