Tüm vakalar
V2 · AISanayi grubu

Spam/ilgililik promptunun v1 → v2 yeniden tasarımı

Ölçülen etki%23 → %88–96Duyarlılık; kesinlik %95 üzerinde korunarak

Bağlam

Büyük ölçekli sanayi grubu ve yönetim kurulu başkanı (kişi + kurum izleme) · 6 mecra

Problem

Mevcut LLM promptu “spam” dediğinde %97,8 haklıydı ama alakasız içeriğin yalnızca %23,2’sini yakalıyordu. 5.696 kayıtlık bir dönemde 3.901 alakasız kayıt raporlara sızıyordu. Üstüne adaş kişiler (aynı ada sahip 6 farklı hesap) ve karışan tüzel kişilikler veriyi kirletiyordu.

Yaklaşım

Hatayı ölçtüm, kök nedeni buldum (platform kuralını ezen bir tie-break cümlesi), promptu sert bir “ifade kapısı” (phrase gate) etrafında yeniden yazdım; adaş kişi ve kapsam dışı kurum bölümleri, yapısal çöp imza listesi ve her karara hata kodu eklendi. 137 kayıtlık, 7 katmanlı regresyon seti kurdum.

Etki

Duyarlılık %23’ten %88–96 bandına çıktı (hedef %85+ idi), kesinlik %95 üzerinde korunarak. Her sürüm değişikliği aynı sete karşı koşuluyor; gerileme anında görülüyor.

Diğer vakalar