Yapay zekâ daha iyi başlıklar yazmayı öğrendi ^{CEFR B2}

Yale School of Management'dan Tong Wang, K. Sudhir ve doktora öncesi araştırma görevlisi Hengguang Zhou tarafından yürütülen araştırma, üretken yapay zekânın başlık üretiminde neden daha etkileyici ve güvenilir içerik üretebileceğini gösteriyor. Çalışma A/B testi verilerine odaklandı; bu yöntemde iki başlık farklı okuyuculara gösterilip tıklama oranları karşılaştırılıyor. Ekip, sadece kazanan başlıklarla eğitilen bir dil modelinin yüzeysel ipuçlarına dayanarak "clickbait" üretebileceğini savundu.

Bunun önüne geçmek için araştırmacılar, bir başlığın daha ilgi çekici olmasının olası nedenleri hakkında rakip hipotezler üreten, sonra bu hipotezleri veri üzerinde test ederek doğrulanmış açıklama setleri çıkaran bir büyük dil modeli geliştirdi. Takım, Upworthy için hazırlanmış 23.000 başlık ve 4.500 makaleyi içeren veri kümesinin bölümlerini kullandı ve modelin hipotezlerinin genelleşme yeteneğini sınadı. Değerlendirme için Upworthy'nin A/B test sonuçlarına dayanan önceden eğitilmiş bir puanlama modeli kullanıldı.

Yaklaşımın etkinliği yaklaşık 150 katılımcıyla test edildi: insanlar ve standart AI başlıkları yaklaşık %30 oranında en iyi olarak seçilirken, yeni model %44 oranında seçildi. Analizler, standart modellerin daha çok sansasyonel dile yaslandığını gösterdi. Araştırmacılar yöntemin müşteri hizmetleri koçluğu gibi farklı alanlara taşınabileceğini ve ses ile görsel verilerin de girdiye dahil edilebileceğini ekledi. Sonuç olarak bilgi yönlendirmeli AI'nın içerik kalitesini ve güvenilirliğini artırabileceği belirtildi.