Yapay zeka asistanlarının marka tavsiyeleri, alıcıların ilk sorusundan sonra büyük oranda değişiyor. Clovion AI'nın yeni araştırmasına göre, Claude, ChatGPT ve Gemini gibi yapay zeka asistanlarının önerdiği markaların %62'si, kullanıcının tek bir takip sorusu sormasının ardından listeden kayboluyor. Oslo merkezli araştırma firması, 36 farklı B2B yazılım ve fintech kategorisinde 69.120 çoklu konuşma turu gerçekleştirdi. Araştırma, "en iyi CRM araçları" gibi bir açılış sorusu ve ardından gerçekçi bir takip sorusu içeriyordu.
Clovion COO'su Zahir Hasan, raporun ilk taslağında bir yazım hatası olduğunu ve aslında 330 çelişki tespit ettiklerini belirtti. Düzeltilmiş verilere göre, Claude, ChatGPT ve Gemini arasında marka bilgilerinde %15 oranında çelişki bulunuyor. Ancak daha çarpıcı olan, her modelin farklı hata profilleri sergilemesi. Claude, markaların özelliklerini 160 kez eksik tanımlarken sadece 10 kez abartıyor. ChatGPT 70 kez eksik tanımlıyor ve hiç abartmıyor. Buna karşılık Gemini, 80 kez abartma ve 30 kez eksik tanımlama yapıyor.
Araştırma, aynı sorunun tekrarlanması durumunda öneri listesinin %90'ının korunduğunu, ancak "küçük bir ekip için" gibi sıradan bir alıcı detayı eklendiğinde bu oranın sadece %28'e düştüğünü gösteriyor. Hasan, "küçük ekip" ifadesinin özel olarak seçilmediğini, benzer şekilde "büyük bir kurumsal şirket için" ifadesinin de yaklaşık %72 oranında bir düşüşe neden olduğunu belirtti. Bu, yapay zeka asistanlarının marka tavsiyelerinde istikrarlı olmadığını, aksine alıcının spesifik ihtiyaçlarına göre şekillendiğini gösteriyor.
Teknik Analiz
Araştırmanın en önemli çıkarımı, yapay zeka asistanlarının hata yönünün, markanın hangi tür içeriği sunduğuna bağlı olduğu. Gemini, pazarlama materyallerine ve videolara daha fazla güvendiği için markaların abartılı tanıtımlarını kredilendirirken, Claude ve ChatGPT dokümantasyon ve ürün sayfalarına odaklanarak daha doğru ancak eksik tanımlamalar yapıyor. Frederick Vallaeys'in belirttiği gibi, bu hatalar fark edilmiyor çünkü insan beyni akıcı metinleri kelime kelime okumak yerine tahmin ediyor. Bu nedenle, markalar için kritik nokta, yapay zeka asistanlarının hangi içeriğe dayandığını anlamak ve buna göre strateji geliştirmek.
