AI modeller daha az yaygın dillerde çok daha pahalı

Yeni bir çalışma, AI modellerinin bazı dilleri işlemek için önemli ölçüde daha fazla token gerektirdiğini gösteriyor. Bu farklar, daha az temsil edilen dillerin kullanıcılarının aynı hizmetler için daha fazla ödeme riski taşıdığını ortaya koyuyor.

Araştırmacılar, internet üzerindeki en yaygın 20 dil arasındaki token farkının beş kat kadar büyük olabileceğini tespit etti. Araştırma 200 dile genişletildiğinde, bir modeldeki fark 17 katına kadar çıktı. Daha fazla token, artan maliyetlerin yanı sıra daha uzun yanıt süreleri ve AI modellerinin bağlam penceresine daha az bilginin sığması anlamına geliyor.