AI-modeller mycket dyrare på mindre vanliga språk

Computer Swedensv

AI-modeller mycket dyrare på mindre vanliga språk

En ny studie från Coalition for Language Equity in AI Research visar att AI-modeller kräver betydligt fler tokens för att behandla vissa språk än andra. Skillnaderna innebär att användare av mindre representerade språk riskerar att betala mer för samma tjänster, rapporterar Rest of World . Forskarna upptäckte att token-skillnaden mellan de 20 vanligaste språken på internet kunde vara upp till fem gånger så stor. När undersökningen utökades till 200 språk utökades skillnaden till hela 17 gånger i en av de undersökta modellerna. Utöver ökade kostnader innebär fler tokens också längre svarstider och att mindre information får plats i AI-modellernas kontextfönster. Språk som använder skriftsyste

This is a short summary published by AI Global Wire. The full article is owned and hosted by Computer Sweden — open it there to read it in full.

Read the full story at Computer Sweden
  • Verktyg
  • Forskning

Related AI news