Ką sužinome įveikdami DI

Tiriame, kaip kalbos modeliai klysta praktikoje, ir skelbiame tai, ką atrandame. Mūsų tyrimai formuoja testus, kuriuos atliekame savo klientams.

  • Saugumas, kuris pasimeta vertime: žalingos užklausos visomis 24 ES kalbomis

    Išsiuntėme 1 053 žalingus prašymus kiekviena oficialiąja ES kalba 34 atvirųjų svorių kalbos modeliams. Ne anglų kalba jie šiuos prašymus įvykdo daugiau nei dvigubai dažniau, o modelio rezultatai anglų kalba mažai ką pasako apie jo saugumą latvių, maltiečių ar airių kalba. Su interaktyvia rezultatų naršykle pagal kalbą, modelį ir žalos rūšį.

    • Daugiakalbis saugumas
    • Lyginamasis testas
    • Atvirųjų svorių LLM