Istraživanje

Što učimo kad probijamo UI

Proučavamo kako jezični modeli zakazuju u praksi i objavljujemo ono što otkrijemo. Naša istraživanja oblikuju testove koje provodimo za naše klijente.

  • Sigurnost koja se gubi u prijevodu: štetni upiti na svim 24 jezicima EU-a

    Testirali smo 34 jezična modela s otvorenim težinama s 1.053 štetna zahtjeva na svakom službenom jeziku EU-a. Izvan engleskog udovoljavaju im više nego dvostruko češće, a rezultati modela na engleskom malo govore o njegovoj sigurnosti na latvijskom, malteškom ili irskom. S interaktivnim preglednikom rezultata po jeziku, modelu i vrsti štete.

    • Višejezična sigurnost
    • Referentni test
    • LLM-ovi s otvorenim težinama