Какво научаваме, когато пробиваме ИИ

Изучаваме как езиковите модели се провалят на практика и публикуваме откритията си. Изследванията ни оформят тестовете, които провеждаме за нашите клиенти.

  • Безопасност, която се губи в превода: вредни подкани на всички 24 езика на ЕС

    Изпратихме 1053 вредни заявки на всеки официален език на ЕС до 34 езикови модела с отворени тегла. Извън английския те изпълняват заявките повече от два пъти по-често, а резултатите на даден модел на английски казват малко за безопасността му на латвийски, малтийски или ирландски. С интерактивен преглед на резултатите по език, модел и вид вреда.

    • Многоезична безопасност
    • Бенчмарк
    • LLM с отворени тегла