На 22 октомври 2024 г., вторник, от 17:15 ч., в заседателната зала на ФМИ ще се проведе научен семинар по проект AI-BEST на тема "Халюцинации при големите езикови модели за български език" с лектори Мелания Бербатова (докторант във ФМИ) и Йоан Саламбашев (студент в МП ИИОЗ). Поканени са всички заинтересовани – студенти, преподаватели и гости на ФМИ.

Анотация: Големите езикови модели (ГЕМ) са технология, която все повече навлиза в ежедневието ни. Един от основните проблеми на употребата им, е склонността им да създават неверни или безмислени твърдения, или иначе казано - да халюцинират. В този семинар ще представим проблема за халюцинациите в ГЕМ, какви методи за оценката им и ограничаването им съществуват и по-специално при употребата им на български език.
Оценката за нивото на халюцинации се основава на задача за отговаряне на въпроси (QA, question answering), като се оценяват отговорите на голям езиков модел спрямо истината или се използва подход с друг езиков модел в ролята на съдия (LLM-as-a-judge). Ще демонстрираме и метод за оценяване на халюцинации чрез статистически методи, без използване на референтни данни.

Проектът AI-BEST (AI and Big data for Education, Software and information Technologies) - Приложение на изкуствения интелект и големите данни в образователните, софтуерните и информационните технологии, дейност 3.4 на проекта SUMMIT - е проект на ФМИ, който стартира през месец юли 2023 г. Проектът е финансиран от Европейския съюз - NextGenerationEU, чрез Националния план за възстановяване и устойчивост на Република България, проект № BG-RRP-2.004-0008-C01. Основна цел на AI-BEST е изследване и разработване на подходи и технологии за приложение на методите на изкуствения интелект и големите данни в различни области на информатиката и компютърните науки.