«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При...

Дата загрузки:11.04.2025 06:55:25

«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

11.04.2025
 «Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При этом один из недавних обзоров показал, что 94% исследований машинного обучения в здравоохранении не прошли даже первую стадию клинических испытаний. Как в таком случае можно говорить о надёжности ИИ.

Суть. Тем и ценнее открытие учёных из T-Bank AI Research: мы сможем не только понимать, почему модель выдала тот или иной ответ, но и в дальнейшем влиять на этот процесс, повышая его точность и в целом доверие к ИИ. Как отмечает CEO AI-лаборатории NDT Валерий Ковальский, если бизнесу проще понять, как работает ИИ, — он быстрее принимает решение о его внедрении. А это важное конкурентное преимущество на рынке.

Этический вопрос. ИИ-модели не застрахованы от социальной предвзятости — стереотипы, царящие в обществе, могут попасть в обрабатываемый массив данных. Отсюда и довольно неэтичное поведение многих моделей. Например, Amazon столкнулся с критикой, когда интеллектуальная рекрутинговая система компании отбирала кандидатов по гендерному признаку.

И новый метод поможет понять, как работают модели, и в дальнейшем позволит разработать методы для их контроля. По словам разработчиков, благодаря последующим технологиям удастся отслеживать, когда модель хочет сказать что-то некорректное, и предотвращать это. Так что даже такие негативные аспекты прогресса можно нивелировать.


ИСТОЧНИК: телеграм-канал

Новости госзаказа

01.11.2026
Огромный золотой перстень  с процессией львиноголовых демонов, Тиринф, Греция, крито-микенская культура, XV век до н. э.
Кольцо нашли в 1915 году на раскопках в Тиринфе на Пелопоннесе (Арголиде), на северо-востоке от цитадели, в основании фундамента микенского дома. Оно входило в состав так называемого «Сокровища Тиринфа» — клада, обнаруженного при археологических раскопках. Ему уже примерно 3500 лет, вес — почти 83 грамма, что делает его самым большим из сохранившихся микенских перстней-печаток. Размеры щитка — 7,5 х 3,5 см. Но самое интересное здесь даже не размер и не количество золота, а изображение на щитке...
01.11.2026
Тургенев, "Новь"
Это последний роман Тургенева, и посвящен он самому человечному и симпатичному моменту русского революционного движения - хождению в народ. Тогда множество молодых образованных дуралеев собралось по деревням агитировать за революцию мужиков. Мужики их в основном и повыдавали полиции, потому что те несли вещи, совершенно не отвечающие их пожеланиям к миру и представлениям. Вот "Новь" это, видимо, главный роман про это явление - я считаю преступлением, что по нему еще не сняли ситком, потому что столкновение...
01.11.2026
175 лет Николаевской железной дороге
1 ноября 1851 года (по старому стилю) в 11:15 из Санкт-Петербурга в Москву отправился пассажирский поезд. На следующий день в 9 утра его встречала ликующая толпа москвичей.Пассажиры провели в пути 21 час 45 минут и преодолели 644 километра по самой длинной на тот момент двухпутной железной дороге в мире.Как строили магистраль – рассказываем в карточках
01.11.2026
Александр Новак принял участие в заседании группы семи стран ОПЕК
Стороны оценили текущую ситуацию и перспективы развития мирового нефтяного рынка.В состав группы семи входят Саудовская Аравия, Россия, Ирак, Кувейт, Казахстан, Алжир и Оман.Семь стран – участниц приняли решение сохранить в декабре 2026 года требуемый уровень добычи, установленный на сентябрь 2026 года. Страны – участницы ОПЕК подтвердили свою коллективную приверженность полному соблюдению декларации о сотрудничестве.Семь стран – участниц ОПЕК продолжат проводить ежемесячные встречи для оценки рыночной...
01.11.2026
«Время музейных поэтов»: московские гастроли сокровищ Петергофа
В Музее русского импрессионизма открылась выставка о том, как восстанавливали коллекцию Петергофа.Вадима Знаменова называют «третьим отцом» Петергофа – после Петра I, основавшего императорскую резиденцию, и Николая I, существенно ее преобразовавшего. Главным делом Знаменова стало восстановление Петергофа в послевоенные годы. В то время дворцовый комплекс представлял собой едва уцелевшие после бомбежек руины, а от музейных фондов осталось лишь 20%.Для Знаменова было важно возвращать предметы в привычную...
31.10.2026
Сотрудничество России с Африкой имеет давнюю историю.
Сотрудничество России с Африкой имеет давнюю историю. В самом конце XIX века тесные и дружественные отношения связывали нашу страну с Эфиопией, которой Санкт-Петербург оказывал военную, политическую и научную поддержку.Опытный геолог и организатор Николай Курмаков был направлен в Эфиопию для разведки золотых месторождений и внедрения научных методов добычи. Он провёл геологическое картирование, попутно открыв неизвестное месторождение платины, и представил руководству страны детальный отчёт с планом...
30.10.2026
Законопроект о «возрастном» флоте вынесен на общественное обсуждение
Предлагается ограничить заход в российские морские порты судов старше 50 лет под российским флагом и 40 лет – под иностранным. При этом иностранные суда старше 30 лет должны будут ежегодно подтверждать соответствие требованиям безопасности и защиты морской среды – документ об этом будет выдавать РС Класс.Для адаптации к новым правилам предусмотрен переходный период. В случае принятия закон вступит в силу через 180 дней после официального опубликования. Изменения призваны снизить риски аварий и экологических...
30.10.2026
 МИПФ-2026 объединил участников из более чем 30 стран
Более 5500 человек из свыше 30 стран и более 70 российских регионов приняли участие во втором Московском инвестиционно-промышленном форуме.Деловая программа включала около 60 мероприятий, посвященных инвестициям, запуску высокотехнологичных производств и подготовке кадров. На выставке представили разработки от антропоморфных роботов и робособак до умных протезов. Страной-партнером выступил Китай.Во время форума были достигнуты договоренности о запуске современных производств, развитии транспортных...
30.10.2026
Кельтский меч невероятной сохранности, найденный в 2011 г. недалеко от Кембриджа в местечке Must Farm (Англия), культура Ла-Тен, ок. I века до н.э.
Найден в отложениях ила в речном канале. Благодаря бескислородной среде сохранилась даже деревянная рукоять меча, а сам он был намеренно сильно согнут так, что часть клинка обломилась. Скорее всего, это дар местному божеству. Вместе с ним в том же канале были найдены и другие железные и даже бронзовые мечи, что говорит о долгой традиции ритуальных подношений на этом месте, продолжавшейся около 1200 лет (с XI века до н.э. по I век н.э.).Самое интересное здесь — уникальное клеймо, расположенное прямо...
30.10.2026
170 тыс. раз пассажиры подтвердили возраст и льготы через Цифровой ID в Mакс
Сервис действует в 65 регионах России и помогает подтверждать возраст или право на льготу без бумажных документов – достаточно показать QR-код в приложении. Для студентов, многодетных родителей и пенсионеров это означает меньше действий на кассе и меньше риска забыть нужный документ дома. Востребованы и транспортные чат-боты в Макс. Ежемесячно ими пользуются более 800 тыс. человек. Они помогают уточнить расписание, узнать о тарифах и найти нужную услугу без поиска по нескольким сайтам и приложениям...

Смотрите, читайте, критикуйте