«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При...

Дата загрузки:11.04.2025 06:55:25

«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

11.04.2025
 «Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При этом один из недавних обзоров показал, что 94% исследований машинного обучения в здравоохранении не прошли даже первую стадию клинических испытаний. Как в таком случае можно говорить о надёжности ИИ.

Суть. Тем и ценнее открытие учёных из T-Bank AI Research: мы сможем не только понимать, почему модель выдала тот или иной ответ, но и в дальнейшем влиять на этот процесс, повышая его точность и в целом доверие к ИИ. Как отмечает CEO AI-лаборатории NDT Валерий Ковальский, если бизнесу проще понять, как работает ИИ, — он быстрее принимает решение о его внедрении. А это важное конкурентное преимущество на рынке.

Этический вопрос. ИИ-модели не застрахованы от социальной предвзятости — стереотипы, царящие в обществе, могут попасть в обрабатываемый массив данных. Отсюда и довольно неэтичное поведение многих моделей. Например, Amazon столкнулся с критикой, когда интеллектуальная рекрутинговая система компании отбирала кандидатов по гендерному признаку.

И новый метод поможет понять, как работают модели, и в дальнейшем позволит разработать методы для их контроля. По словам разработчиков, благодаря последующим технологиям удастся отслеживать, когда модель хочет сказать что-то некорректное, и предотвращать это. Так что даже такие негативные аспекты прогресса можно нивелировать.


Открыть источник

Новости госзаказа

19.03.2026
Наука в стране вулканов
Сергей Федотов родился в Ленинграде, учился в Москве и провёл всю жизнь на Дальнем Востоке, изучая закономерности возникновения землетрясений на Курило-Камчатской островной дуге.За несколько десятилетий научного поиска он разработал методику долгосрочного сейсмического прогноза, вскрыл закономерности сейсмичности и создал методику проведения вулканологических, петрологических, сейсмологических, геодезических и геохимических экспедиций.Академическое наследие Федотова включает свыше 300 опубликованных...
19.03.2026
Росатом завершил испытания «толерантного» топлива на Ростовской АЭС
На Ростовской АЭС завершена опытно-промышленная эксплуатация повышенно безопасного («толерантного») ядерного топлива. Три топливные кассеты, загруженные в 2021 году, отработали три топливные кампании, после чего были выгружены для последующих исследований.По итогам испытаний оптимальным решением признаны твэлы с циркониевым сплавом и хромовым покрытием. В Росатоме отмечают, что технология повышает безопасность и открывает возможности для автоматизации производства топлива в рамках замыкания ядерного...
19.03.2026
Сенаторы разрешили ЧОПам стрелять по БПЛА.
Совет Федерации одобрил закон, который дает права некоторым ЧОПам получать в Росгвардии боевое стрелковое оружие для защиты охраняемых объектов от беспилотников. Прежде всего это касается организаций, занимающихся охраной объектов ТЭК.Сейчас охрану более 80% объектов ТЭК осуществляют именно частные охранные организации. Но по закону им разрешено использовать только служебное оружие (гладкоствольное длинноствольное и короткоствольное нарезное), которого зачастую недостаточно для отражения атак БПЛА...
18.03.2026
Почти 70% компаний ритейла, IT и нефтегазовой отрасли продолжают использовать иностранные системы резервного копирования (СРК), к такому выводу пришли авторы исследования компании «К2Тех».
Согласно результатам исследования, 32% компаний по-прежнему используют продукты американского вендора Veeam, еще 18% компаний используют решения от американской компании Veritas.СРК необходима для защиты критически важных ресурсов компаний, государственных организаций и других структур, отмечает директор департамента «Информационная безопасность» компании «Рексофт» Сергей Бабкин. Это крайне востребованный компонент IT-инфраструктуры, использование которого в России предписано законодательством.Американские...
18.03.2026
В геометрии конгруэнтность означает полное совпадение фигур при наложении: одинаковые по форме и размеру, они занимают одно и то же пространство.
По тому же принципу термин работает и в других науках. В материаловедении конгруэнтность означает, что кристалл плавится без изменения состава — вещество остается «равным самому себе». В психологии это аутентичность: совпадение внутренних ощущений и внешнего поведения, когда слова не расходятся с чувствами. А в химии конгруэнтные растворы ведут себя как единое целое, не расслаиваясь на компоненты.Где бы термин ни применялся, суть одна: конгруэнтность — это идеальное соответствие, при котором части...
18.03.2026
 #ВЭтотДень 18 марта 1844 года родился выдающийся русский композитор, дирижер и педагог — Николай Андреевич Римский-Корсаков.
Его творческий путь начался в кругу «Могучей кучки» — творческого содружества русских композиторов, сложившегося в Санкт-Петербурге в конце 1850х-начале 1860х годов. Именно там Н.Римский-Корсаков сформировался как маэстро, вдохновленный историей своей страны, фольклором и сказочными образами. Со временем Римский-Корсаков стал не только автором выдающихся произведений, но и профессором Санкт-Петербургской консерватории (с 1944 года носит его имя), воспитавшим целое поколение композиторов. Всего на...
18.03.2026
Минпромторг актуализировал реестр производителей печатных плат
Документ содержит структурированные данные о заводах, специализирующихся на выпуске печатных плат — от прототипирования до сложных многослойных изделий.Что в каталоге: Информация о мощностях, технологической специализации и сроках изготовления ключевых игроков рынка. Систематизация данных проведена при участии экспертов ФГБУ «ВНИИР».Развитие производственных мощностей:В документе отражены планы предприятий по наращиванию компетенций.В ОЭЗ «Руднево» запускается крупносерийное производство (проект...
18.03.2026
«При создании и распространении фильма были нарушены как международные стандарты защиты прав ребенка, так и общепринятые принципы этического обращения с материалами, содержащими изображения несовершеннолетних», – говорится в обращении совета. СПЧ призвал проверить соблюдение прав несовершеннолетних при производстве и распространении фильма и выяснить, получены ли согласия законных представителей детей. Премьера документального фильма «Господин Никто против Путина» состоялась в январе 2025 года...
18.03.2026
 К 12-й годовщине воссоединения Крыма с Россией Министерством внутренней политики
На протяжении трёх месяцев фотографы-профессионалы и любители присылали свои работы, стремясь запечатлеть многогранную красоту Крыма. Из пятисот снимков, представленных на конкурс, комиссия выбрала 12 работ — по одной в каждой из основных номинаций:• Номинация «Малая Родина» — «Зимний восход», автор Ксения Полянская, г. Ялта; • Номинация «Краски Крыма» — «Рассвет над Коктебелем», автор Алексей Поляков, г. Тихорецк; • Номинация «Крым обновленный» — «Новый Херсонес», автор Ксения Гасица, г. Симферополь...
18.03.2026
О главных событиях программы «Приоритет-2030»
Светящийся кристалл для квантовых компьютеров создали ученые ЮУрГУ (в составе международного научного коллектива). Основу кристалла составляет металлоорганический каркас на основе эрбия и тримезиновой кислоты. В перспективе он может стать «сердцем» квантового чипа для инфракрасных детекторов и лазерных хирургических инструментов. «Наноловушки» для золота. Химики Томского политеха совместно c коллегами из Китая предложили эффективный и экологически чистый способ извлечения золота из электронных...

Смотрите, читайте, критикуйте