«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При...

Дата загрузки:11.04.2025 06:55:25

«Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

11.04.2025
 «Чёрный ящик» взломан. Российские учёные разработали метод, который помогает понять, как ИИ-модель формирует ответ на запрос пользователей.

Спрос велик. К ИИ обращаются не только студенты при написании курсовых, но и бизнес, а также представители критически важных сфер, например, медицины. При этом один из недавних обзоров показал, что 94% исследований машинного обучения в здравоохранении не прошли даже первую стадию клинических испытаний. Как в таком случае можно говорить о надёжности ИИ.

Суть. Тем и ценнее открытие учёных из T-Bank AI Research: мы сможем не только понимать, почему модель выдала тот или иной ответ, но и в дальнейшем влиять на этот процесс, повышая его точность и в целом доверие к ИИ. Как отмечает CEO AI-лаборатории NDT Валерий Ковальский, если бизнесу проще понять, как работает ИИ, — он быстрее принимает решение о его внедрении. А это важное конкурентное преимущество на рынке.

Этический вопрос. ИИ-модели не застрахованы от социальной предвзятости — стереотипы, царящие в обществе, могут попасть в обрабатываемый массив данных. Отсюда и довольно неэтичное поведение многих моделей. Например, Amazon столкнулся с критикой, когда интеллектуальная рекрутинговая система компании отбирала кандидатов по гендерному признаку.

И новый метод поможет понять, как работают модели, и в дальнейшем позволит разработать методы для их контроля. По словам разработчиков, благодаря последующим технологиям удастся отслеживать, когда модель хочет сказать что-то некорректное, и предотвращать это. Так что даже такие негативные аспекты прогресса можно нивелировать.


Открыть источник

Новости госзаказа

16.07.2025
 Госкорпорация «Росатом» через бизнес-направление «Аддитивные технологии» выпустила инновационный 3D-принтер RusMelt 300M.
Принтер способен создавать высококачественные металлические изделия из нержавеющей стали и жаропрочных сплавов! Технические возможности RusMelt 300M: Материалы: алюминий, титан, никель, кобальт-хром, нержавеющая сталь Зона печати: 300300370 мм Производительность: до 35 см³/час Серийное производство – уже 7 установок работают на российских предприятиях и в вузах!Принтер настолько уникален, что получил сертификат «Сделано в России», а вместе с ним: Знак «птичку» в цветах триколора...
15.07.2025
Пионер экспериментальной биологии
История знает немало примеров того, как достижения учёных предвосхитили свое время. Это касается и работ выдающегося исследователя Николая Кольцова, положивших начало многим направлениям в современной биологии.В 1917 году он основал Институт экспериментальной биологии, объединив специалистов в области генетики, цитологии, механики развития и физиологии. Учёный придавал большое значение междисциплинарным подходам в биологии. Например, он предвидел, что рентгеноструктурный анализ позволит изучить...
15.07.2025
Тобольский филиал СУЭНКО перешел к активной фазе капитального ремонта канализационного коллектора в 8 мкр.
Зимой, после повреждения участка, чтобы гарантировать потребителям водоотведение бригады оперативно установили временную перекачивающую станцию, оградили место провала и приступили к формированию плана капитального ремонта. Сейчас на объекте проведены земляные работы и выполнена прокладка участка трубопровода методом горизонтально-направленного бурения. Эта технология отличается от традиционного способа прокладки труб тем, что существенно сокращает объем земляных работ и последующего восстановления благоустройства...
15.07.2025
В Царском Селе открылась выставка о военных подвигах и жизни казачества
Экспозиция в Камероновой галерее объединяет более 800 предметов, которые рассказывают об истории и традициях казачества, выдающихся атаманах и героизме казаков. Часть экспонатов ранее никогда не выставлялась.Посетители увидят образцы казачьего обмундирования и вооружения, в том числе сабли, шашки, кинжалы, пики, пушки, награды, предметы быта и женские костюмы, а также произведения искусства, личные вещи и редкие фотографии.Впервые в полном объеме выставлены мундирные комплекты последнего атамана...
10.07.2025
Про мигрантов из Индии и расхождения в прогнозах
Министерство труда России опровергло сообщения главы Уральской ТПП Андрея Беседина о завозе в страну в 2026 году 1 млн трудовых мигрантов из Индии до конца года. В ведомстве указали на то, что общая квота на весь год для завоза из всех стран составляет около 235 тыс. человек. Из них индусов – 70 тыс. И тут многие узнали, что мигранты из Индии уже и так едут к нам тысячами, в том числе, в Свердловскую область отправится 4,3 тыс. человек, хотя, конечно, это не миллион. Зампредседателя Федерации профсоюзов...
10.07.2025
ВТБ заявил о планах участвовать в трамвайных концессиях, сообщил старший вице-президент банка Дмитрий Средин на форуме «Иннопром-2025».
«Мы считаем трамвайное направление перспективным и готовы рассматривать участие в соответствующих концессионных проектах», – отметил Средин. Он подчеркнул, что без наращивания мощностей трамвайный транспорт в ряде городов может исчезнуть, и добавил, что у ВТБ уже есть накопленный опыт реализации крупных проектов по созданию транспортной инфраструктуры, в которых банк выступал в качестве инвестора и кредитора.
10.07.2025
 Предприятия оказались слабо вовлечены в нацпроекты технологического лидерства
Восемь национальных проектов по обеспечению технологического лидерства были определены в 2024 году. До 2030 года на эти проекты будет направлено порядка 3 трлн рублей. Судя по опросу РСПП, 48% компаний, которым это могло быть потенциально интересно, пока не обладают достаточной информацией и не могут понять свое место в их реализации. Еще 35% осведомлены о них и планируют принять участие и лишь 18% отечественных предприятий участвуют в реализации уже сейчас.При этом, есть направления, где компании...
10.07.2025
 Космические путешественники
Интерес советских ученых к исследованию влияния космических условий на живые организмы возник в середине XX века. Уже в 70-х гг. Центральное специализированное конструкторское бюро начало разрабатывать биоспутники, космические аппараты для проведения биологических исследований. По программе «Бион» 10 июля 1985 года на орбиту с космодрома Плесецк был запущен беспилотный космический аппарат «Бион-7» («Космос-1667»).«Экипаж» из двух макак-резусов Верного и Гордого стал вторым по счету, полетевшим в...
10.07.2025
 СУЭНКО модернизирует теплосетевой комплекс Тюменской области
Компания реализует масштабное обновление тепловых сетей и техническое перевооружение энергооборудования в городах и районах Тюменской области. Работа ведется в рамках подготовки к предстоящему осенне-зимнему периоду и выполнена на сегодня более чем на 55%. В Тобольске идет капитальный ремонт важнейшей теплотрассы на ул. Радищева — 260 метров изношенных трубопроводов меняют на новые. В Ишиме завершается модернизация теплосетей на ул. Казанской, а также ведется комплексное обновление котельных с заменой...
10.07.2025
В ходе проверки Счетная палата обратила внимание на ряд системных недостатков в реализации механизма инфраструктурных бюджетных кредитов (ИБК), снижающих эффективность этого финансового инструмента:
Отсутствие критериев отбора объектов инфраструктурных проектов; формальный характер соглашений о предоставлении ИБК, заключаемых с регионами; в 32 регионах не достигаются плановые значения поступления налоговых и неналоговых доходов от реализации инфраструктурных проектов.

Смотрите, читайте, критикуйте

Настоящий ресурс содержит материалы 16+