Хакеры взломали сервер МАГАТЭ

Хакеры взломали сервер МАГАТЭ

Члены ранее неизвестной хакерской группировки Parastoo взломали один из серверов Международного агентства по атомной энергетике (МАГАТЭ), выложив в открытый доступ более 150 адресов электронной почты сотрудников агентства, госчиновников высшего ранга и деятелей науки разных стран мира. В частности, в распоряжении хакеров оказался адрес электронной почты одного из сотрудников Управления по научным исследованиям при Министерстве энергетики США.

Все украденные данные были выложены хакерами на сайте Pastebin.

По данным агентства Рейтер, представители МАГАТЭ заявляют, что среди украденных адресов могут быть адреса электронной почты экспертов, работающих в венском отделении Агенства. Однако, по словам одного из западных дипломатов, украденная хакерами информация не являлась секретной.

Как следует из заявления пресс-секретаря МАГАТЭ Джил Тюдор (Gill Tudor), Агентство крайне сожалеет о том, что данные с одного из его старых серверов, который недавно был выведен из эксплуатации, попали в общий доступ. По мнению экспертов, акция Parastoo является ответом на жесткую политику МАГАТЭ в отношении ядерной программы Ирана. В пользу данного утверждения говорит и тот факт, что, вместе с украденными данными, хакеры опубликовали обращение к МАГАТЭ, в котором утверждали, что не будут раскрывать конфиденциальную информацию Агентства в случае, если МАГАТЭ не будет потворствовать Западу и Израилю, убивающим иранских ученых-ядерщиков и пытающимся всеми доступными средствами воспрепятствовать дальнейшему технологическому развитию Исламской Республики. 

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

Языковые модели тупеют от мусорных данных из интернета

Группа исследователей из Университета Техаса и Университета Пердью предложила необычную идею: большие языковые модели (LLM), вроде ChatGPT, могут «тупить» от некачественных данных примерно так же, как люди — от бесконечных часов в соцсетях.

В отчёте специалисты выдвигают «гипотезу гниения мозга LLM». Суть проста: если продолжать дообучать языковую модель на «мусорных» текстах из интернета, она со временем начнёт деградировать — хуже запоминать, терять логику и способность к рассуждению.

Авторы понимают, что отличить хороший контент от плохого сложно. Поэтому они решили изучить 100 миллионов твитов с HuggingFace и отобрать те, что подходят под определение «junk».

В первую группу попали короткие твиты с большим количеством лайков и репостов — те самые, которые вызывают максимальное вовлечение, но несут минимум смысла. Во вторую — посты с «низкой семантической ценностью»: поверхностные темы, кликбейт, громкие заявления, конспирология и прочие «триггерные» темы.

 

Чтобы проверить качество отбора, результаты GPT-4o сверили с оценками трёх аспирантов — совпадение составило 76%.

Учёные обучили четыре разные языковые модели, комбинируя «мусорные» и «качественные» данные в разных пропорциях. Потом прогнали их через тесты:

  • ARC — на логическое рассуждение,
  • RULER — на память и работу с длинным контекстом,
  • HH-RLHF и AdvBench — на этические нормы,
  • TRAIT — на анализ «личностного стиля».

Результаты оказались любопытными: чем больше в обучающем наборе было «интернет-мусора», тем хуже модель справлялась с задачами на рассуждение и память. Однако влияние на «этичность» и «черты личности» было неоднозначным: например, модель Llama-8B с 50% «мусора» даже показала лучшие результаты по «открытости» и «низкой тревожности».

Исследователи сделали вывод: переизбыток интернет-контента может привести к деградации моделей и призвали разработчиков тщательнее отбирать данные для обучения. Особенно сейчас, когда всё больше онлайн-текста создаётся уже самими ИИ — и это может ускорить эффект так называемого model collapse, когда модели начинают обучаться на собственных ошибках.

Учёные шутят: если так пойдёт и дальше, возможно, придётся вернуться к книгам — хотя бы ради того, чтобы «накормить» модели чем-то действительно качественным.

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

RSS: Новости на портале Anti-Malware.ru