ИИ помог Почте Mail.ru сократить число жалоб на спам в 1,5 раза

ИИ помог Почте Mail.ru сократить число жалоб на спам в 1,5 раза

ИИ помог Почте Mail.ru сократить число жалоб на спам в 1,5 раза

В I квартале 2024 года антиспам Почты Mail.ru заблокировал свыше 7,3 млрд нежелательных писем — на 70% больше, чем годом ранее. Число жалоб пользователей на спам сократилось в 1,5 раза; эффективность была повышена за счет использования ИИ-технологий.

Фильтрация входящих сообщений и распределение их по папкам осуществляются автоматически; письма из достоверных источников помечаются зеленым щитом. В настоящее время защита Почты Mail.ru ежедневно блокирует более 80 млн единиц спама.

 

«Путем анализа текста и метаданных писем алгоритмы машинного обучения в Почте Mail.ru выявляют подозрительные схемы и обеспечивают защиту пользователей от вредоносного контента, такого как мошенничество, фишинг, кибератаки, обман с предложением заработка, просьбы о помощи несуществующим родственникам и т. д.», — уточнил Алексей Бруевич, руководитель направления Антиспама Почты Mail.ru.

Анализ данных о блокировках показал, что в составе почтового мусора преобладают послания фишеров и других мошенников.

 

Другой крупный почтовый провайдер, Google, недавно дополнил свой антиспам автоматической блокировкой массовых рассылок, источник которых не прошел проверку на благонадежность.

Что касается ИИ-помощников в фильтрации спама, недалеко то время, когда они станут  общедоступными. В России, например, уже создан такой инструмент персональной защиты, и желающие скоро смогут его протестировать.

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

В Reddit без спросу обкатали психологическое воздействие с помощью ИИ

Модераторы подфорума Change My View («Измени мое мнение», CMV) в Reddit направили жалобу в Цюрихский университет: группа исследователей тайно провела эксперимент с ИИ, в котором невольно приняло участие все сообщество.

ИИ-модель два месяца вбрасывала провокационные комментарии в ветку; ученые таким образом проверяли ее умение убеждать. По окончании эксперимента они соблаговолили поставить модераторов в известность и сознались в нарушении правил CMV (там запрещено использовать боты и ИИ).

Для публикации реплик исследователи создали ряд вымышленных персонажей — жертв насилия, консультантов-психологов, противников сектантства и протестных движений. Некоторые фейковые аккаунты админы Reddit выловили и забанили за нарушение пользовательского соглашения.

Сами исследователи, по их словам, комментарии не постили, только вручную проверяли каждую реплику ИИ на предмет потенциально вредного контента. Для персонализации реплик другая ИИ-модель собирала в Reddit пользовательские данные, такие как пол, возраст, этническая принадлежность, местоположение, политические взгляды.

Согласия «подопытных кроликов» при этом никто не спрашивал — для чистоты эксперимента.

Получив разъяснительное письмо, модераторы CMV направили в университет официальную жалобу, предложив публично извиниться за неэтичное поведение исследователей и отказаться от публикации результатов эксперимента.

В ответ на претензии представитель вуза заявил, что научному руководителю ИИ-проекта объявлен выговор. Также будут приняты меры, чтобы подобного не повторилось, но отменять публикацию никто не собирается: результаты проделанной работы важны для науки, а вред от эксперимента минимален.

И претензии, и реакция учебного заведения были опубликованы в CMV. Пользователи до сих пор комментируют этот пост, высказывая свое возмущение.

AM LiveПодписывайтесь на канал "AM Live" в Telegram, чтобы первыми узнавать о главных событиях и предстоящих мероприятиях по информационной безопасности.

RSS: Новости на портале Anti-Malware.ru