Напоминающее о молитве Android-приложение сливало передвижение мусульман

Напоминающее о молитве Android-приложение сливало передвижение мусульман

Напоминающее о молитве Android-приложение сливало передвижение мусульман

Мобильное приложение Salaat First, напоминающее мусульманам о молитве, сливало информацию пользователей брокеру данных, а последний продавал сведения о геолокации своим клиентам. Таким образом, у третьих лиц появилась возможность отслеживать перемещение исповедующих ислам людей.

Как отметило издание Motherboard, сославшись на свои источники, данные мусульман собирала французская компания Predicio, которая ранее была замечена в цепочке поставок данных, где участвовало ФБР, а также Иммиграционная и таможенная полиция США.

Источники Motherboard выразили беспокойство таким положением дел, поскольку передача точного местоположения мусульман может выдать их ежедневные маршруты и местоположение мечетей, где проходят молитвы.

К слову, приложение Salaat First загрузили более 10 миллионов пользователей Android-устройств, то есть охват у авторов немаленький. Специалисты считают, что зачастую тема религии используется для неправомерного сбора данных пользователей подобных приложений.

«Если твои перемещения отслеживают в течение целого дня, это может выдать много полезной информации о тебе. Важно не допустить, чтобы полученные третьими лицами данные использовались против владельцев этих данных, особенно в том случае, когда они не подозревают о ежедневной фиксации геолокации», — объясняют собеседники Motherboard.

ИИ сказал — ты согласился: учёные описали феномен когнитивной капитуляции

Исследователи из Университета Пенсильвании предложили новое объяснение тому, как люди взаимодействуют с ИИ. По их мнению, всё чаще пользователи не просто пользуются нейросетями, а буквально «сдаются» им. Этот феномен специалисты назвали «когнитивной капитуляцией» (cognitive surrender).

Если раньше люди использовали технологии вроде калькуляторов или GPS для отдельных задач — «разгружали» мозг, но сохраняли контроль, — то с ИИ ситуация меняется.

Всё чаще пользователи просто принимают ответы модели за истину, не проверяя и не анализируя их. Причём, как отмечают исследователи, это особенно заметно, если ответ звучит уверенно, гладко и без лишних сложностей. В таком случае у человека просто не включается внутренний «режим сомнения».

Чтобы проверить это, учёные провели серию экспериментов с участием более 1300 человек. Им предложили задачи на когнитивное мышление с подвохом, который требует не интуиции, а вдумчивого анализа.

Часть участников могла пользоваться ИИ-помощником, но с нюансом: модель специально давала неправильные ответы примерно в половине случаев. Результат оказался показательным.

 

Когда ИИ отвечал правильно, пользователи соглашались с ним в 93% случаев. Но даже когда он ошибался, люди всё равно принимали его ответ в 80% случаев. То есть большинство просто не перепроверяло результат, даже если он был неверным.

В среднем участники соглашались с ошибочным ИИ в 73% случаев и оспаривали его лишь в 19,7% случаев.

Более того, у тех, кто пользовался ИИ, уровень уверенности в своих ответах оказался выше — даже несмотря на то, что половина этих ответов была неправильной.

 

Интересно, что поведение менялось в зависимости от условий. Например, если участникам давали небольшие денежные стимулы за правильные ответы и мгновенную обратную связь, они чаще перепроверяли ИИ и исправляли ошибки. А вот дефицит времени, наоборот, усиливал зависимость от модели: под давлением дедлайна люди ещё охотнее доверяли ИИ.

Не все оказались одинаково уязвимы. Люди с более высоким уровнем так называемого флюидного интеллекта (fluid IQ) реже полагались на ИИ и чаще замечали его ошибки. А вот те, кто изначально воспринимал ИИ как авторитетный источник, чаще попадались на неверные ответы.

При этом сами исследователи подчёркивают: «когнитивная капитуляция» — не обязательно зло сама по себе. Если ИИ действительно работает лучше человека, логично ему доверять, особенно в задачах вроде анализа данных или оценки рисков.

Но есть важный нюанс: качество мышления в таком случае напрямую зависит от качества самой модели.

RSS: Новости на портале Anti-Malware.ru