Блог им. master1

Как взломать искусственный интеллект

В процессе обучения нейросати получают большой объем информации.

Как поисковая система.

Были и есть дорвеи, специально сгенерированные под поисковый запрос страницы и сайты.

Суть взлома. В сети размещается много страниц с нужной информацией, например, что такая-то акция, скоро взлетит, такое-то лекарство лечит лучше, такая-то технология решает какие-то задачи.

Использовать можно и чужие домены, на форумах и блогах.

Нейросети эту информацию съедают и используют для ответов пользователям.
Возможна и положительная обратная связь, когда на страницах размещаются уже сами ответы искусственного интеллекта, которые потом служат источниками для обучения как этого же интеллекта, так и других нейросетей.

Ведь информацию про эту компанию, лекарство, технологию человек получит не от какого то неизвестного дорвея или форума (как после перехода из поиска), к которым нет доверия, а от искусственного интеллекта известной компании.

Как думаете?


Добавьте пожалуйста посту до 15 плюсов, чтобы он попал на первую страницу, если вам интересна эта тема.
★1
25 комментариев
Мне кажется, что затраты на размещение информации, которую нужно подсунуть нейросети несравненно больше, чем затраты на то, чтобы разработчик исключил эту лживую информацию из массива для обработки и заставил сеть «забыть» её.
КриптоУлитка, как отделить?
avatar
master1, детектор лжи включить 
Валерий Осипенко, по каким параметрам?
avatar
master1, в моём понимании, это всего лишь программа — помесь поискового робота и чат-бота.

Значит можно указать какие-то константы — что, то или иное утверждение, по умолчанию неверно, чтобы не выдавал нам поиск во входящем массиве данных.
КриптоУлитка, вот есть новое лекарство или новая компания. Как определять константы?
avatar
master1, если это никому не мешает, то никак, пусть бредит. Начнут пользователи или конкуренты жаловаться на недостоверность, придется инженерам подкручивать.

Вон, по словам Медведева, чат-бот от яндекса плохо в некоторых вопросах ориентируется. Явно не из-за того, что поиском пользоваться не умеет.
master1, вот в комментарии выше, про камни. Если гугл-бот перестанет советовать есть камни, имхо, это не он «научился», это инженеры подкрутили.
КриптоУлитка, что там про камни выше?
avatar
master1, по ссылке из первого комментария
master1,   " Как взломать искусственный интеллект"  ---  увы увы… там нечего  ломать.  интеллект полностью  отсутствует. 
avatar
ВВШ, генеративный искусственный интеллект.
avatar
Можно на всякие древние темы на форумах где раньше был большой актив постить сгенерированные неиросеткой комментарии о том что через месяц Газпром удвоится, и фиг кто разберётся откуда в неиросети эта дичь
Хрен Столовый, Газпром сложно, а вот какой неликвид и не обсуждался раньше и ИИ будет отвечать на основе того, что найдет.
avatar
Так же как любой «интеллект». Без цензуры и без обратной связи на ответы ИИ может посылать, грубить, быть расистом, рекомендовать суицид, итп.
avatar
Взял и спалил контору. Теперь ИИ значет твои планы и не будет читать дорвеи.
avatar
deke,  ага
Чтобы сеть её восприняла, такая информация должна доминировать в инфополе.
avatar
Cubigator, по узкой теме или вообще по новой теме можно и доминировать
avatar
Нейросети прежде всего проверяют информацию на фейковость
А вот люди как раз ведутся
₽100, как проверят новое лекарство или технологию? На фейковость? Без людей? Да и человек не поймет и даже специалисту пару дней надо.
avatar
₽100, пфф, серьёзно? И как они это делают?
КриптоУлитка, по разным показателям можно определить признаки фейковости той или иной новости. Источники, разница во времени публикации, изложение информации, алгоритмов понаделали достаточно, твиттер давно пользуется 
₽100, но ТС предлагает такой эксперимент, в котором новость полностью вымышленная и её нет в других источниках. Такое ИА Панорама, только несколько источников, в которых новость полностью фейковая. По какому алгоритму тут определить? Кроме того, получается, что определяет не программа, а инженеры, написав алгоритмы определения.

В первом комментарии ссылка на статью, там приводится пример, когда ИИ от Гугла предлагает пользователям есть камни. Вот, когда инженер заложит информацию в программу, что камни не надо есть — программа это «определит».

теги блога master1

....все тэги



UPDONW
Новый дизайн