Наткнулся тут на замечательный отчет Trend Micro, где они добросовестно сделали разбор всех сервисов из темы, которые хоть как-то используют LLM.
К сожалению, нет времени переводить дословно, но я попробую сделать краткий обзор всего того, что было рассмотрено.
1. Развитие криминальных LLM обусловлено тем, что Gemini и ChatGPT фильтруют промпты и банят за действительно хорошие вопросы.
Действительно хороший вопрос
- После того как WormGPT и DarkBERT приостановили свои сервисы в том году (WormGPT в прошлом августе), они снова обратили на себя внимание ресерчерей как и новые сервисы (отдельный отчет Trend Micro по новым сервисам).
- WormGPT продается сейчас в трех вариантах: оригинальная первая версия, "улучшенная" вторая и "совершенная" третья, несмотря на разные названия нет никакого внятного объяснения чем одна отличается от другой, остается также неясным является ли разработчик автором оригинальной WormGPT, либо просто конкуренты используют известное имя.
- DarkBERT предлагает к продаже автор с никнеймом CanadianKingpin12 - оригинальный пост, где предлагались четыре варианта модели был удален через неделю после создания:
- Нужно заметить, что существует также абсолютно легальный LLM продукт с тем же названием - DarkBERT, тренированный на сообщения с подпольных форумов.
- Интересно, что все последние предложения WormGPT и DarkBERT сопровождаются новым пакетом - “Siri", предположительно для голосового взаимодействия с ботами (если это действительно так, то киберпреступники опередили в своих инновациях такие компании как Apple).
- Исследователи обнаружили новые криминальные GPT-инструменты - такие как DarkGemini и TorGPT - с сходным функционалом с другими LLM-ботами, но с отличительной возможностью - работать с изображениями:
- Несмотря на заявленный функционал, ресерчеры полагают, что спрос на работу с изображениями в контексте криминальных ботов растет медленнее в сравнении с другими функциями, возможная причина - что киберпреступники могут работать с изображениями в рамках легальных LLM-моделей (таких как Stable Diffusion или DALL-E).
- Исследователи также нашли предложение Dark Leonardo LLM, но осталось непонятным - это отдельная модель, либо сервис на базе DarkGemini и TorGPT, либо отсылка на существующую модель OpenAI DaVinci в рамках усиления GPT-3.
2. С тех пор как технология стала доступнее дипфейки направлены теперь и на обычных граждан.
- DeepNude - программа, которая может раздеть каждого, если раньше жертвами становились только знаменитости, то сейчас существует угроза и для обычных людей, и даже несовершеннолетних в рамках шантажа и вымогательства денег - "секстортинг":
- Deepfake 3D Pro используется для 3D-аватаров, которые возможно генерировать из фото и также заставить их говорить, генерируя нужный голос:
- Новые приложения Deepfake AI, SwapFace и AvatarAI VideoCallSpoofer, которые могут помочь "заменить" лицо на видео совершенно другим лицом с использованием всего нескольких фотографий.
- Если Deepfake AI поддерживает запись нового видео, то SwapFace реализован в виде видео-фильтра на уже имеющееся видео с поддержкой популярного инструмента для видео-стриминга, такого как - Open Broadcast Software (OBS).
- Как и Deepfake 3D Pro, AvatarAI VideoCallSpoofer может помочь вам сгенерировать 3D-аватар из одного фото, главное отличие - что Avatar AI отслеживает реальные эмоции лица актера:
Реклама AvatarAI VideoCallSpoofer
Реклама DeepFake AI
- Deepfake 3D Pro может успешно использоваться для обхода KYC-защит финансовых учреждений, получая доступ к аккаунтам с помощью украденных айди, также возможно клонировать голос для эффективных фишинговых кампаний - используя "аватары" знаменитостей или других инфлюенсеров - рекламируя, например, новый мошеннический крипто-скам.
- SwapFace и Avatar AI VideoCallSpoofer - оба предлагают возможность совершать видео-звонки в режиме реального времени - как в известном скаме на 25 миллионов в феврале этого года с использованием похожей технологии
Скриншоты демо, демонстрирующего возможности SwapFace
3. Выводы.
- Уровень сложности инструментов для создания дипфейков повышается с каждой неделей. Наиболее разрушительные возможности, с точки зрения исследователей, это новые эффективные кампании с помощью использования социальной инженерии, которые были не мыслимы раньше.
- Спрос на криминальные LLM растет медленно, но неуклонно - на данный момент до сих пор среди предложений много "джейл-брейков" или откровенного мошенничества (для обмана потенциальных клиентов АИ), но уже сейчас есть реальные и криминальные LLM-модели, которые становятся модульными - как в случае DarkGemini с возможностью работы с изображениями или TorGPT, позволяющей генерировать изображения сразу и из пользовательского интерфейса.
- Приложения Дипфейк становятся простыми и удобными в настройке - они превращаются из инструментов для про-государственных групп, кто использовал их для создания фейковых пропагандистских видео в медиа, в инструменты рядовых мошенников.
Источник: https://www.trendmicro.com/vinfo/us...g-hype-an-update-on-the-rising-abuse-of-genai
К сожалению, нет времени переводить дословно, но я попробую сделать краткий обзор всего того, что было рассмотрено.
1. Развитие криминальных LLM обусловлено тем, что Gemini и ChatGPT фильтруют промпты и банят за действительно хорошие вопросы.
Действительно хороший вопрос
- После того как WormGPT и DarkBERT приостановили свои сервисы в том году (WormGPT в прошлом августе), они снова обратили на себя внимание ресерчерей как и новые сервисы (отдельный отчет Trend Micro по новым сервисам).
- WormGPT продается сейчас в трех вариантах: оригинальная первая версия, "улучшенная" вторая и "совершенная" третья, несмотря на разные названия нет никакого внятного объяснения чем одна отличается от другой, остается также неясным является ли разработчик автором оригинальной WormGPT, либо просто конкуренты используют известное имя.
- DarkBERT предлагает к продаже автор с никнеймом CanadianKingpin12 - оригинальный пост, где предлагались четыре варианта модели был удален через неделю после создания:
- Нужно заметить, что существует также абсолютно легальный LLM продукт с тем же названием - DarkBERT, тренированный на сообщения с подпольных форумов.
- Интересно, что все последние предложения WormGPT и DarkBERT сопровождаются новым пакетом - “Siri", предположительно для голосового взаимодействия с ботами (если это действительно так, то киберпреступники опередили в своих инновациях такие компании как Apple).
- Исследователи обнаружили новые криминальные GPT-инструменты - такие как DarkGemini и TorGPT - с сходным функционалом с другими LLM-ботами, но с отличительной возможностью - работать с изображениями:
- Несмотря на заявленный функционал, ресерчеры полагают, что спрос на работу с изображениями в контексте криминальных ботов растет медленнее в сравнении с другими функциями, возможная причина - что киберпреступники могут работать с изображениями в рамках легальных LLM-моделей (таких как Stable Diffusion или DALL-E).
- Исследователи также нашли предложение Dark Leonardo LLM, но осталось непонятным - это отдельная модель, либо сервис на базе DarkGemini и TorGPT, либо отсылка на существующую модель OpenAI DaVinci в рамках усиления GPT-3.
2. С тех пор как технология стала доступнее дипфейки направлены теперь и на обычных граждан.
- DeepNude - программа, которая может раздеть каждого, если раньше жертвами становились только знаменитости, то сейчас существует угроза и для обычных людей, и даже несовершеннолетних в рамках шантажа и вымогательства денег - "секстортинг":
- Deepfake 3D Pro используется для 3D-аватаров, которые возможно генерировать из фото и также заставить их говорить, генерируя нужный голос:
- Новые приложения Deepfake AI, SwapFace и AvatarAI VideoCallSpoofer, которые могут помочь "заменить" лицо на видео совершенно другим лицом с использованием всего нескольких фотографий.
- Если Deepfake AI поддерживает запись нового видео, то SwapFace реализован в виде видео-фильтра на уже имеющееся видео с поддержкой популярного инструмента для видео-стриминга, такого как - Open Broadcast Software (OBS).
- Как и Deepfake 3D Pro, AvatarAI VideoCallSpoofer может помочь вам сгенерировать 3D-аватар из одного фото, главное отличие - что Avatar AI отслеживает реальные эмоции лица актера:
Реклама AvatarAI VideoCallSpoofer
Реклама DeepFake AI
- Deepfake 3D Pro может успешно использоваться для обхода KYC-защит финансовых учреждений, получая доступ к аккаунтам с помощью украденных айди, также возможно клонировать голос для эффективных фишинговых кампаний - используя "аватары" знаменитостей или других инфлюенсеров - рекламируя, например, новый мошеннический крипто-скам.
- SwapFace и Avatar AI VideoCallSpoofer - оба предлагают возможность совершать видео-звонки в режиме реального времени - как в известном скаме на 25 миллионов в феврале этого года с использованием похожей технологии
Скриншоты демо, демонстрирующего возможности SwapFace
3. Выводы.
- Уровень сложности инструментов для создания дипфейков повышается с каждой неделей. Наиболее разрушительные возможности, с точки зрения исследователей, это новые эффективные кампании с помощью использования социальной инженерии, которые были не мыслимы раньше.
- Спрос на криминальные LLM растет медленно, но неуклонно - на данный момент до сих пор среди предложений много "джейл-брейков" или откровенного мошенничества (для обмана потенциальных клиентов АИ), но уже сейчас есть реальные и криминальные LLM-модели, которые становятся модульными - как в случае DarkGemini с возможностью работы с изображениями или TorGPT, позволяющей генерировать изображения сразу и из пользовательского интерфейса.
- Приложения Дипфейк становятся простыми и удобными в настройке - они превращаются из инструментов для про-государственных групп, кто использовал их для создания фейковых пропагандистских видео в медиа, в инструменты рядовых мошенников.
Источник: https://www.trendmicro.com/vinfo/us...g-hype-an-update-on-the-rising-abuse-of-genai