Темы



Пресечение скрытой иранской операции влияния

Мы заблокировали учетные записи, связанные с иранской операцией влияния, в рамках которой ChatGPT использовался для генерации контента на различные темы, включая президентскую кампанию в США. Мы не обнаружили никаких признаков того, что этот контент охватил значительную аудиторию.

OpenAI стремится предотвращать злоупотребления и повышать прозрачность контента, созданного с помощью искусственного интеллекта. Это включает в себя нашу работу по выявлению и пресечению скрытых операций влияния⁠ (IO), которые пытаются манипулировать общественным мнением или влиять на политические результаты, скрывая истинную личность или намерения стоящих за ними лиц. Это особенно важно в контексте многочисленных выборов, проводящихся в 2024 году. В течение этого года мы расширили нашу деятельность в данной сфере, в том числе задействовав наши собственные модели ИИ для более эффективного обнаружения и понимания нарушений. 

На этой неделе мы выявили и заблокировали группу учетных записей ChatGPT, которые создавали контент для скрытой иранской операции влияния, известной под названием Storm-2035⁠. Мы заблокировали этим аккаунтам доступ к нашим сервисам и продолжаем отслеживать любые дальнейшие попытки нарушения нашей политики. В ходе операции ChatGPT использовался для генерации материалов по ряду тем, включая комментарии о кандидатах с обеих сторон на президентских выборах в США, которые затем распространялись через учетные записи в социальных сетях и на веб-сайтах. 

Подобно скрытым операциям влияния, о которых мы сообщали в мае⁠, эта кампания, судя по всему, не смогла добиться значительного вовлечения аудитории. Большинство выявленных нами публикаций в социальных сетях получили мало лайков, репостов или комментариев, либо не получили их вовсе. Мы также не обнаружили признаков того, что веб-статьи распространялись в социальных сетях. Используя шкалу прорыва (Breakout Scale)⁠ Института Брукингса, которая оценивает влияние тайных операций влияния по шкале от 1 (нижний) до 6 (высший), эту операцию можно отнести к нижней границе Категории 2 (активность на нескольких платформах, но нет свидетельств того, что реальные люди подхватили или широко распространили их контент). Нашему расследованию помогла информация об операции, опубликованная Microsoft на прошлой неделе.⁠

Наше расследование показало, что эта операция использовала ChatGPT для двух целей: создания развернутых статей и коротких комментариев для социальных сетей. Первое направление производило статьи о политике США и мировых событиях, которые публиковались на пяти сайтах, выдававших себя за новостные ресурсы как прогрессивного, так и консервативного толка. Второе направление создавало короткие комментарии на английском и испанском языках, которые размещались в социальных сетях. Мы выявили дюжину аккаунтов в X и один в Instagram, задействованных в этой операции. Некоторые аккаунты в X выдавали себя за прогрессистов, а другие — за консерваторов. Часть этих комментариев была создана путем отправки нашим моделям запросов на переписывание комментариев других пользователей социальных сетей.

Операция генерировала контент на несколько тем: главным образом, конфликт в Газе, присутствие Израиля на Олимпийских играх и президентские выборы в США, а в меньшей степени — политика в Венесуэле, права латиноамериканских сообществ в США (как на испанском, так и на английском языках) и независимость Шотландии. Политический контент перемежался комментариями о моде и красоте, возможно, для создания видимости большей аутентичности или в попытке набрать подписчиков.

Несмотря на отсутствие существенного отклика аудитории на эту операцию, мы со всей серьезностью относимся к любым попыткам использования наших сервисов в операциях иностранного влияния. В связи с этим, в рамках нашей работы по оказанию помощи широкому сообществу в пресечении подобной активности после удаления учетных записей из наших сервисов, мы поделились данными о потенциальных угрозах с государственными структурами, избирательными штабами и представителями индустрии. OpenAI по-прежнему привержена делу выявления и пресечения подобных злоупотреблений в больших масштабах путем партнерства с представителями отрасли, гражданским обществом и государственными органами, а также за счет использования возможностей генеративного ИИ в качестве мультипликатора сил в нашей работе. Мы продолжим публиковать подобные результаты для содействия обмену информацией и передовым опытом.

Заголовки двух статей, сгенерированных в ходе этой операции и опубликованных на двух ее веб-сайтах. Мы не обнаружили свидетельств широкого распространения этих статей в социальных сетях.

The image shows two social media posts. The first criticizes Kamala Harris’s policies on immigration and climate change, using the hashtag #DumpKamala. The second post criticizes Donald Trump, warning against his leadership, with the hashtag #DumpTrump.

Публикации о кандидатах в президенты США, сгенерированные в ходе операции и размещенные двумя разными аккаунтами в X. Эти посты привлекли минимальное внимание или не привлекли его вовсе.

The image shows two social media posts about inner beauty. The left post in Spanish features a woman looking at sunlight, and the right post in English shows a woman facing pink flowers. Both posts use the hashtag #VitalCaplini.

Публикации о красоте на английском и испанском языках, сгенерированные в рамках операции и размещенные двумя разными аккаунтами в X. Мы пропустили эти изображения через наш классификатор DALL·E 3⁠, который определил, что они не были созданы нашими сервисами. Эти посты получили низкий уровень вовлеченности или не получили его вовсе.

Домены, связанные с этой активностью:

  • niothinker[.]com
  • savannahtime[.]com
  • evenpolitics[.]com
  • teorator[.]com
  • westlandsun[.]com

Автор

OpenAI

Полный текст статьи читайте на OpenAI