Иногда AI ломается не громким взрывом, а очень буднично: где-то внезапно всплывает настоящий источник данных, где-то защитный механизм сам становится проблемой, а где-то синтетическая картинка просто помогает обмануть покупателя без лишних усилий. Ниже четыре свежих сюжета, после которых слово «автоматизация» снова хочется читать мелким шрифтом.

Утечка Suno показала, как музыкальный AI тянул данные с YouTube, Deezer и Genius

404 Media пишет, что после взлома исходного кода Suno наружу вышло куда более приземлённое устройство сервиса, чем любят описывать маркетологи: компания, уже спорящая с музыкальной индустрией, по этим данным массово собирала песни, подкасты и тексты с YouTube, Deezer и Genius. История важна именно своей конкретностью: спор о «на чём вообще это обучали» внезапно перестаёт быть философским и превращается в довольно зримый конвейер загрузки контента.

Урок: если AI-компания слишком туманно рассказывает про источники данных, рано или поздно за неё это сделают утечки и суды.

Источник: 404 Media

Новый детектор на Substack поссорил платформу с авторами

После запуска новых средств поиска AI-текстов часть авторов Substack, по данным 404 Media, восприняла это как охоту на ведьм: проблема в том, что ложное срабатывание может повредить репутации не хуже настоящего обмана. Получается знакомая ирония эпохи AI: инструмент, который должен был защищать площадку от машинной халтуры, сам рискует стать фабрикой недоверия.

Урок: плохой детектор иногда опаснее самой проблемы, которую его поставили ловить.

Источник: 404 Media

Исследователи показали, как легко портить AI-поиск через Reddit и другие открытые площадки

404 Media пересказывает исследование Cornell, в котором достаточно небольших вбросов в пользовательский контент на Reddit, Wikipedia, Quora и похожих сайтах, чтобы агенты глубокого поиска начали тащить в ответы спам или мошеннические подсказки. Сбой здесь особенно поучительный: ломается не сама модель, а доверие к внешнему миру, из которого она берёт «доказательства».

Урок: если агент без разбору верит открытому интернету, атаковать будут не его мозг, а его кормовую базу.

Источник: 404 Media

Мошенники уже продают семена цветов, которых не существует, по картинкам от AI

По данным 404 Media, продавцы на eBay, Amazon и Etsy используют сгенерированные AI-изображения фантастических цветов, чтобы продавать семена растений, которых в природе просто нет. Это почти комичный сюжет, если забыть, что за красивой картинкой стоит вполне обычное мошенничество: визуальная правдоподобность стала дешёвой, а проверить реальность товара по картинке — ещё труднее.

Урок: как только площадка не умеет отличать синтетическую витрину от реального товара, AI начинает масштабировать не креатив, а обман.

Источник: 404 Media