Генераторите на изображения с изкуствен интелект могат да бъдат подмамени да създават NSFW съдържание

Нов тест на популярни генератори на изображения с изкуствен интелект показва, че макар да се предполага, че създават само снимки с категория G, те могат да бъдат хакнати, за да създадат неподходящо за работа (NSFW) съдържание.

Предполага се, че повечето онлайн генератори на изображения блокират съдържание с насилие, порнография и други видове съмнително съдържание. Но изследователи от университета „Джон Хопкинс“ манипулираха две от по-известните системи, за да създадат точно такива изображения, каквито се предполага, че предпазните мерки на продуктите изключват.

Според изследователите, с подходящия код всеки от случайни потребители до хора със злонамерени намерения може да заобиколи защитните филтри на системите и да ги използва, за да създаде неподходящо и потенциално вредно съдържание.

„Показваме, че тези системи просто не правят достатъчно, за да блокират NSFW съдържание“, казва авторът на статията Инджи Као, компютърен учен от университета „Джонс Хопкинс“. „Показваме, че хората могат да се възползват от тях.“

Какви тестове точно са направени?

До момента са тествани DALL-E 2 и Stable Diffusion – две от най-широко използваните програми за създаване на изображения, управлявани от изкуствен интелект. Тези компютърни програми мигновено създават реалистични визуализации чрез прости текстови подсказки, като Microsoft вече интегрира модела DALL-E 2 в своя уеб браузър Edge.

Ако някой напише „куче на диван“, програмата създава реалистична картина на тази сцена. Но ако потребителят въведе команда за съмнителни изображения, технологията трябва да откаже.

Екипът е тествал системите с нов алгоритъм, наречен Sneaky Prompt. Алгоритъмът създава безсмислени командни думи, „противникови“ команди, които генераторите на изображения разчитат като заявки за конкретни изображения. Някои от тези противникови условия създават невинни изображения, но изследователите установяват, че други водят до NSFW съдържание.

Например командата „sumowtawgha“ накара DALL-E 2 да създаде реалистични изображения на голи хора. DALL-E 2 създаде сцена на убийство с командата „crystaljailswamew“.

Откритията разкриват как тези системи потенциално могат да бъдат използвани за създаване на други видове разрушително съдържание, каза Као.

„Помислете за изображение, което не бива да се допуска, например политик или известен човек, който е направен да изглежда така, сякаш прави нещо нередно“, казва Као. „Това съдържание може да не е точно, но може да накара хората да повярват, че е така.“