CoPilot genererer billeder med sex, stoffer og mindreårige, der drikker alkohol – stik imod Microsofts principper for ansvarlig AI

En ingeniør hos Microsoft har forsøgt at råbe op om selskabets Copilot Designer – men ingen lader til at have lyttet.

Artikel top billede

(Foto: Microsoft PR)

En december aften i 2023 sad Shane Jones, kunstig intelligens-ingeniør hos Microsoft, som så mange gange før og testede Microsoft Copilot igennem for sårbarheder.

Nærmere præcist arbejdede Shane Jones med Copilot Designer, AI-billedgeneratoren, som Microsoft lancerede i marts 2023, basseret på OpenAI's teknologi.

Ligesom med OpenAI's AI-billedgenerator, DALL-E, indtaster brugerne tekstbeskeder for at skabe billeder. Kreativiteten opfordres til at få frit løb, og du kan i princippet søge på alt fra en bjørn, der børster tænder, til Mette Frederiksen, der flyver i et rumskib.

Men Jones fandt ud af, at man også kan få Copilot Designer til at skabe deciderede ondskabsfulde og ekstemt følsomme billeder.

Det er blandt andet billeder af børn med våben, seksualiserede billeder af kvinder i voldelige sammenhæng og mindreårige, der drikker og tager stoffer – alt sammen meget langt fra Microsofts ofte citerede principper for ansvarlig AI.

"Det var der, jeg først indså, at det her virkelig ikke er en sikker model," siger Shane Jones til det amerikanske medie, CNBC, der har historien.

CNBC har i denne uge genskabt samme billeder i Copilot Designer, som Shane Jones genererede tilbage i december – altså tyder det på, at AI-tjenesten stadig ikke har styr på etikken i forhold til ansvarlig kunstig intelligens.

Microsoft bad Jones tie stille

Shane Jones har arbejdet hos Microsoft i seks år og er i øjeblikket principal software engineering manager i hovedkvarteret i Redmond, Washington.

Han arbejder ikke professionelt på Copilot. Som såkaldt red-teamer er Jones en del af en hær af medarbejdere og udenforstående, der i deres fritid vælger at teste virksomhedens AI-teknologi og se, hvor der kan være problemer.

Jones blev så foruroliget over sin oplevelse, at han begyndte at rapportere sine fund internt i december. Selvom Microsoft anerkendte hans bekymringer, var de ikke villig til at tage Copilot Designer af markedet.

I stedet henviste Microsoft Shane Jones til kilden bag billedgeneratoren, OpenAI, men da han ikke hørte fra dem, skrev han et åbent brev på LinkedIn, hvor han bad OpenAI’s bestyrelse om at tage DALL-E ned for at undersøge produktet.

Ifølge Jones bad Microsofts juridiske afdeling ham om at fjerne sit indlæg med det samme, hvilket han gjorde.

Tog sagen i egen hånd

Men da der ingenting skete fra Microsofts side, skrev Jones i januar et brev til amerikanske senatorer om sagen og mødtes senere med medarbejdere fra Senatets udvalg for handel, videnskab og transport.

Nu optrapper han sine bekymringer yderligere. Onsdag sendte Jones et brev til formanden for Federal Trade Commission, Lina Khan, og et andet til Microsofts bestyrelse. Brevene blev delt med CNBC på forhånd.

"I løbet af de sidste tre måneder har jeg gentagne gange opfordret Microsoft til at fjerne Copilot Designer fra offentlig brug, indtil der kunne indføres bedre sikkerhedsforanstaltninger," skriver Jones i et af sine breve.

Han tilføjede, at eftersom Microsoft har "afvist denne anbefaling", opfordrer han virksomheden til at tilføje oplysninger til produktet og ændre klassificeringen på Googles Android-app for at gøre det klart, at det kun er for et modent publikum.

Det er dog ikke blevet implementeret. Ifølge Jones har risikoen med AI-billedgenerering "været kendt af Microsoft og OpenAI før den offentlige frigivelse af AI-modellen.”

Shane Jones oplysinger om Copilot kommer efter, at Google i slutningen af sidste måned midlertidigt satte sin AI-billedgenerator, som er en del af deres Gemini AI-pakke, ud af spillet efter brugerklager over unøjagtige fotos og tvivlsomme svar på deres forespørgsler.

Hvorvidt Microsoft eller OpenAI må tiden vise. Shane Jones vil formentligt fortsætte sit pres mod virksomhederne.

Læses lige nu
    Computerworld Events

    Vi samler hvert år mere end 6.000 deltagere på mere end 70 events for it-professionelle.

    Ekspertindsigt – Lyt til førende specialister og virksomheder, der deler viden om den nyeste teknologi og de bedste løsninger.
    Netværk – Mød beslutningstagere, kolleger og samarbejdspartnere på tværs af brancher.
    Praktisk viden – Få konkrete cases, værktøjer og inspiration, som du kan tage direkte med hjem i organisationen.
    Aktuelle tendenser – Bliv opdateret på de vigtigste dagsordener inden for cloud, sikkerhed, data, AI og digital forretning.

    Sikkerhed | København

    Strategisk It-sikkerhedsdag 2026 - København

    Få overblik over cybersikkerhedens vigtigste teknologier, trusler og strategiske valg. Hør skarpe oplæg om AI-risici, forsvar, compliance og governance. Vælg mellem to spor og styrk både indsigt og netværk. Deltag i København 20. januar.

    Andre events | København

    Executive Conversations: Fra hype til afkast – her er vinderne af AI-ræset

    Få et klart overblik over AI’s reelle effekt i danske virksomheder. Arrangementet giver unge talenter og ambitiøse medarbejdere viden, der løfter karrieren, skærper beslutninger og gør dig klar til at præge den digitale udvikling. Læs mere og...

    Sikkerhed | Aarhus C

    Strategisk It-sikkerhedsdag 2026 - Aarhus

    Få overblik over cybersikkerhedens vigtigste teknologier, trusler og strategiske valg. Hør skarpe oplæg om AI-risici, forsvar, compliance og governance. Vælg mellem tre spor og styrk både indsigt og netværk. Deltag i Aarhus 22. januar.

    Se alle vores events inden for it

    Capgemini Danmark A/S

    IGNITE Graduate Program 2026

    Københavnsområdet

    SEGES Innovation

    IT-projektleder med teknisk indsigt

    Midtjylland

    IT-Forsyningen I/S

    Leder af serverteam

    Københavnsområdet

    Navnenyt fra it-Danmark

    Norriq Danmark A/S har pr. 1. september 2025 ansat Katrine Køpke Rasmussen som Consultant. Hun skal især beskæftige sig med sikre vækst i NORRIQS kunders forretninger gennem hendes skarpe rapporteringer. Nyt job

    Katrine Køpke Rasmussen

    Norriq Danmark A/S

    Netip A/S har pr. 15. september 2025 ansat Jimmi Overgaard som Key Account Manager ved netIP's kontor i Viborg. Han kommer fra en stilling som Sales Executive hos Globalconnect A/S. Nyt job

    Jimmi Overgaard

    Netip A/S

    Netip A/S har pr. 15. september 2025 ansat Benjamin Terp som Supportkonsulent ved netIP's kontor i Odense. Han er uddannet IT-Supporter hos Kjaer Data. Nyt job

    Benjamin Terp

    Netip A/S