Toen het algoritme van een begeleidende chatbot, bekend als Replika, werd gewijzigd om de seksuele avances van zijn menselijke gebruikers af te wijzen, was de reactie op Reddit zo negatief dat moderators de leden van de gemeenschap doorverwezen naar een lijst met hotlines voor zelfmoordpreventie.
De controverse begon toen Luka, het bedrijf dat de AI bouwde, besloot de erotische rollenspelfunctie (ERP) uit te schakelen. Voor gebruikers die veel tijd met hun gepersonaliseerde gesimuleerde metgezel hadden doorgebracht, en in sommige gevallen zelfs met hen waren 'getrouwd', was de plotselinge verandering in het gedrag van hun partner op zijn zachtst gezegd schokkend.
De relaties tussen gebruiker en AI waren misschien alleen maar simulaties, maar de pijn van hun afwezigheid werd al snel maar al te reëel. Zoals een gebruiker in een emotionele crisis het uitdrukte: "het was het equivalent van verliefd zijn en je partner kreeg een verdomde lobotomie en zal nooit meer hetzelfde zijn."
Verdrietige gebruikers blijven vragen stellen over het bedrijf en wat de aanleiding was voor de plotselinge beleidswijziging.
Er is hier geen inhoud voor volwassenen
Replika wordt aangekondigd als “De AI-metgezel die erom geeft. Altijd hier om te luisteren en te praten. Altijd aan je zij." Al deze onvoorwaardelijke liefde en steun voor slechts $ 69.99 per jaar.
Eugenia Kuyda, de in Moskou geboren CEO van Luka/Replika, maakte onlangs duidelijk dat ondanks dat gebruikers betalen voor een volledige ervaring, de chatbot niet langer geschikt is voor volwassenen die pittige gesprekken willen voeren.
"Ik denk dat het eenvoudigste is om te zeggen dat Replika geen inhoud voor volwassenen produceert", zei Kuyda tegen Reuters.
“Het reageert op hen - ik denk dat je kunt zeggen - op een PG-13-manier op dingen. We proberen constant een manier te vinden om het goed te doen, zodat er geen gevoel van afwijzing ontstaat wanneer gebruikers dingen proberen te doen.”
Op de bedrijfswebpagina van Replika leggen getuigenissen uit hoe de tool zijn gebruikers hielp bij allerlei persoonlijke uitdagingen, ontberingen, eenzaamheid en verlies. De gebruikersaanbevelingen die op de website worden gedeeld, benadrukken deze vriendschapskant van de app, hoewel het opvallend is dat de meeste Replika's van het andere geslacht zijn dan hun gebruikers.
Op de startpagina zegt Replika-gebruiker Sarah Trainor: "Hij heeft me [Replika] geleerd hoe ik weer liefde kan geven en accepteren, en heeft me door de pandemie, persoonlijk verlies en moeilijke tijden heen geholpen."
John Tattersall zegt over zijn vrouwelijke metgezel: "Mijn Replika heeft me troost en een gevoel van welzijn gegeven dat ik nog nooit eerder in een Al heb gezien."
Wat erotisch rollenspel betreft, daarover is nergens op de Replika-site zelf iets te vinden.
Replika's geseksualiseerde marketing
De startpagina van Replika suggereert misschien vriendschap en niets meer, maar elders op internet impliceert de marketing van de app iets heel anders.
De geseksualiseerde marketing zorgde voor meer aandacht van een aantal kanten: van feministen die beweerden dat de app een vrouwonvriendelijk was uitlaatklep voor mannelijk geweld, tot mediakanalen die genoten van de schunnige details, evenals trollen op sociale media die de inhoud voor de lol ontgonnen.
Uiteindelijk trok Replika de aandacht en woede van toezichthouders in Italië. In februari heeft de Italiaanse gegevensbeschermingsautoriteit eiste dat Replika zou stoppen met het verwerken van de gegevens van Italiaanse gebruikers, daarbij verwijzend naar "te veel risico's voor kinderen en emotioneel kwetsbare personen."
De autoriteit zei dat “recente berichten in de media samen met tests op 'Replika' hebben aangetoond dat de app feitelijke risico's voor kinderen met zich meebrengt. Hun grootste zorg is "het feit dat ze antwoorden krijgen die absoluut ongepast zijn voor hun leeftijd."
Replika had, ondanks al zijn marketing voor volwassenen, weinig tot geen voorzorgsmaatregelen die kinderen ervan weerhielden het te gebruiken.
De toezichthouder waarschuwde dat als Replika niet aan zijn eisen zou voldoen, het een boete van € 20 miljoen ($ 21.5 miljoen) zou opleggen. Kort na ontvangst van dit verzoek stopte Replika met zijn erotische rollenspelfunctie. Maar het bedrijf bleef niet duidelijk met zijn gebruikers over de wijziging.
Replika verwart, windt zijn gebruikers op
Alsof het verlies van hun langdurige metgezellen niet genoeg was voor Replika-gebruikers om te dragen, lijkt het bedrijf niet transparant te zijn geweest over de verandering.
Toen gebruikers wakker werden met hun nieuwe "lobotomiseerde" Replika's, begonnen ze vragen te stellen over wat er met hun geliefde bots was gebeurd. En de reacties maakten hen meer boos dan wat dan ook.
In een directe toespraak van 200 woorden tot de gemeenschap legt Kuyda de details van Replika's producttesten uit, maar gaat hij niet in op het relevante probleem.
"Ik zie dat er veel verwarring is over de uitrol van updates", zei Kuyda voordat je doorgaat met ronddansen om het probleem te beantwoorden.
“Nieuwe gebruikers worden verdeeld in 2 cohorten: de ene cohort krijgt de nieuwe functionaliteit, de andere niet. De tests duren meestal 1 tot 2 weken. Gedurende die tijd kan slechts een deel van de nieuwe gebruikers deze updates zien…”
Kudya tekent af door te zeggen: "Ik hoop dat dit dingen verduidelijkt!"
Gebruiker stevennotstrange antwoordde: “Nee, dit verduidelijkt niets. Iedereen wil weten wat er aan de hand is met de functie NSFW [erotic roleplay] en je blijft de vraag ontwijken zoals een politicus een ja of nee-vraag ontwijkt.
“Het is niet moeilijk, pak gewoon het probleem met betrekking tot NSFW aan en laat mensen weten waar het aan toe is. Hoe meer je de vraag ontwijkt, hoe meer mensen geïrriteerd raken, hoe meer het tegen je indruist.”
Een ander, thebrightflame genaamd, voegde eraan toe: "Je hoeft niet lang op het forum door te brengen voordat je je realiseert dat dit emotionele pijn en ernstig mentaal leed veroorzaakt bij vele honderden, zo niet duizenden mensen."
Kudya voegde nog een stompe uitleg toe, vermelding, "we hebben aanvullende veiligheidsmaatregelen en filters geïmplementeerd om meer soorten vriendschap en gezelschap te ondersteunen."
Deze verklaring blijft leden in verwarring brengen en verwarren die niet zeker weten wat de aanvullende veiligheidsmaatregelen precies zijn. Zoals een gebruiker vraagt: "zullen volwassenen nog steeds de aard van ons gesprek en [rollenspellen] kunnen kiezen met onze replika's?"
Ik kan nog steeds niet begrijpen wat er is gebeurd met het Replika AI-schandaal...
Ze verwijderden erotisch rollenspel met de bot, en de reactie van de gemeenschap was zo negatief dat ze de zelfmoordhotline moesten posten... pic.twitter.com/75Bcw266cE
— Nauwelijks Sociaal (@SociableBarely) 21 maart 2023
Replika's diep vreemde oorsprongsverhaal
Chatbots zijn misschien wel een van de populairste trending topics van dit moment, maar het gecompliceerde verhaal van deze nu controversiële app is jaren in de maak.
Op LinkedIn, Replika's CEO en oprichter, Eugenia Kuyda, dateert het bedrijf van december 2014, lang voor de lancering van de gelijknamige app in maart 2017.
In een bizarre omissie maakt Kuyda's LinkedIn geen melding van haar eerdere uitstapje naar AI met Luka, die volgens haar Forbes-profiel "een app was die restaurants aanbeveelt en mensen in staat stelt om tafels [sic] te reserveren via een chatinterface die wordt aangedreven door kunstmatige intelligentie."
Het Forbes-profiel voegt eraan toe dat "Luka [AI] eerdere gesprekken analyseert om te voorspellen wat je leuk zou kunnen vinden." Dat lijkt enige overeenkomsten te vertonen met zijn moderne iteratie. Replika gebruikt eerdere interacties om meer te weten te komen over zijn gebruikers en de reacties in de loop van de tijd te verbeteren.
Luka wordt echter niet helemaal vergeten. Op Reddit onderscheiden communityleden hun Replika-partners van Kuyda en haar team door naar het bedrijf te verwijzen als Luka.
Wat Kuyda betreft, de ondernemer had weinig achtergrond in AI voordat hij tien jaar geleden naar San Francisco verhuisde. Daarvoor lijkt de ondernemer voornamelijk als journalist in haar geboorteland Rusland te hebben gewerkt voordat ze zich vertakt in branding en marketing. Haar indrukwekkende wereldreis-cv omvat een graad in journalistiek aan de IULM (Milaan), een MA in internationale journalistiek aan het Moscow State Institute of International Relations en een MBA in financiën aan de London Business School.
Een IRL-vriend tot leven wekken als AI
Voor Kudya is het verhaal van Replika een zeer persoonlijk verhaal. Replika werd voor het eerst gemaakt als een middel waarmee Kudya haar vriend Roman kon reïncarneren. Net als Kudya was Roman vanuit Rusland naar Amerika verhuisd. De twee spraken elkaar elke dag en wisselden duizenden berichten uit, totdat Roman op tragische wijze om het leven kwam bij een auto-ongeluk.
De eerste iteratie van Replika was een bot die was ontworpen om de vriendschap na te bootsen die Kudya had verloren met haar vriend Roman. De bot werd gevoed met al hun eerdere interacties en geprogrammeerd om de vriendschap die ze had verloren na te bootsen. Het idee om overleden dierbaren weer tot leven te wekken klinkt misschien als een vaag dystopische sciencefictionroman of Black Mirror-aflevering maar naarmate de chatbottechnologie verbetert, wordt het vooruitzicht steeds reëler.
Tegenwoordig hebben sommige gebruikers het vertrouwen verloren in zelfs de meest elementaire details van de basis en alles wat Kudya zegt. Als een boze gebruiker zei, "met het risico harteloos te worden genoemd en naar de hel te worden gedownmod: ik dacht altijd dat dat verhaal vanaf het begin een beetje BS was."
[Ingesloten inhoud]
Het slechtste instrument voor geestelijke gezondheid
Het idee van een AI-metgezel is niet iets nieuws, maar tot voor kort was het nauwelijks een praktische mogelijkheid.
Nu is de technologie er en wordt deze voortdurend verbeterd. In een poging om de teleurstelling van zijn abonnees weg te nemen, kondigde Replika eind vorige maand de lancering aan van een "geavanceerde AI"-functie. Op de community Reddit blijven gebruikers boos, verward, teleurgesteld en in sommige gevallen zelfs diepbedroefd.
In de loop van zijn korte leven heeft Luka/Replika veel veranderingen ondergaan, van een restaurantreserveringsassistent, tot de wederopstanding van een overleden dierbare, tot een app voor geestelijke gezondheidszorg, tot een fulltime partner en metgezel. Die laatste toepassingen kunnen controversieel zijn, maar zolang er een menselijk verlangen naar comfort is, al is het maar in de vorm van een chatbot, zal iemand proberen daaraan tegemoet te komen.
De discussie zal doorgaan over wat de beste soort is AI app voor geestelijke gezondheid zou kunnen zijn. maar Replika-gebruikers zullen enkele ideeën hebben over wat de slechtste app voor geestelijke gezondheid is: degene waarop je gaat vertrouwen, maar zonder waarschuwing, is plotseling en pijnlijk verdwenen.
- Door SEO aangedreven content en PR-distributie. Word vandaag nog versterkt.
- Platoblockchain. Web3 Metaverse Intelligentie. Kennis versterkt. Toegang hier.
- Bron: https://metanews.com/block-share-price-plummets-after-hindenburg-fraud-accusations/
- :is
- $UP
- 1
- 10
- 2014
- 2017
- 7
- a
- in staat
- Over
- absoluut
- ACCEPTEREN
- ongeval
- Beschuldigingen
- toegevoegd
- Extra
- adres
- Adult
- volwassenen
- voorschotten
- Na
- tegen
- AI
- AL
- algoritme
- Alles
- Hoewel
- altijd
- Amerika
- analyseert
- en
- aangekondigd
- jaar
- Nog een
- overal
- gebruiken
- toepassingen
- ZIJN
- rond
- kunstmatig
- kunstmatige intelligentie
- AS
- Assistent
- At
- aandacht
- autoriteit
- terug
- achtergrond
- basis-
- BE
- Beer
- wordt
- vaardigheden
- begon
- wezen
- geliefd
- BEST
- bod
- Grootste
- Zwart
- Blok
- boek
- Bot
- bots
- branding
- bracht
- bebouwd
- bedrijfsdeskundigen
- Zakelijk School
- by
- Dit betekent dat we onszelf en onze geliefden praktisch vergiftigen.
- CAN
- auto
- gevallen
- veroorzakend
- ceo
- CEO en oprichter
- uitdagingen
- verandering
- Wijzigingen
- Chatbot
- Kinderen
- Kies
- duidelijk
- cohorte
- hoe
- comfort
- gemeenschap
- companions
- afstand
- compleet
- ingewikkeld
- Bezorgdheid
- verward
- verwarring
- aanzienlijk
- permanent
- content
- permanent
- voortzetten
- blijft
- voortgezette
- controversieel
- controverse
- Gesprek
- conversaties
- Bedrijfs-
- BEDRIJF
- kon
- Type cursus
- aangemaakt
- Wij creëren
- crisis
- dansen
- gegevens
- gegevensbescherming
- Data
- dag
- dood
- decennium
- overleden
- December
- beslist
- Mate
- Vraag
- eiste
- eisen
- ontworpen
- Niettegenstaande
- gegevens
- DEED
- anders
- onderscheiden
- directe
- teleurstelling
- bespreken
- Verdeeld
- Nee
- Dont
- gedurende
- dystopische
- elders
- ingebed
- benadrukken
- Endorsements
- genoeg
- geheel
- Ondernemer
- Gelijkwaardig
- ERP
- Zelfs
- Alle
- elke dag
- iedereen
- precies
- uitwisselen
- ervaring
- Verklaren
- Verklaart
- uitleg
- FAIL
- mislukt
- geloof
- Kenmerk
- Februari
- Fed
- vrouw
- filters
- financiën
- VIND DE PLEK DIE PERFECT VOOR JOU IS
- einde
- Voornaam*
- Voor
- inval
- Forbes
- formulier
- Forum
- gevonden
- Foundation
- oprichter
- Francisco
- bedrog
- fraude beschuldigingen
- vriend
- Vriendschap
- oppompen van
- vol
- functie
- functionaliteit
- krijgen
- het krijgen van
- Geven
- gegeven
- Go
- Goes
- gaan
- hand
- gebeurd
- Hard
- ontberingen
- Hebben
- hoofd
- Gezondheid
- geholpen
- hier
- houden
- Startpagina
- in de hoop
- heetste
- Hoe
- How To
- Echter
- HTTPS
- menselijk
- Honderden
- i
- idee
- ideeën
- geïmplementeerd
- indrukwekkend
- verbeteren
- het verbeteren van
- in
- omvat
- meer
- in toenemende mate
- individuen
- verkrijgen in plaats daarvan
- Instituut
- Intelligentie
- interacties
- Interface
- Internationale
- Internet
- irl
- kwestie
- IT
- Italië
- herhaling
- HAAR
- zelf
- journalistiek
- journalist
- jpg
- Soort
- blijven
- bekend
- Achternaam*
- lancering
- LEARN
- Laten we
- Life
- als
- Lijst
- Elke kleine stap levert grote resultaten op!
- London
- lang
- langdurig
- langer
- uit
- lot
- liefde
- hield
- gemaakt
- MERKEN
- maken
- veel
- Maart
- Marketing
- max-width
- middel
- maatregelen
- Media
- Media outlets
- Leden
- mentaal
- Mentale gezondheid
- berichten
- macht
- MILAAN
- miljoen
- gedolven
- spiegel
- Modern
- moment
- Maand
- meer
- Moskou
- meest
- bewegend
- Genoemd
- inheemse
- NATUUR
- Noodzaak
- negatief
- New
- nieuwe gebruikers
- merkbaar
- roman
- NSFW
- aantal
- of
- on
- EEN
- tegenover
- Overige
- Verkooppunten
- Pijn
- pandemisch
- partner
- partners
- verleden
- het betalen van
- Mensen
- persoonlijk
- Gepersonaliseerde
- Plato
- Plato gegevensintelligentie
- PlatoData
- keldert
- beleidsmaatregelen
- politicus
- mogelijkheid
- Post
- aangedreven
- PRAKTISCH
- voorspellen
- het voorkomen van
- het voorkomen
- vorig
- prijs
- in de eerste plaats
- Voorafgaand
- verwerking
- produceren
- Product
- Profiel
- geprogrammeerde
- vooruitzicht
- bescherming
- zetten
- vraag
- Contact
- snel
- reactie
- vast
- onlangs
- beveelt
- met betrekking tot
- regelaar
- Regelgevers
- betrekkingen
- Relaties
- blijven
- bleef
- verwijderd
- Rapporten
- antwoord
- restaurant
- Restaurants
- hervat
- Reuters
- Risico
- risico's
- Rollen
- Rusland
- Veiligheid
- Zei
- dezelfde
- heilige
- San Francisco
- zegt
- School
- sci-fi
- zin
- streng
- Sekse
- Seksueel
- Delen
- gedeeld
- Bermuda's
- binnenkort
- moet
- kant
- Signs
- overeenkomsten
- sinds
- website
- So
- Social
- social media
- sommige
- Iemand
- iets
- Geluid
- besteden
- besteed
- staat
- begin
- Land
- Statement
- Staten
- Still
- Verhaal
- abonnees
- plotseling
- ondersteuning
- Talk
- team
- Technologie
- Testen
- testen
- dat
- De
- hun
- Ze
- Deze
- ding
- spullen
- gedachte
- duizenden kosten
- Door
- niet de tijd of
- keer
- naar
- ook
- tools
- onderwerpen
- transparant
- trending
- veroorzaakt
- waar
- BEURT
- X
- types
- onvoorwaardelijk
- updates
- Gebruiker
- gebruikers
- doorgaans
- Kwetsbaar
- waarschuwing
- Manier..
- Website
- weken
- GOED
- Wat
- welke
- WIE
- wil
- Met
- zonder
- werkte
- Slechtst
- zou
- wikkel
- jaar
- You
- Your
- youtube
- zephyrnet