How many decisions have been made about you today, or this week or this year, by artificial intelligence? I build AI for a living so, full disclosure, I'm kind of a nerd. And because I'm kind of a nerd, wherever some new news story comes out about artificial intelligence stealing all our jobs, or robots getting citizenship of an actual country, I'm the person my friends and followers message freaking out about the future.
Hány döntést hozott önökről ma, ezen a héten, ebben az évben a mesterséges intelligencia (MI) ? Abból élek, hogy az MI-t építem. Szóval, hogy értsék, kocka vagyok. És kocka voltom miatt ha bármikor felbukkan egy új sztori arról, hogy az MI ellopja az állásainkat, vagy robotok kapnak állampolgárságot egy országban, én vagyok az az ember, akit barátai és követői nyaggatnak a jövőről.
We see this everywhere. This media panic that our robot overlords are taking over. We could blame Hollywood for that. But in reality, that's not the problem we should be focusing on. There is a more pressing danger, a bigger risk with AI, that we need to fix first. So we are back to this question: How many decisions have been made about you today by AI? And how many of these were based on your gender, your race or your background?
Ezt látjuk mindenfelé. Ezt a médiapánikot, hogy a robotok átveszik az uralmat. Hollywoodot hibáztathatjuk ezért. De a valóságban nem erre a problémára kéne összpontosítanunk. Van egy sürgetőbb veszély, egy nagyobb kockázat az MI-vel, először azt kéne megoldani. Ezért visszatérek erre a kérdésre: Hány döntést hozott önökkel kapcsolatban ma az MI? És ezek közül mennyi alapult a nemükön, a fajukon, vagy a hátterükön?
Algorithms are being used all the time to make decisions about who we are and what we want. Some of the women in this room will know what I'm talking about if you've been made to sit through those pregnancy test adverts on YouTube like 1,000 times. Or you've scrolled past adverts of fertility clinics on your Facebook feed. Or in my case, Indian marriage bureaus.
Folyamatosan használnak algoritmusokat arra, hogy döntsenek arról, kik vagyunk és mit akarunk. Néhány nő a teremben tudja, miről beszélek, ha kénytelenek voltak végignézni terhességiteszt-reklámokat a YouTube-on, nagyjából ezerszer, vagy termékenységi klinikák reklámjait görgették át Facebook-csatornájukon, vagy esetemben indiai házasságközvetítőkét.
(Laughter)
(Nevetés)
But AI isn't just being used to make decisions about what products we want to buy or which show we want to binge watch next. I wonder how you'd feel about someone who thought things like this: "A black or Latino person is less likely than a white person to pay off their loan on time." "A person called John makes a better programmer than a person called Mary." "A black man is more likely to be a repeat offender than a white man." You're probably thinking, "Wow, that sounds like a pretty sexist, racist person," right? These are some real decisions that AI has made very recently, based on the biases it has learned from us, from the humans. AI is being used to help decide whether or not you get that job interview; how much you pay for your car insurance; how good your credit score is; and even what rating you get in your annual performance review. But these decisions are all being filtered through its assumptions about our identity, our race, our gender, our age. How is that happening?
De az MI nem csak arról dönt, mit akarunk vásárolni, vagy mit szeretnénk legközelebb megnézni. Vajon mi lenne a véleményük valakiről, aki így gondolkodik: "Egy fekete vagy latin ember kisebb eséllyel fizeti vissza időben a hitelét, mint egy fehér." "Egy John nevű ember jobb programozó lehet, mint akit Marynek hívnak." "Egy fekete nagyobb valószínűséggel válik visszaeső bűnözővé, mint egy fehér." Valószínűleg azt gondolják: "Hú, ez elég szexista és rasszista ember!" Igaz? Ez néhány, MI által mostanában hozott tényleges döntés, ami a tőlünk tanult előítéleteken alapul. Tőlünk, emberektől. Az MI-t használják annak eldöntésére, ki kaphat állásinterjút, mennyit kell fizetnünk az autóbiztosításunkért, mennyire jó a hitelképességünk, és még arról is, milyen értékelést kapunk éves teljesítményünkre. De minden ilyen döntést a hovatartozásunkkal, rasszunkkal, nemünkkel, korunkkal kapcsolatos feltételezések befolyásolnak. Hogy lehetséges ez?
Now, imagine an AI is helping a hiring manager find the next tech leader in the company. So far, the manager has been hiring mostly men. So the AI learns men are more likely to be programmers than women. And it's a very short leap from there to: men make better programmers than women. We have reinforced our own bias into the AI. And now, it's screening out female candidates. Hang on, if a human hiring manager did that, we'd be outraged, we wouldn't allow it. This kind of gender discrimination is not OK. And yet somehow, AI has become above the law, because a machine made the decision. That's not it.
Képzeljék el, hogy az MI egy humánerőforrás-menedzsernek segít megtalálni a következő informatikai vezetőt a cég számára. Idáig a menedzser főleg férfiakat alkalmazott. Így az MI azt tanulja, hogy férfiak inkább válnak programozóvá, mint nők. Innen már csak egy kis ugrás, hogy a férfiak jobb programozók, mint a nők. Betápláltuk előítéletünket az MI-be, és az most kiszűri a nőket. Várjunk csak, ha egy humánerőforrás-menedzser tenné ezt, dühösek lennénk, nem engednénk. Ez egyfajta nemi diszkrimináció, ami nem jó. És mégis, valahogy az MI törvény felettivé vált, mert egy gép hozta a döntést. Nem csak erről van szó.
We are also reinforcing our bias in how we interact with AI. How often do you use a voice assistant like Siri, Alexa or even Cortana? They all have two things in common: one, they can never get my name right, and second, they are all female. They are designed to be our obedient servants, turning your lights on and off, ordering your shopping. You get male AIs too, but they tend to be more high-powered, like IBM Watson, making business decisions, Salesforce Einstein or ROSS, the robot lawyer. So poor robots, even they suffer from sexism in the workplace.
Az MI-vel való kapcsolatteremtés is előítéleteinket erősíti. Milyen gyakran használunk olyan hangasszisztenseket, mint Siri, Alexa és Cortana? Két dologban mind megegyeznek: nem tudják helyesen kiejteni a nevem, és valamennyien nők. Arra tervezték őket, hogy engedelmes szolgáink legyenek. Felgyújtsák és leoltsák a lámpáinkat, vásároljanak számunkra. Férfi MI-k is vannak, de rendszerint nagyobb hatalmúak: Mint az IBM Watsonja, amely üzleti döntéseket hoz, A Salesforce Einsteinje, vagy ROSS, a robotügyvéd. Szóval még a szegény robotok is szexizmustól szenvednek a munkahelyen.
(Laughter)
(Nevetés)
Think about how these two things combine and affect a kid growing up in today's world around AI. So they're doing some research for a school project and they Google images of CEO. The algorithm shows them results of mostly men. And now, they Google personal assistant. As you can guess, it shows them mostly females. And then they want to put on some music, and maybe order some food, and now, they are barking orders at an obedient female voice assistant. Some of our brightest minds are creating this technology today. Technology that they could have created in any way they wanted. And yet, they have chosen to create it in the style of 1950s "Mad Man" secretary. Yay!
Gondoljanak bele, hogy függ össze ez a két dolog, és hogyan hat egy gyerekre, aki napjaink MI-vel teli világában nő fel. Például kutatást végeznek egy iskolai projekthez, és Google-képeket keresnek vezérigazgatókról. Az algoritmus főleg férfiakról mutat nekik képeket. Aztán személyi asszisztenst gugliznak, Mint kitalálhatják, főleg nőket látnak. Majd valami zenét szeretnének, és talán ételt rendelnek, és ekkor odavetnek pár parancsot egy engedelmes női hangú asszisztensnek. Ezt a technológiát napjaink legkiválóbb elméi hozzák létre. Egy technológiát, amelyet bárhogy létrehozhatnának, ahogy csak akarják. És mégis, az 1950-es évek "Mad Man" titkár stílusában teszik ezt. Hurrá!
But OK, don't worry, this is not going to end with me telling you that we are all heading towards sexist, racist machines running the world. The good news about AI is that it is entirely within our control. We get to teach the right values, the right ethics to AI. So there are three things we can do. One, we can be aware of our own biases and the bias in machines around us. Two, we can make sure that diverse teams are building this technology. And three, we have to give it diverse experiences to learn from. I can talk about the first two from personal experience. When you work in technology and you don't look like a Mark Zuckerberg or Elon Musk, your life is a little bit difficult, your ability gets questioned.
De ne aggódjanak! Nem fejezem be azzal, hogy azt mondom önöknek, mindnyájan egy szexista, rasszista gépek által vezetett világ felé tartunk. A jó hír az MI-ről, hogy teljesen az irányításunk alatt áll. Valós értékeket és erkölcsöt kell tanítanunk neki. Három dolgot tehetünk: Az első, hogy tudatában lehetünk saját előítéleteinknek, és a gépekben lévő előítéletnek is. A második: változatos összetételű csapatot biztosítunk a technológia építésére. És a harmadik: megoldjuk, hogy sokrétűbb tapasztalatokra építhesse tudását. Az első kettőről személyes tapasztalataim alapján is beszélhetek. Ha a műszaki tudományok területén dolgozunk, és nem hasonlítunk Mark Zuckerberghez vagy Elon Muskhoz, az életünk kissé bonyolult, képességeinket megkérdőjelezik.
Here's just one example. Like most developers, I often join online tech forums and share my knowledge to help others. And I've found, when I log on as myself, with my own photo, my own name, I tend to get questions or comments like this: "What makes you think you're qualified to talk about AI?" "What makes you think you know about machine learning?" So, as you do, I made a new profile, and this time, instead of my own picture, I chose a cat with a jet pack on it. And I chose a name that did not reveal my gender. You can probably guess where this is going, right? So, this time, I didn't get any of those patronizing comments about my ability and I was able to actually get some work done. And it sucks, guys. I've been building robots since I was 15, I have a few degrees in computer science, and yet, I had to hide my gender in order for my work to be taken seriously.
Itt egy példa: Mint a legtöbb fejlesztő, gyakran csatlakozom online tech fórumokhoz, hogy tudásommal másokat segítsek. És rájöttem, hogy amikor saját nevem alatt, saját fotómmal teszem ezt, rendszeresen kapok ilyen kérdéseket és kommenteket, mint: "Miből gondolod, hogy elég képzett vagy ahhoz, hogy az MI-ről beszélj?" "Miből gondolod, hogy értesz a gépi tanuláshoz? Így tehát csináltam egy új profilt, és a saját képem helyett egy macskát választottam sugárhajtású felszereléssel. És olyan nevet választottam, amely nem fedi fel a nememet. Valószínűleg kitalálják, hova akarok kilyukadni, ugye? Szóval ezúttal nem kaptam egy leereszkedő kommentet sem a képességeimről, és lehetővé vált, hogy némi munkát végezzek. Baromság, srácok. 15 éves korom óta építek robotokat. Van néhány diplomám informatikából, és mégis, el kellett rejtenem a nememet, azért, hogy a munkámat komolyan vegyék.
So, what's going on here? Are men just better at technology than women? Another study found that when women coders on one platform hid their gender, like myself, their code was accepted four percent more than men. So this is not about the talent. This is about an elitism in AI that says a programmer needs to look like a certain person. What we really need to do to make AI better is bring people from all kinds of backgrounds. We need people who can write and tell stories to help us create personalities of AI. We need people who can solve problems. We need people who face different challenges and we need people who can tell us what are the real issues that need fixing and help us find ways that technology can actually fix it. Because, when people from diverse backgrounds come together, when we build things in the right way, the possibilities are limitless.
Szóval, mi folyik itt? Jobbak a férfiak a nőknél a technikában? Egy másik tanulmány kimutatta, hogy amikor női programozók egy platformon nemüket rejtve dolgoznak, programjaik 4 százalékkal nagyobb arányban kerültek elfogadásra a férfiakénál. Úgyhogy ez nem a tehetségről szól, hanem a megkülönböztetésről az MI területén, mely behatárolja, hogy néz ki egy programozó. Amit mindenképpen meg kell tennünk, hogy az MI jobbá váljon, hogy eltérő hátterű embereket kell előtérbe hoznunk, Szükségünk van olyan emberekre, akik történeteket mondanak és írnak, melyekkel segítenek bennünket MI személyiségek létrehozásában. Problémamegoldó emberekre van szükségünk. Emberekre, akik különféle kihívásokkal néznek szembe, akik elmondják nekünk, melyek a valódi, javítást igénylő hibák, és segítenek megtalálni a kijavításukhoz szükséges technikai módszereket. Mert amikor különböző hátterű emberek jönnek össze, amikor megfelelően építjük a dolgokat, a lehetőségek határtalanok.
And that's what I want to end by talking to you about. Less racist robots, less machines that are going to take our jobs -- and more about what technology can actually achieve. So, yes, some of the energy in the world of AI, in the world of technology is going to be about what ads you see on your stream. But a lot of it is going towards making the world so much better. Think about a pregnant woman in the Democratic Republic of Congo, who has to walk 17 hours to her nearest rural prenatal clinic to get a checkup. What if she could get diagnosis on her phone, instead? Or think about what AI could do for those one in three women in South Africa who face domestic violence. If it wasn't safe to talk out loud, they could get an AI service to raise alarm, get financial and legal advice. These are all real examples of projects that people, including myself, are working on right now, using AI.
Erről kívánok beszélni befejezésül, nem annyira a rasszista robotokról, vagy a munkánkat elvevő gépekről, hanem inkább arról, mit lehet a technológiával elérni. Szóval, igen, az MI energiáinak egy része, a technológia világának bizonyos hányada arról szól, milyen reklámokat látunk a csatornánkon. De nagy része abba az irányba halad, hogy a világot sokkal jobbá tegyük. Gondoljunk egy terhes nőre, aki a Kongói Demokratikus Köztársaságban 17 órát sétál a legközelebbi vidéki szülészeti klinikára, hogy kivizsgálják. Mi lenne, ha ehelyett telefonon kaphatna diagnózist? Vagy gondoljunk arra, mit jelenthetne az MI minden harmadik nőnek Dél-Afrikában, akik családon belüli erőszakkal szembesülnek. Ha nem volna biztonságos hangosan kiabálni, kaphatnak egy MI szolgáltatást a riasztáshoz, pénzügyi vagy jogi tanácshoz. Ezek mind olyan, projektekből vett valódi példák, amelyeken éppen dolgozunk, az MI-t használva.
So, I'm sure in the next couple of days there will be yet another news story about the existential risk, robots taking over and coming for your jobs.
Biztos vagyok benne, hogy pár napon belül megint felröppen egy újabb hír az egzisztenciális kockázatról, hogy jönnek a robotok, és átveszik a munkánkat.
(Laughter)
(Nevetés)
And when something like that happens, I know I'll get the same messages worrying about the future. But I feel incredibly positive about this technology. This is our chance to remake the world into a much more equal place. But to do that, we need to build it the right way from the get go. We need people of different genders, races, sexualities and backgrounds. We need women to be the makers and not just the machines who do the makers' bidding. We need to think very carefully what we teach machines, what data we give them, so they don't just repeat our own past mistakes. So I hope I leave you thinking about two things. First, I hope you leave thinking about bias today. And that the next time you scroll past an advert that assumes you are interested in fertility clinics or online betting websites, that you think and remember that the same technology is assuming that a black man will reoffend. Or that a woman is more likely to be a personal assistant than a CEO. And I hope that reminds you that we need to do something about it.
És amikor ilyesmi történik, tudom, hogy ugyanazokat a jövő miatt aggódó üzeneteket fogom kapni, de nagyon pozitívan gondolok erre a technológiára. Ez az esélyünk egyenlőbb új világot alkotni. De azért, hogy így legyen, a kezdetektől jól kell felépíteni. Kellenek különféle nemű, fajú, nemi identitású és hátterű emberek. Szükségünk van nőkre, akik alkotnak, és nem csak gépek, akik végrehajtják az alkotók parancsát. Nagyon meg kell gondolnunk, mit tanítunk a gépeknek, milyen adatokkal látjuk el őket, hogy ne csupán múltbéli hibáink megismétlői legyenek. Remélem, később majd elgondolkoznak két dolgon: Először is napjaink előítéleteiről. És hogy legközelebb, amikor egy reklámot görgetnek át, amely feltételezi, hogy érdeklik önöket a termékenységi klinikák vagy az online fogadó oldalak, gondolnak majd arra, és emlékezni fognak rá, hogy ugyanez a technológia feltételezi, hogy egy néger ember visszaeső lehet, vagy egy nő esetében valószínűbb, hogy személyi asszisztens lesz, nem pedig vezérigazgató. És remélem, ez emlékezteti majd önöket, hogy valamit tennünk kell ebben az ügyben.
And second, I hope you think about the fact that you don't need to look a certain way or have a certain background in engineering or technology to create AI, which is going to be a phenomenal force for our future. You don't need to look like a Mark Zuckerberg, you can look like me. And it is up to all of us in this room to convince the governments and the corporations to build AI technology for everyone, including the edge cases. And for us all to get education about this phenomenal technology in the future. Because if we do that, then we've only just scratched the surface of what we can achieve with AI.
Másodszor: remélem, elgondolkodnak arról, hogy nem kell egy bizonyos módon kinéznünk, vagy bizonyos háttérrel rendelkeznünk a tervezésben és a technikában, hogy olyan MI-t hozzunk létre, amely rendkívüli erővé válik a jövőben. Nem kell Mark Zuckerberghez hasonlítanunk. Nézhet ki valaki hozzám hasonlóan is. Ebben a teremben mindenkin múlik, hogy meggyőzzük a kormányokat és a vállalkozókat, hogy az MI technológiát az összes ember számára építsük, beleértve a kirívó eseteket is. És hogy mindnyájan kapjunk képzést erről a rendkívüli jövőbeni technológiáról. Mert ha így lesz, akkor csak épphogy belekóstoltunk abba, amit az MI-vel elérhetünk.
Thank you.
Köszönöm.
(Applause)
(Taps)