What happens when technology knows more about us than we do? A computer now can detect our slightest facial microexpressions and be able to tell the difference between a real smile and a fake one. That's only the beginning. Technology has become incredibly intelligent and already knows a lot about our internal states. And whether we like it or not, we already are sharing parts of our inner lives that's out of our control. That seems like a problem, because a lot of us like to keep what's going on inside from what people actually see. We want to have agency over what we share and what we don't. We all like to have a poker face.
Wat gebeurt er als technologie meer weet over ons dan wijzelf? Een computer kan nu onze kleinste gezichtsuitdrukkingen bespeuren, en het verschil zien tussen een echte en een neppe glimlach. Dat is pas het begin. Technologie is ontzettend slim geworden en weet al veel over onze innerlijke gesteldheid. Of we het leuk vinden of niet, we delen al onderdelen van onze innerlijke levens, wat buiten onze macht ligt. Dat lijkt een probleem, omdat velen van ons graag wat zich vanbinnen afspeelt gescheiden houden van wat zichtbaar is. We willen kunnen bepalen wat we delen en wat niet. We willen allemaal een pokerface hebben.
But I'm here to tell you that I think that's a thing of the past. And while that might sound scary, it's not necessarily a bad thing. I've spent a lot of time studying the circuits in the brain that create the unique perceptual realities that we each have. And now I bring that together with the capabilities of current technology to create new technology that does make us better, feel more, connect more. And I believe to do that, we have to be OK losing some of our agency.
Maar ik ben hier om te vertellen dat ik dat achterhaald vind. En ook al klinkt dat eng, het is niet per se iets slechts. Ik heb veel tijd besteed aan het bestuderen van hersencircuits die de unieke waarnemingen van onze realiteit creëren. En nu breng ik dat samen met de mogelijkheden van huidige technologie om nieuwe technologie te creëren, die ons beter maakt, meer laat voelen, meer verbindt. En ik geloof dat we daarvoor moeten accepteren dat we deels onze macht te verliezen.
With some animals, it's really amazing, and we get to see into their internal experiences. We get this upfront look at the mechanistic interaction between how they respond to the world around them and the state of their biological systems. This is where evolutionary pressures like eating, mating and making sure we don't get eaten drive deterministic behavioral responses to information in the world. And we get to see into this window, into their internal states and their biological experiences. It's really pretty cool. Now, stay with me for a moment -- I'm a violinist, not a singer. But the spider's already given me a critical review.
Met sommige dieren -- het is echt fantastisch -- krijgen wij inzicht tot hun innerlijke ervaringen. We krijgen inzicht in de mechanische wisselwerking tussen de reactie op hun omgeving en de staat van hun biologische systemen. Dit is waar evolutionaire dwang, zoals eten, paren, en zorgen dat we niet worden opgegeten, deterministische gedragsreacties omgevingsinformatie aanstuurt. En wij krijgen inzicht in dit beeld, in hun innerlijke staten en biologische ervaringen. Het is echt best cool. Nou, moet je luisteren, ik ben een violist, geen zangeres. Maar de spin heeft me al een kritische beoordeling gegeven.
(Video) (Singing in a low pitch)
(Video) (Gezang op lage toon)
(Singing in a middle pitch)
(Gezang op middelhoge toon)
(Singing in a high pitch)
(Gezang op hoge toon)
(Singing in a low pitch)
(Gezang op lage toon)
(Singing in a middle pitch)
(Gezang op middelhoge toon)
(Singing in a high pitch)
(Gezang op hoge toon)
(Laughter)
(Gelach)
Poppy Crum: It turns out, some spiders tune their webs like violins to resonate with certain sounds. And likely, the harmonics of my voice as it went higher coupled with how loud I was singing recreated either the predatory call of an echolocating bat or a bird, and the spider did what it should. It predictively told me to bug off. I love this. The spider's responding to its external world in a way that we get to see and know what's happening to its internal world. Biology is controlling the spider's response; it's wearing its internal state on its sleeve.
Blijkbaar stemmen spinnen hun web zoals violen zodat ze resoneren op bepaalde geluiden. En waarschijnlijk leek de stijgende toon van mijn stem, gekoppeld aan hoe luid ik zong op de klank van een jagende vleermuis of vogel, en de spin deed wat hij zou moeten doen. Met voorspellende blik vertelde hij me af te taaien. Ik vind dit geweldig. De spin reageert op zijn externe wereld op zo'n manier dat we zien en begrijpen wat er gebeurt in zijn innerlijke wereld. Biologie bepaalt de reactie van de spin; zijn innerlijke gesteldheid is als een open boek.
But us, humans -- we're different. We like to think we have cognitive control over what people see, know and understand about our internal states -- our emotions, our insecurities, our bluffs, our trials and tribulations -- and how we respond. We get to have our poker face.
Maar wij, mensen -- wij zijn anders. Wij hebben graag cognitieve controle over wat anderen zien, weten en begrijpen over onze innerlijke staat -- onze emoties, onze onzekerheden, ons gebluf, onze beproevingen -- en hoe wij reageren. We kunnen een pokerface opzetten.
Or maybe we don't. Try this with me. Your eye responds to how hard your brain is working. The response you're about to see is driven entirely by mental effort and has nothing to do with changes in lighting. We know this from neuroscience. I promise, your eyes are doing the same thing as the subject in our lab, whether you want them to or not. At first, you'll hear some voices. Try and understand them and keep watching the eye in front of you. It's going to be hard at first, one should drop out, and it should get really easy. You're going to see the change in effort in the diameter of the pupil.
Of misschien toch niet. Probeer even het volgende. Je oog reageert op hoe hard je hersenen werken. De reactie die je ziet is geheel ontstaan door mentale inspanning en heeft niets te maken met licht veranderingen. We weten dit door neurowetenschap. Ik beloof, je ogen doen hetzelfde als het proefpersoon in ons lab, of je dat nu wilt of niet. In het begin hoor je wat stemmen. Probeer ze te verstaan en blijf kijken naar het oog. Het begint moeilijk, dan valt er één weg en het wordt makkelijk. Je ziet het verschil in inspanning in de diameter van de pupil.
(Video) (Two overlapping voices talking)
(Video) (Twee overlappende stemmen praten)
(Single voice) Intelligent technology depends on personal data.
(Eén stem) Slimme technologie hangt af van persoonlijke data.
(Two overlapping voices talking)
(Twee overlappende stemmen praten)
(Single voice) Intelligent technology depends on personal data.
(Eén stem) Slimme technologie hangt af van persoonlijke data.
PC: Your pupil doesn't lie. Your eye gives away your poker face. When your brain's having to work harder, your autonomic nervous system drives your pupil to dilate. When it's not, it contracts. When I take away one of the voices, the cognitive effort to understand the talkers gets a lot easier. I could have put the two voices in different spatial locations, I could have made one louder. You would have seen the same thing. We might think we have more agency over the reveal of our internal state than that spider, but maybe we don't.
PC: Je pupil liegt niet. Je oog onthult je poker face. Als je hersenen harder moeten werken, maakt je autonome zenuwstelsel je pupillen groter. Zo niet, dan worden ze kleiner. Als ik één van de stemmen weghaal, wordt de inspanning om de sprekers te begrijpen een stuk minder. Ik had de stemmen op verschillende plekken kunnen zetten, of er één luider kunnen maken. Je had hetzelfde gezien. We mogen denken dat we meer controle hebben over de onthulling van onze staat, dan die spin, maar misschien toch niet.
Today's technology is starting to make it really easy to see the signals and tells that give us away. The amalgamation of sensors paired with machine learning on us, around us and in our environments, is a lot more than cameras and microphones tracking our external actions.
Moderne technologie maakt het erg makkelijk om de signalen te zien die ons verklappen. De vermenging van sensoren gekoppeld aan machinaal leren op ons, om ons en in onze omgeving, is veel meer dan cameras en microfoons die onze externe handelingen volgen.
Our bodies radiate our stories from changes in the temperature of our physiology. We can look at these as infrared thermal images showing up behind me, where reds are hotter and blues are cooler. The dynamic signature of our thermal response gives away our changes in stress, how hard our brain is working, whether we're paying attention and engaged in the conversation we might be having and even whether we're experiencing a picture of fire as if it were real. We can actually see people give off heat on their cheeks in response to an image of flame.
Onze lichamen stralen onze verhalen uit door verandering in de temperatuur van onze fysiologie. We zien deze als infrarode warmte afbeeldingen hier achter mij, de rode zijn warmer en de blauwe kouder. De dynamische handtekening van onze warmterespons verklapt onze verandering tijdens stress, hoe hard ons brein werkt, of we opletten en betrokken zijn bij het gesprek dat we hebben en zelfs of we een foto van vuur als echt ervaren. We zien zelfs hoe mensen hitte via hun wangen uitstralen als reactie op de foto van vlammen.
But aside from giving away our poker bluffs, what if dimensions of data from someone's thermal response gave away a glow of interpersonal interest? Tracking the honesty of feelings in someone's thermal image might be a new part of how we fall in love and see attraction. Our technology can listen, develop insights and make predictions about our mental and physical health just by analyzing the timing dynamics of our speech and language picked up by microphones. Groups have shown that changes in the statistics of our language paired with machine learning can predict the likelihood someone will develop psychosis.
Maar naast het verklappen van ons gebluf, stel dat dimensies van data over iemands warmterespons een gloed onthult van interpersoonlijke interesse? De eerlijkheid van gevoelens opsporen in iemands warmtebeeld kan een nieuwe manier zijn van hoe we verliefd worden en aantrekking zien. Onze technologie kan luisteren, inzichten en voorspellingen ontwikkelen over onze mentale en fysieke gezondheid door slechts de tijdsdynamiek van onze spraak en taal te analyseren met behulp van microfoons. Groepen aangetoond dat veranderingen in statistieken van onze taal tezamen met machinaal leren, de kans kan voorspellen dat iemand psychotisch wordt.
I'm going to take it a step further and look at linguistic changes and changes in our voice that show up with a lot of different conditions. Dementia, diabetes can alter the spectral coloration of our voice. Changes in our language associated with Alzheimer's can sometimes show up more than 10 years before clinical diagnosis. What we say and how we say it tells a much richer story than we used to think. And devices we already have in our homes could, if we let them, give us invaluable insight back. The chemical composition of our breath gives away our feelings. There's a dynamic mixture of acetone, isoprene and carbon dioxide that changes when our heart speeds up, when our muscles tense, and all without any obvious change in our behaviors.
Ik ga een stapje verder, en kijk naar veranderingen in taal en in onze stem die voorkomen in vele omstandigheden. Dementie en diabetes kunnen de spectrale kleur van onze stem veranderen. Veranderingen in onze taal, gelinkt aan de ziekte van Alzheimer, steken soms tien jaar eerder de kop op dan de klinische diagnose. Wat we zeggen en hoe we dat doen, vertelt veel meer dan dat we dachten. En als we het zouden toelaten, kunnen onze apparaten thuis ons enorm waardevolle inzichten geven. The chemische samenstelling van onze adem onthult onze gevoelens. De dynamische mix van aceton, isopreen en kooldioxide verandert als ons hart sneller klopt, als ons spieren gespannen zijn, en dat allemaal zonder duidelijke veranderingen in gedrag.
Alright, I want you to watch this clip with me. Some things might be going on on the side screens, but try and focus on the image in the front and the man at the window.
Oké, kijk deze clip even met me mee. Er gebeuren wat dingen op de zijschermen, maar probeer te focussen op het beeld in het midden en de man bij het raam.
(Eerie music)
(Griezelige muziek)
(Woman screams)
(Vrouw gilt)
PC: Sorry about that. I needed to get a reaction.
PC: Sorry daarvoor. Ik had jullie reactie nodig.
(Laughter)
(Gelach)
I'm actually tracking the carbon dioxide you exhale in the room right now. We've installed tubes throughout the theater, lower to the ground, because CO2 is heavier than air. But they're connected to a device in the back that lets us measure, in real time, with high precision, the continuous differential concentration of CO2. The clouds on the sides are actually the real-time data visualization of the density of our CO2. You might still see a patch of red on the screen, because we're showing increases with larger colored clouds, larger colored areas of red. And that's the point where a lot of us jumped. It's our collective suspense driving a change in carbon dioxide. Alright, now, watch this with me one more time.
Ik meet op dit moment daadwerkelijk jullie uitgeademde kooldioxide op. We hebben buisjes door het theater geïnstalleerd, laag bij de grond, omdat CO2 zwaarder is dan lucht. Ze zijn verbonden aan een apparaat achterin waarmee we in realtime en met grote precisie de doorlopende, verschillende CO2-concentraties kunnen meten. De wolken op de zijschermen zijn visualisaties van live data van de concentratie van onze CO2. Je kunt nog wat rood zien op het scherm, want we laten toenames zien met met grotere gekleurde wolken, grotere roodgekleurde gebieden. En dat is het moment waar veel van ons even schrokken. Ons gezamenlijke spanning zorgt voor een verandering in kooldioxide. Oké, kijk dit nog een keer met me mee.
(Cheerful music)
(Vrolijke muziek)
(Woman laughs)
(Vrouw lacht)
PC: You knew it was coming. But it's a lot different when we changed the creator's intent. Changing the music and the sound effects completely alter the emotional impact of that scene. And we can see it in our breath. Suspense, fear, joy all show up as reproducible, visually identifiable moments. We broadcast a chemical signature of our emotions. It is the end of the poker face.
PC: Je wist wat er kwam. Maar het is heel anders wanneer we de intentie van de maker veranderen. Het veranderen van muziek en geluidseffecten, verandert de emotionele impact van die scène helemaal. En dat zien we in onze adem. Spanning, angst, vreugde zijn reproduceerbare, visueel herkenbare momenten. We zenden een chemische handtekening van onze emoties uit. Het is het einde van het pokerface.
Our spaces, our technology will know what we're feeling. We will know more about each other than we ever have. We get a chance to reach in and connect to the experience and sentiments that are fundamental to us as humans in our senses, emotionally and socially. I believe it is the era of the empath. And we are enabling the capabilities that true technological partners can bring to how we connect with each other and with our technology. If we recognize the power of becoming technological empaths, we get this opportunity where technology can help us bridge the emotional and cognitive divide. And in that way, we get to change how we tell our stories. We can enable a better future for technologies like augmented reality to extend our own agency and connect us at a much deeper level.
Onze ruimtes, onze technologie zal weten wat we voelen. We zullen meer over elkaar weten dan ooit tevoren. We krijgen de kans om ons te verbinden met ervaringen en gevoelens die fundamenteel zijn voor mensen in onze zintuigen, emotioneel en sociaal. Dit is het tijdperk van empathie. En we maken de vaardigheden mogelijk waarmee technologische partners werken aan hoe wij ons verbinden met elkaar en met onze technologie. Als we de kracht van technologische empathie erkennen, krijgen we de kans om de emotionele en cognitieve kloof te overbruggen met technologie. Zo kunnen we veranderen hoe we onze verhalen vertellen. We kunnen een betere toekomst maken voor technologie als toegevoegde realiteit om ons eigen macht uit te breiden en ons veel dieper te verbinden.
Imagine a high school counselor being able to realize that an outwardly cheery student really was having a deeply hard time, where reaching out can make a crucial, positive difference. Or authorities, being able to know the difference between someone having a mental health crisis and a different type of aggression, and responding accordingly. Or an artist, knowing the direct impact of their work. Leo Tolstoy defined his perspective of art by whether what the creator intended was experienced by the person on the other end. Today's artists can know what we're feeling. But regardless of whether it's art or human connection, today's technologies will know and can know what we're experiencing on the other side, and this means we can be closer and more authentic.
Stel je voor dat een studieadviseur snapt dat een scholier die vrolijk lijkt eigenlijk door een zware tijd gaat, en door hulp te bieden een cruciaal en positief verschil kan maken. Of overheden die het verschil kunnen zien tussen iemand die in zware mentale nood is en een ander type agressie, en toepasselijk kunnen reageren. Of een kunstenaar, die de impact van zijn werk kan zien. Volgens Leo Tolstoy wordt kunst gedefinieerd door of de intentie van de maker van kunst ook zo ervaren wordt door het publiek. Tegenwoordig kunnen kunstenaars weten wat we voelen. Maar of het kunst is of menselijke verbinding, moderne technologie zal en kan weten wat wij aan andere kant ervaren, en dus kunnen we hechter en authentieker zijn.
But I realize a lot of us have a really hard time with the idea of sharing our data, and especially the idea that people know things about us that we didn't actively choose to share. Anytime we talk to someone, look at someone or choose not to look, data is exchanged, given away, that people use to learn, make decisions about their lives and about ours.
Maar ik snap dat velen van ons het een vervelend idee vinden om onze data te delen, en vooral het idee dat mensen dingen over ons weten, die we niet zelf kiezen om te delen. Elke keer wanneer we met iemand praten, iemand aankijken, of kiezen om niet te kijken, wordt data uitgewisseld, weggegeven, waar mensen van leren, en beslissingen mee nemen over hun levens en onze.
I'm not looking to create a world where our inner lives are ripped open and our personal data and our privacy given away to people and entities where we don't want to see it go. But I am looking to create a world where we can care about each other more effectively, we can know more about when someone is feeling something that we ought to pay attention to. And we can have richer experiences from our technology.
Ik wil geen wereld creëren waar onze innerlijke levens zo worden blootgesteld en onze data en privacy worden weggegeven aan mensen en entiteiten waarvan we het niet willen. Maar wel wil ik een wereld creëren waarin we effectiever om elkaar kunnen geven, we kunnen weten wanneer iemand iets voelt waaraan we aandacht moeten besteden. En we kunnen rijkere ervaringen hebben door onze technologie.
Any technology can be used for good or bad. Transparency to engagement and effective regulation are absolutely critical to building the trust for any of this. But the benefits that "empathetic technology" can bring to our lives are worth solving the problems that make us uncomfortable. And if we don't, there are too many opportunities and feelings we're going to be missing out on.
Elke technologie kan men goed of slecht gebruiken. Transparantie in omgang en effectieve regels zijn essentieel voor het opbouwen van vertrouwen voor dit alles. Maar de voordelen die 'empathische technologie' brengt zijn het waard om problemen op te lossen die ons ongemakkelijk doen voelen. En als we dit niet doen, zijn er te veel kansen en gevoelens die we gaan missen.
Thank you.
Bedankt.
(Applause)
(Applaus)