Today's computers are so amazing that we fail to notice how terrible they really are. I'd like to talk to you today about this problem, and how we can fix it with neuroscience.
Dagens datorer är så fantastiska att vi inte ens märker hur usla de egentligen är. Jag skulle vilja prata med er om det här problemet och hur vi kan fixa det med hjälp av neurovetenskap.
First, I'd like to take you back to a frosty night in Harlem in 2011 that had a profound impact on me. I was sitting in a dive bar outside of Columbia University, where I studied computer science and neuroscience, and I was having this great conversation with a fellow student about the power of holograms to one day replace computers. And just as we were getting to the best part of the conversation, of course, his phone lights up. And he pulls it towards himself, and he looks down and he starts typing. And then he forces his eyeballs back up to mine and he goes, "Keep going. I'm with you." But of course his eyes were glazed over, and the moment was dead.
Jag vill börja med att ta med er till en frostig kväll i Harlem 2011 som påverkade mig på djupet. Jag satt på en sunkig bar nära Columbia University, där jag pluggade datavetenskap och neurovetenskap och jag hade ett bra samtal med en klasskompis om hur kraftfulla hologram var och att de en dag skulle ersätta datorer. Och precis när vi kom till den bästa delen av samtalet lyste förstås hans mobil upp. Och han drar den mot sig, tittar ner och börjar skriva. Sen tvingar han upp ögonen till mina och säger, "Fortsätt. Jag är med dig." Men hans blick var förstås glasartad och ögonblicket var borta.
Meanwhile across the bar, I noticed another student holding his phone, this time towards a group. He was swiping through pictures on Instagram, and these kids were laughing hysterically. And that dichotomy between how crappy I was feeling and how happy they were feeling about the same technology, really got me thinking. And the more I thought of it, the more I realized it was clearly not the digital information that was the bad guy here, it was simply the display position that was separating me from my friend and that was binding those kids together.
Samtidigt, på andra sidan baren såg jag en student som höll sin mobil, den här gången mot gruppen. Han bläddrade igenom bilder på Instagram och de skrattade hysteriskt. Och skillnaden mellan hur dåligt jag mådde och hur glada de var över samma teknik fick mig att fundera. Och ju mer jag tänkte på det, desto mer insåg jag att det uppenbarligen inte var den digitala informationen som var boven, utan det var skärmens placering som skilde mig från min vän och som band samman de andra.
See, they were connected around something, just like our ancestors who evolved their social cognitions telling stories around the campfire. And that's exactly what tools should do, I think. They should extend our bodies. And I think computers today are doing quite the opposite. Whether you're sending an email to your wife or you're composing a symphony or just consoling a friend, you're doing it in pretty much the same way. You're hunched over these rectangles, fumbling with buttons and menus and more rectangles. And I think this is the wrong way, I think we can start using a much more natural machine. We should use machines that bring our work back into the world. We should use machines that use the principles of neuroscience to extend our senses versus going against them.
De samlades runt någonting, precis som våra förfäder som utvecklade sina sociala förmågor genom att berätta historier vid lägerelden. Och det tycker jag är precis vad verktyg borde göra. De borde förlänga våra kroppar. Idag tycker jag datorer gör motsatsen. Oavsett om du skickar ett mejl till din fru eller komponerar en symfoni eller bara tröstar en vän gör du det på ungefär samma sätt. Du böjer dig över ett antal rektanglar, fumlar med knappar och menyer och fler rektanglar. Jag tror att det här är fel sätt. Jag tror att vi kan börja använda en mycket naturligare maskin. Vi borde använda maskiner som låter oss arbeta i världen. Vi borde använda maskiner som använder principer från neurovetenskap för att förstärka våra sinnen istället för att hämma dem.
Now it just so happens that I have such a machine here. It's called the Meta 2. Let's try it out. Now in front of me right now, I can see the audience, and I can see my very hands. And in three, two, one, we're going to see an immersive hologram appear, a very realistic hologram appear in front of me, of our very glasses I'm wearing on my head right now. And of course this could be anything that we're shopping for or learning from, and I can use my hands to very nicely kind of move it around with fine control. And I think Iron Man would be proud. We're going to come back to this in just a bit.
Nu råkar det vara så att jag har en sådan maskin här. Den heter Meta 2. Vi testar den. Framför mig just nu kan jag se publiken och jag kan se mina egna händer. Och om tre, två, en, kommer vi att se ett hologram dyka upp och ta över, ett realistiskt hologram som syns framför mig, som visar de glasögon som jag just nu har på huvudet. Och självklart kan det vara vad som helst som vi vill köpa eller lära oss om, och jag kan använda händerna för att flytta runt det på ett smidigt sätt. Jag tror att Iron Man skulle ha varit stolt. Vi återkommer till det här strax.
(Applause)
(Applåder)
Now if you're anything like me, your mind is already reeling with the possibilities of what we can do with this kind of technology, so let's look at a few.
Om ni är som jag så kretsar era tankar redan kring de möjligheter som den här tekniken ger oss, så vi ska titta på några.
My mom is an architect, so naturally the first thing I imagined was laying out a building in 3D space instead of having to use these 2D floor plans. She's actually touching graphics right now and selecting an interior decor. This was all shot through a GoPro through our very glasses.
Min mamma är arkitekt, så det första jag kom att tänka på var att rita ut en byggnad i 3D istället för att behöva använda sådana ritningar i 2D. Hon rör faktiskt vid det grafiska just nu och väljer inredningsdetaljer. Det här filmades med en GoPro genom våra egna glasögon.
And this next use case is very personal to me, it's Professor Adam Gazzaley's glass brain project, courtesy of UCSF. As a neuroscience student, I would always fantasize about the ability to learn and memorize these complex brain structures with an actual machine, where I could touch and play with the various brain structures.
Nästa exempel är viktigt för mig personligen, det är Adam Gazzaleys glashjärneprojekt, med tillstånd från UCSF. När jag pluggade neurovetenskap brukade jag alltid fantisera om möjligheten att lära sig och memorera de här komplexa hjärnstrukturerna med hjälp av en naturlig maskin, där jag skulle kunna röra vid
Now what you're seeing is called augmented reality,
och laborera med de olika hjärnstrukturerna.
but to me, it's part of a much more important story -- a story of how we can begin to extend our bodies with digital devices, instead of the other way around.
Vad ni ser här heter augmented reality, men för mig handlar det om något mer - en historia om hur vi kan börja att utvidga våra kroppar med hjälp av digitala hjälpmedel, istället för motsatsen.
Now ... in the next few years, humanity's going to go through a shift, I think. We're going to start putting an entire layer of digital information on the real world. Just imagine for a moment what this could mean for storytellers, for painters, for brain surgeons, for interior decorators and maybe for all of us here today. And what I think we need to do as a community, is really try and make an effort to imagine how we can create this new reality in a way that extends the human experience, instead of gamifying our reality or cluttering it with digital information. And that's what I'm very passionate about.
Men ... under de kommande åren tror jag mänskligheten kommer att förändras. Vi kommer att börja lägga ett helt lager av digital information ovanpå den verkliga världen. Fundera en stund på vad det skulle kunna betyda för historieberättare, för målare, för hjärnkirurger, för inredningsarkitekter och kanske för alla oss här idag. Och jag tror att vi som samhälle verkligen måste anstränga oss för att tänka ut hur vi kan skapa den här nya verkligheten på ett sätt som utvidgar den mänskliga upplevelsen istället för att spelifiera verkligheten eller att överlasta den med digital information. Det känner jag väldigt starkt för.
Now, I want to tell you a little secret. In about five years -- this is not the smallest device -- in about five years, these are all going to look like strips of glass on our eyes that project holograms. And just like we don't care so much about which phone we buy in terms of the hardware -- we buy it for the operating system -- as a neuroscientist, I always dreamt of building the iOS of the mind, if you will. And it's very, very important that we get this right, because we might be living inside of these things for at least as long as we've lived with the Windows graphical user interface. And I don't know about you, but living inside of Windows scares me.
Men jag vill berätta en liten hemlighet för er. Om ungefär fem år - det här är inte den minsta prylen - om ungefär fem år, kommer de här att se ut som glaslinser på våra ögon som projicerar hologram. Och precis som vi inte lägger så stor vikt vid vilken hårdvara som finns i mobilen som vi köper - vi köper den för operativsystemet - så har jag som hjärnforskare alltid drömt om att bygga ett slags iOS för hjärnan. Och det är väldigt viktigt att vi får till det på ett bra sätt, för vi kommer kanske att leva inuti de här sakerna minst lika länge som vi har levt med Windows grafiska gränssnitt. Jag vet inte hur ni känner, men jag blir rädd av tanken på att leva inuti Windows.
(Laughter)
(Skratt)
To isolate the single most intuitive interface out of infinity, we use neuroscience to drive our design guidelines, instead of letting a bunch of designers fight it out in the boardroom. And the principle we all revolve around is what's called the "Neural Path of Least Resistance."
För att hitta det mest intuitiva gränssnittet av de som är möjliga använder vi neurovetenskap för att styra våra designriktlinjer, istället för att låta ett gäng designers slåss om saken i ett mötesrum. Och den princip vi alla rör oss kring kallas "Minsta motståndets nervbana".
At every turn, we're connecting the iOS of the brain with our brain on, for the first time, our brain's terms. In other words, we're trying to create a zero learning-curve computer. We're building a system that you've always known how to use.
Vi kopplar hjärnans iOS till vår hjärna, för första gången på hjärnans villkor. Med andra ord försöker vi skapa en dator utan inlärningskurva. Vi bygger ett system som du alltid har vetat hur du ska använda.
Here are the first three design guidelines that we employ in this brand-new form of user experience. First and foremost, you are the operating system. Traditional file systems are complex and abstract, and they take your brain extra steps to decode them. We're going against the Neural Path of Least Resistance. Meanwhile, in augmented reality, you can of course place your holographic TED panel over here, and your holographic email on the other side of the desk, and your spatial memory evolved just fine to go ahead and retrieve them. You could put your holographic Tesla that you're shopping for -- or whatever model my legal team told me to put in right before the show.
Här är de första tre designriktlinjerna som vi använder i den här helt nya formen av användarupplevelse. Först och främst så är operativsystemet du själv. Traditionella filsystem är komplexa och abstrakta, och de kräver att hjärnan jobbar hårdare för att tyda dem. Då följer vi inte "Minsta motståndets nervbana". Men i augmented reality kan du förstås placera en holografisk TED-panel här borta, och din holografiska e-post på andra sidan skrivbordet, och ditt spatiala minne är som gjort för att hitta dit och hämta dem. Du skulle kunna ställa dit den holografiska Tesla du vill köpa - eller den bilmodell som mina jurister har bett mig att nämna.
(Laughter)
(Skratt)
Perfect. And your brain knows exactly how to get it back.
Perfekt. Och din hjärna vet precis hur den ska hitta den igen.
The second interface guideline we call "touch to see." What do babies do when they see something that grabs their interest? They try and reach out and touch it. And that's exactly how the natural machine should work as well. Turns out the visual system gets a fundamental boost from a sense we call proprioception -- that's the sense of our body parts in space. So by touching our work directly, we're not only going to control it better, we're also going to understand it much more deeply. Hence, touch to see.
Vi kallar den andra gränssnittsriktlinjen för "röra för att se". Vad gör en baby när den ser något som fångar dess intresse? Hen sträcker sig och försöker röra det. Det är exakt så den naturliga maskinen också borde fungera. Det har visat sig att vår syn drar verklig nytta av ett sinne som vi kallar proprioception, känslan av var vår kropp befinner sig i rummet. Genom att röra vid vårt arbetsmaterial kontrollerar vi det bättre, och får en djupare förståelse av det. Därför; röra för att se.
But it's not enough to experience things ourselves. We're inherently these social primates. And this leads me to our third guideline, the holographic campfire from our first story.
Men det räcker inte att vi upplever saker själva. Vi är födda att vara sociala apor. Och det leder mig till vår tredje riktlinje, den holografiska lägerelden från vår första historia.
Our mirror-neuron subsystem suggests that we can connect with each other and with our work much better if we can see each other's faces and hands in 3D. So if you look at the video behind me, you can see two Meta users playing around with the same hologram, making eye contact, connected around this thing, instead of being distracted by external devices.
Våra spegelneuroner antyder att vi kan få kontakt med varandra och med vårt arbete på ett bättre sätt om vi kan se varandras ansikten och händer i 3D. Så om ni tittar på videon bakom mig kan ni se två Meta-användare som leker med samma hologram får ögonkontakt och samverkar kring det här, istället för att bli distraherade av tekniska prylar.
Let's go ahead and try this again with neuroscience in mind. So again, our favorite interface, the iOS of the mind. I'm going to now take a step further and go ahead and grab this pair of glasses and leave it right here by the desk. I'm now with you, I'm in the moment, we're connecting. My spatial memory kicks in, and I can go ahead and grab it and bring it right back here, reminding me that I am the operating system. And now my proprioception is working, and I can go ahead and explode these glasses into a thousand parts and touch the very sensor that is currently scanning my hand.
Vi provar det här igen med neurovetenskap i åtanke. Vi använder vårt favoritgränssnitt igen, hjärnans iOS. Jag tänker nu gå ett steg längre och ta ett par såna här glasögon och lägga dem här på bänken. Nu är jag med er, jag är i ögonblicket, vi har kontakt. Mitt spatiala minne dyker upp och jag kan ta tag i dem, ta tillbaka dem hit, och påminna mig själv om att jag är operativsystemet. Min proprioception fungerar, jag kan krossa glasögonen i tusen bitar, och röra den sensor som just nu skannar min hand.
But it's not enough to see things alone, so in a second, my co-founder Ray is going to make a 3D call -- Ray?
Men det räcker inte att se saker själv, så strax ska min medgrundare Ray att ringa ett 3D-samtal ... Ray?
(Ringing)
(Ringer)
Hey Ray, how's it going? Guys, I can see this guy in front me in full 3D. And he is photo-realistic.
Hej Ray, hur är det? Jag kan se den här killen framför mig i full 3D. Och han ser ut som ett foto.
(Applause)
(Applåder)
Thank you.
Tack.
My mirror-neuron subsystem suggests that this is going to replace phones in not too long. Ray, how's it going?
Mina spegelneuroner säger mig att det här kommer att ersätta telefoner inom en snar framtid. Ray, hur är läget?
Ray: Great. We're live today.
Ray: Fint. Vi går live idag.
(Applause)
(Applåder)
MG: Ray, give the crowd a gift of the holographic brain we saw from the video earlier. Guys, this is not only going to change phones, it's also going to change the way we collaborate.
MG: Ray, ge publiken något från den holografiska hjärnan som vi såg på videon nyligen. Det här kommer inte bara att förändra telefoner, utan också sättet vi samarbetar på.
Thank you so much.
Tack så mycket.
Thanks, Ray.
Tack Ray.
Ray: You're welcome.
Ray: Det var så lite.
(Applause)
(Applåder)
MG: So folks, this is the message that I discovered in that bar in 2011: The future of computers is not locked inside one of these screens. It's right here, inside of us.
MG: Det här är vad jag upptäckte på den där baren 2011: Datorernas framtid sitter inte fast inuti de här skärmarna. Den är här, inuti oss.
(Applause)
(Applåder)
So if there's one idea that I could leave you with here today, it's that the natural machine is not some figment of the future, it's right here in 2016. Which is why all hundred of us at Meta, including the administrative staff, the executives, the designers, the engineers -- before TED2017, we're all going to be throwing away our external monitors and replacing them with a truly and profoundly more natural machine.
Om det är något jag vill att ni ska minnas är det att naturliga maskiner inte är något påhitt från framtiden, den finns rakt framför oss 2016. Det är därför alla vi hundratals personer på Meta, inklusive administrativ personal, chefer, designers, ingenjörer ... innan TED2017 kommer att göra oss av med våra externa skärmar och ersätta dem med en verkligt naturlig maskin.
Thank you very much.
Tack så mycket.
(Applause)
(Applåder)
Thank you, appreciate it. Thanks, guys.
Tack, jag uppskattar det. Tack, hörni.
Chris Anderson: So help me out on one thing, because there've been a few augmented reality demos shown over the last year or so out there. And there's sometimes a debate among technologists about, are we really seeing the real thing on-screen? There's this issue of field of view, that somehow the technology is showing a broader view than you would actually see wearing the glasses. Were we seeing the real deal there?
Chris Anderson: Hjälp mig med en sak, för vi har visat några demos av augmented reality här under det här senaste året. Och det blir ibland en debatt mellan teknologer om vi verkligen ser verkligheten på skärmen? Det är frågan om synfält, att tekniken på något sätt kan ge oss ett bredare synfält än man faktiskt skulle kunna se när man har på sig glasögonen. Såg vi något verkligt där?
MG: Absolutely the real deal. Not only that, we took extra measures to shoot it with a GoPro through the actual lens in the various videos that you've seen here. We want to try to simulate the experience for the world that we're actually seeing through the glasses, and not cut any corners.
MG: Ja, det är absolut verkligt. Och inte bara det, vi har sett till att filma den med en GoPro genom precis samma lins som de filmer som ni har sett här. Vi vill att världen ska uppleva att vi faktiskt ser genom glasögonen och inte fuskar.
CA: Thank you so much for showing us that.
CA: Tack så mycket för att du visade oss det.
MG: Thanks so much, I appreciate that.
MG: Tack så mycket, kul att höra.