Many believe driving is an activity solely reserved for those who can see. A blind person driving a vehicle safely and independently was thought to be an impossible task, until now. Hello, my name is Dennis Hong, and we're bringing freedom and independence to the blind by building a vehicle for the visually impaired.
Shumë besojnë që vozitja është një aktivitet veqanarisht e rezervuar vetem për ata që shofin. Një përsonë i verbër që vozitë një makinë sigurtë dhe pavarësishtë ishte menduar të jetë një detyr e pamundur, deri tani. Përshendetje, emri imë është Dennis Hong, dhe ne do të sjellim lirinë dhe pavarësin për të verbërit duke ndërtuar një makinë për demtuarit vizuelë.
So before I talk about this car for the blind, let me briefly tell you about another project that I worked on called the DARPA Urban Challenge. Now this was about building a robotic car that can drive itself. You press start, nobody touches anything, and it can reach its destination fully autonomously. So in 2007, our team won half a million dollars by placing third place in this competition. So about that time, the National Federation of the Blind, or NFB, challenged the research committee about who can develop a car that lets a blind person drive safely and independently. We decided to give it a try, because we thought, "Hey, how hard could it be?" We have already an autonomous vehicle. We just put a blind person in it and we're done, right? (Laughter) We couldn't have been more wrong. What NFB wanted was not a vehicle that can drive a blind person around, but a vehicle where a blind person can make active decisions and drive. So we had to throw everything out the window and start from scratch.
Pra para se të flasë për këtë makinë për të verbërit, më lejoni t'ju tregoj dqka rreth një projekti për të cilin kam punuar të quajtur DARPA sfida urbane. Tani kjo është rreth ndërtimit të një roboti makinë i cili mund të vozitet vetëvetiu. Ju prekni fillo, askush nuk prek asgjë tjetër, dhe mund të arrinë destinacjonin e tij komplet i pamvarurë. Pra në vitin 2007, ekip ynë fitoi gjysm miljoni dollarë duke vendosur vendin e tretë në këtë kompeticjonë. Pra rreth asaj kohe, federata nacjonale e të verbërve, apo NFB, sfido rreth asaj se kush mund të zhvilloj një makinë që i mundëson një përsoni të verbër të vozis i pavarur dhe i sigurtë. Ne vendosem ta provojmë atë, sepse ne menduam, "Hey, sa vështir mund të jetë?" Ne pothuajse kemi një makinë të pamvarur. Ne vetem vendosim një përson në të dhe jemi në rregull? (Qeshen) Ne nuk mund të ishim edhe më keqë. Atë që NFB-ja dëshironte jo një makinë e cila mund të vozitë një përson të verbër rreth e rrotullë, mirpo një makinë ku një përson i verbër mund të marrë vendima aktive dhe të vozisë. Pra duhet të nxjerrim gjdogjë jashtë dritares dhe të fillojmë nga fillimi.
So to test this crazy idea, we developed a small dune buggy prototype vehicle to test the feasibility. And in the summer of 2009, we invited dozens of blind youth from all over the country and gave them a chance to take it for a spin. It was an absolutely amazing experience. But the problem with this car was it was designed to only be driven in a very controlled environment, in a flat, closed-off parking lot -- even the lanes defined by red traffic cones.
Pra për të testuar këtë ide të qmendur, ne zhvilluam një prototipë motoqikëlet të vogel për të testuar fizibilitetinë. Dhe në verë të viti 2009, ne ftuam një grup të verbërish nga e gjithë shteti dhe ti japim atyre nga një shancë për të filluar një gjiro. Ishte një eksperiencë e mahnitëshme. Mirpo problemi më këtë makinë ishte dizjanuar të jetë kontrolluar veten në një ambient, në një paking të mbyllur -- madje edhe një korsi të definuar nga zona e kuqe e trafikut.
So with this success, we decided to take the next big step, to develop a real car that can be driven on real roads. So how does it work? Well, it's a rather complex system, but let me try to explain it, maybe simplify it. So we have three steps. We have perception, computation and non-visual interfaces. Now obviously the driver cannot see, so the system needs to perceive the environment and gather information for the driver. For that, we use an initial measurement unit. So it measures acceleration, angular acceleration -- like a human ear, inner ear. We fuse that information with a GPS unit to get an estimate of the location of the car. We also use two cameras to detect the lanes of the road. And we also use three laser range finders. The lasers scan the environment to detect obstacles -- a car approaching from the front, the back and also any obstacles that run into the roads, any obstacles around the vehicle.
Pra me këtë sukësesë, ne vendosem të marrim një hapë të madhë, për të zhvilluar një makinë të vërtet e cila mund të vozitet në rrugë të vërteta. Pra si funksionon? Mirë, është një sistem kompleks, mirpo më lejoni t'ju sqaroi atë, Pra ne kemi tre hapa. Ne kemi përcepcionin,kompjutimin dhe platëformen jo-vizuale. Tani shoferi nuk mund të shef, pra sistemi duhet ta abzorvoi ambientinë dhe të mbledhë informacione për shoferin. Për atë, ne përdorim një njësi matëse fillestare. Pra matë akselerimin, akselerimin këndorë -- sikurse një vesh i njeriu, veshi i brendshem. Ne e përdorim këtë informacion më një njësi GPS-je për të marrurë lokacionin e makinës. Ne gjithashtu përdorim dy kamera për të detektuar korsit e rrugës. Dhe ne gjithashtu përdorim tre llaser për gjetjen e gjërsis. Llaseri skanon ambientin për të detektuar pengesat-- një makinë duke e atakuar nga para, mbrapa dhe gjithashtu edhe ndonjë penges e cila delë në rrugë, ndonjë penges rreth automjetit.
So all this vast amount of information is then fed into the computer, and the computer can do two things. One is, first of all, process this information to have an understanding of the environment -- these are the lanes of the road, there's the obstacles -- and convey this information to the driver. The system is also smart enough to figure out the safest way to operate the car. So we can also generate instructions on how to operate the controls of the vehicle. But the problem is this: How do we convey this information and instructions to a person who cannot see fast enough and accurate enough so he can drive? So for this, we developed many different types of non-visual user interface technology. So starting from a three-dimensional ping sound system, a vibrating vest, a click wheel with voice commands, a leg strip, even a shoe that applies pressure to the foot. But today we're going to talk about three of these non-visual user interfaces.
Pra e gjithë sasia e mbetur e informacioneve dergohet në kompjuter, dhe kompjuteri mund ti bejë dy gjëra. Një është, së pari ti procesoj këto informacione për të pasur një kuptueshmëri të ambientit-- Këto korsi rruges, pengesa -- dhe ti përpunoi këto informacione për shoferin. Sistemi gjithashtu është i menqur sa duhet për të gjetur menyren më të sigurtë për të operuar makinen. Pra ne gjitahshtu mund të gjenerojmë instruksione se si të operojmë dhe kontrollojmë makinen. Mirpo problemi është ky: Si do ta bindim këto informacione dhe instruksion tek një person që nuk shef aq shpejt sa duhet dhe saktësisht sa duhet që të vozisë? Deri më tani, kemi zhvilluar shumë lloje të teknologjike jo-vizuele. Duek filluar nga 3 dimesionale ping sistemit të zerit, një jelek vibrues, një klikim rrotash me komanda zanore, një shirit këmbe, madje edhe këpuc të cilat aplikojnë presoj tek këmba. Mirpo sot do të flasim rreth tri prej tyre platformave jo vizuele.
Now the first interface is called a DriveGrip. So these are a pair of gloves, and it has vibrating elements on the knuckle part so you can convey instructions about how to steer -- the direction and the intensity. Another device is called SpeedStrip. So this is a chair -- as a matter of fact, it's actually a massage chair. We gut it out, and we rearrange the vibrating elements in different patterns, and we actuate them to convey information about the speed, and also instructions how to use the gas and the brake pedal. So over here, you can see how the computer understands the environment, and because you cannot see the vibration, we actually put red LED's on the driver so that you can see what's happening. This is the sensory data, and that data is transferred to the devices through the computer.
Platëforma e parë quhet a DriverGrip. Pra këto janë palë dorzash, dhe kanë elemente vibruese në pjesën gishtrinjëve pra ju mund të transferoni instruksione se si të ndrroni drejtimin dhe intenzitetin. Një tjetër paisje quhet SpeedStrip. Pra kjo është një karrige -- si faktë, është një karrige e porosive. Ne kemi shkuar jasht, dhe po ri-aranzhmojmë disa elemente vibruese, dhe faktikisht ne po përpiqemi të mbledhim informacionet rreth shpejtësis, dhe gjithashtu ti instrukëtojmë se si ta përdorin gazin dhe frenin e këmbes. Pra këtu, ju mund të shihni se si kompjuteri e kupëton ambientinë, dhe sepse ju nuk mund ta shihni vibrimet, ne faktikisht kemi vendosur një LED në shofer që ju të mund të shihni atë që po ndodhë. Ky është një senzorë i të dhënave, dhe të dhënat janë transferuar në paisje nepërmjet kompjuerit.
So these two devices, DriveGrip and SpeedStrip, are very effective. But the problem is these are instructional cue devices. So this is not really freedom, right? The computer tells you how to drive -- turn left, turn right, speed up, stop. We call this the "backseat-driver problem." So we're moving away from the instructional cue devices, and we're now focusing more on the informational devices. A good example for this informational non-visual user interface is called AirPix. So think of it as a monitor for the blind. So it's a small tablet, has many holes in it, and compressed air comes out, so it can actually draw images. So even though you are blind, you can put your hand over it, you can see the lanes of the road and obstacles. Actually, you can also change the frequency of the air coming out and possibly the temperature. So it's actually a multi-dimensional user interface. So here you can see the left camera, the right camera from the vehicle and how the computer interprets that and sends that information to the AirPix. For this, we're showing a simulator, a blind person driving using the AirPix. This simulator was also very useful for training the blind drivers and also quickly testing different types of ideas for different types of non-visual user interfaces. So basically that's how it works.
Pra këto dy paisje,DriverGrip dhe SpeedStrip, janë shumë efektive. Mirpo problemi është këto janë paisje instruksionale. Kjo nuk është liri e vërtet, apo jo? Kompjuteri na tregon neve se si të vozitim -- kthehu majtas, kthehu djathëtas, rritë shpejtësin, ndalo. Ne e quajmë këtë " problemi i ulëses mbapa." Pra ne po lëvizemi nga paisja instruksionale, dhe npo fokusohemi më tepër në paisjen informative. Një shembull i mirë i kësaj platëforme për shfrytëzuesit jo-vizuel është quajtur AirPix. Pra mendoni për të si një monitor për të verbërit. Pra është një tablet i menqur,ka shumë vrima në të, dhe ajëri i kompersuar del jashtë, pra faktikisht mund të vizaton imazhe. Madje edhe pse jeni i verbër,ju mund ta vendosni doren tuaj mbi të, ju mund të shihni objketet ne rrugë. Faktikisht, ju mund ta ndryshoni frekuencen e ajërit që del jashtë dhe mundësisht edhe temperaturen. Pra faktikisht është një platëform multi-dimensionale për shfrytëzuesin. Pra këtu mund ta shihni kameren e majtë, kamera e djathët nga makina dhe se si kompjuteri interpreton atë dhe e dërgon atë informacion tek AirPix. Për këtë, ne do të shfaqim një simulues, një përson i verbër duke vozitur një AirPix. Ky simulator ishte gjithashtu shumë i përdorshem për trajnimin e shoferëve të verbër dhe gjithashtu testimin e shpejt të ideja të ndryshme për shfrytëzues të platëformave të ndryshem jo-vizuele. Pra faktikisht ajo se si funksionon.
So just a month ago, on January 29th, we unveiled this vehicle for the very first time to the public at the world-famous Daytona International Speedway during the Rolex 24 racing event. We also had some surprises. Let's take a look.
Pra vetem para një muaji, më 29, Janarë, ne shpalosem këtë makinë për herë të parë për publikun tek e famshmëja Dayton International Speedway gjatë garaes 24 Rolex. Ne gjithashtu patem disa surpriza. Le ti japim një shiqim.
(Music)
(Musika)
(Video) Announcer: This is an historic day in January. He's coming up to the grandstand, fellow Federationists.
(Video) Prezentuesi: Kjo është një ditë historike në Janarë. Ai po vjen në para hyrëjse së madhe, Federista të dashurë.
(Cheering)
(Brohoritje)
(Honking)
( i bie borisë)
There's the grandstand now. And he's [unclear] following that van that's out in front of him. Well there comes the first box. Now let's see if Mark avoids it. He does. He passes it on the right. Third box is out. The fourth box is out. And he's perfectly making his way between the two. He's closing in on the van to make the moving pass. Well this is what it's all about, this kind of dynamic display of audacity and ingenuity. He's approaching the end of the run, makes his way between the barrels that are set up there.
Ja ku është hyrja e madhe tani. Dhe ai [i pa pastër] duke ndjekur atë kombi i cili përpara tij. Ja ku vjen kuti e parë. Tani të shofim nëse Marku i shmanget asaj. Ai e bënë. Ai e kaloi në të djethët. Kuti e tretë është jashtë. Edhe kuti e katërt. Ai po e hynë nepërmjet të dyjave lehtësisht. Ai po përgatitet për tejkalim për të tejkaluarë. Mirpo kjo është e gjitha, ky një lloje paraqitje dinamike. Ai po arrinë përfundimin e rrugës, po bënë rrugen e tij në mesë të barierave mirë po i'a arrinë.
(Honking)
(i bie burisë)
(Applause)
(Duartrokitje)
Dennis Hong: I'm so happy for you. Mark's going to give me a ride back to the hotel.
Dennis Hong: Jam shumë i lumtur për ty. Mark do të më vozisë deri në hotel.
Mark Riccobono: Yes.
Mark Riccobono: Po.
(Applause)
(Duartrokitje)
DH: So since we started this project, we've been getting hundreds of letters, emails, phone calls from people from all around the world. Letters thanking us, but sometimes you also get funny letters like this one: "Now I understand why there is Braille on a drive-up ATM machine." (Laughter) But sometimes -- (Laughter) But sometimes I also do get -- I wouldn't call it hate mail -- but letters of really strong concern: "Dr. Hong, are you insane, trying to put blind people on the road? You must be out of your mind." But this vehicle is a prototype vehicle, and it's not going to be on the road until it's proven as safe as, or safer than, today's vehicle. And I truly believe that this can happen.
DH: Pra që nga koha që filluam këtë prjektë, kemi marrur qindra letra,email, telfonata nga njerëzit nga e gjithë bota. Letra që na falenderojnë neve, mirpo nganjëher ne gjithashtu marrim letra qesharake sikurse kjo: "Unë e kuptoj përse është një prekës në një bankomatë." (Qeshen) Mirpo nganjëher -- (Qeshen) Mirpo nganjëher unë gjithashtu pranoj -- do ta quaja email urrejtëje -- mirpo letra të brengosjes së thell: "Dr.Hong a je i qmendur, po përpiqesh ti vësh njerëzit e verbër në rrugë? Duhet të jesh i qmendur." Mirpo kjo makinë është prototipë, dhe nuk do të jetë në rrugë gjersa të provohet si e sigurtë, apo më e sigurt se makinat e sotit. Unë plotësisht besoj se kjo do të ndodhë.
But still, will the society, would they accept such a radical idea? How are we going to handle insurance? How are we going to issue driver's licenses? There's many of these different kinds of hurdles besides technology challenges that we need to address before this becomes a reality. Of course, the main goal of this project is to develop a car for the blind. But potentially more important than this is the tremendous value of the spin-off technology that can come from this project. The sensors that are used can see through the dark, the fog and rain. And together with this new type of interfaces, we can use these technologies and apply them to safer cars for sighted people. Or for the blind, everyday home appliances -- in the educational setting, in the office setting. Just imagine, in a classroom a teacher writes on the blackboard and a blind student can see what's written and read using these non-visual interfaces. This is priceless. So today, the things I've showed you today, is just the beginning.
Mirpo akoma, a do që shoqëria të pranoj këtë ide aq radikale? Si do ta sigurojmë? Si do të lëshohen patent shoferat? Ka shumë gjëra të brengosëshme përveq sfides teknologjike që ne duhet ti adresohemi përpara se të bëhemi realitetë. Sigurisht, qëllimi kryesor i projekëtit është zhvillimi i makinës për të verbërit. Mirpo potencjalisht më e rendësishme se kjo është vlera teknologjisë lëvizese e cila mund të vjen me këtë projektë. Senzorët që janë përdorur mund të shofin edhe në errësirë, mjegullë dhe shi. Dhe së bashku me këtë lloje platëforme të re, ne mund ta përdorim këtë teknologji dhe të aplikojmë këtë makinë të sigurtë për njerëz të rendomët. apo për njerëz të verbër, përdorim të përditshem -- në rregullime edukative, në zyra. Vetem imagjinoni në një klasë, një mësues shkruan në drrasën e zezë dhe një student i verbër mund të shef dhe të lexon atë duke përdorur këto platëforma jo-vizuele. Kjo është pricë. Pra sotë, gjërat që unë ju kam shfaqur juve, janë vetem fillimi.
Thank you very much.
Faliminderit shumë.
(Applause)
(Duartrokitje)