I'm here today representing a team of artists and technologists and filmmakers that worked together on a remarkable film project for the last four years. And along the way they created a breakthrough in computer visualization.
من امروز به نمایندگی گروهی از هنرمندان، متخصصین فن آوری و فیلم سازان اینجا هستم همکارانی که طی چهار سال گذشته کنار اونها روی فیلم سینمایی ارزشمندی کار کرده ایم . و طی این پروژه گروه نو آوری درخشانی در بصری سازی رایانه ای انجام داده.
So I want to show you a clip of the film now. Hopefully it won't stutter. And if we did our jobs well, you won't know that we were even involved.
تکه ای از این فیلم رو با هم ببینیم. امیدوارم موقع پخش قطع و وصل نشه! و اگر کارمون رو درست انجام داده باشیم شما متوجه نخواهید شد که دست ما در کار بوده .
Voice (Video): I don't know how it's possible ... but you seem to have more hair.
صدای فیلم : نمیدونم چطوری ممکنه ولی انگار موهات زیاد شدن
Brad Pitt: What if I told you that I wasn't getting older ... but I was getting younger than everybody else?
براد پیت : چی میشه اگه بهت بگم که من پیر نمیشم بلکه از همه دارم جوون تر میشم ؟
I was born with some form of disease.
من با یه جور بیماری به دنیا اومدم .
Voice: What kind of disease?
صدا : چه جور بیماری ای ؟
BP: I was born old.
ب.ب : من پیر به دنیا اومدم.
Man: I'm sorry.
مرد : متاسفم.
BP: No need to be. There's nothing wrong with old age.
ب.ب: لازم نیست باشی، پیر بودن که اشکالی نداره.
Girl: Are you sick?
دختر : تو مریضی ؟
BP: I heard momma and Tizzy whisper, and they said I was gonna die soon. But ... maybe not.
ب.پ: شنیدم که مامان و تیزی پچ پج میکردن و گفتن که من به زودی می میرم. اما خوب .... شایدم نمیرم.
Girl: You're different than anybody I've ever met.
دختر : تو با همه آدمایی که تا به حال دیدم فرق داری.
BB: There were many changes ... some you could see, some you couldn't. Hair started growing in all sorts of places, along with other things. I felt pretty good, considering.
ب.پ: تغییراتی زیادی اتفاق افتاده ... بعضی هاشو میشد دید، بعضیا هاشورا نمیشد. مو از همه جای بدنم در اومد و یه چیزهای دیگه ایی . و من حالم خوب خوب بود، با اینکه ...
Ed Ulbrich: That was a clip from "The Curious Case of Benjamin Button." Many of you, maybe you've seen it or you've heard of the story, but what you might not know is that for nearly the first hour of the film, the main character, Benjamin Button, who's played by Brad Pitt, is completely computer-generated from the neck up. Now, there's no use of prosthetic makeup or photography of Brad superimposed over another actor's body. We've created a completely digital human head.
اد اولبریش: این تکه ای از فیلم « ماجرای عجیب بنجامین باتن » بود. احتمالا خیلی از شما فیلم رو دیدید و یا داستانشو شنیدید. ولی چیزی که احتمالا نمیدونید اینه که تقریبا در ساعت اول از فیلم، کاراکتر اصلی، بنجامین باتن، که براد پیت نقششو بازی کرده، از گردن به بالا کلا توسط کامپیوتر ساخته شده. ما از گریم های برجسته یا انداختن تصویر صورت براد روی بدن بازیگر دیگه استفاده نکردیم بلکه یه کله تمام دیجیتال ساختیم .
So I'd like to start with a little bit of history on the project. This is based on an F. Scott Fitzgerald short story. It's about a man who's born old and lives his life in reverse. Now, this movie has floated around Hollywood for well over half a century, and we first got involved with the project in the early '90s, with Ron Howard as the director. We took a lot of meetings and we seriously considered it. But at the time we had to throw in the towel. It was deemed impossible. It was beyond the technology of the day to depict a man aging backwards. The human form, in particular the human head, has been considered the Holy Grail of our industry.
اول کمی در باره تاریخچه پروژه بگم. این فیلم بر اساس داستان کوتاهی از ف. اسکات فیتزجرالد ساخته شده. داستان در باره مردیه که پیر به دنیا میاد و زندگیش رو معکوس طی میکنه . ایده ساخت این فیلم نزدیک به نیم قرنه که در هالیوود میچرخه و ما برای اولین بار در ابتدای دهه ۹۰ با این پروژه درگیر شدیم و اون موقع کارگردان ران هوارد بود . نشستهای متعددی برگزار کردیم و به شکل جدی به اجرای پروژه فکر می کردیم ولی اون موقع مجبور بودیم پروژه رو متوقف کنیم . تولید پروژه غیر ممکن تشخیص داده شد . نشون دادن روال معکوس پیر شدن از توان فن آوری اون موقع خارج بود. فرم انسانی، به خصوص سر انسان، به عنوان یکی از اهداف غایی صنعت ما بوده و هست.
The project came back to us about a decade later, and this time with a director named David Fincher. Now, Fincher is an interesting guy. David is fearless of technology, and he is absolutely tenacious. And David won't take "no." And David believed, like we do in the visual effects industry, that anything is possible as long as you have enough time, resources and, of course, money. And so David had an interesting take on the film, and he threw a challenge at us. He wanted the main character of the film to be played from the cradle to the grave by one actor. It happened to be this guy.
این پروژه دوباره یک دهه بعد به سراغ ما اومد، و اینبار با کارگردانی به نام دیوید فینچر. فینچر آدم جالبیه. از فن آوری هراسی نداره، و به شدت آدم پیگیریه . و به هیچ عنوان زیر بار «نه» نمیره . دیوید مثل ماها در صنعت جلوه های بصری ، باور داره که همه چیز امکان پذیره به شرطی که زمان کافی، منابع کافی و البته پول فراهم باشه . دیوید با دید جالبی که در باره فیلم داشت مارو به چالش کشید. او میخواست شخصیت اصلی فیلم از گهواره تا گور توسط یک بازیگر بازی بشه . که اون بازیگر این آقاست.
We went through a process of elimination and a process of discovery with David, and we ruled out, of course, swapping actors. That was one idea: that we would have different actors, and we would hand off from actor to actor.
ما با دیوید وارد روال کشف و حذف شدیم و ما طبعا ایده تعویض بازیگر ها رو کنار گذاشتیم. یه ایده این بود: که ما بازیگرهای متفاوت داشته باشیم، و بازیگر ها جای خودشون رو به یکدیگر بدند.
We even ruled out the idea of using makeup. We realized that prosthetic makeup just wouldn't hold up, particularly in close-up. And makeup is an additive process. You have to build the face up. And David wanted to carve deeply into Brad's face to bring the aging to this character. He needed to be a very sympathetic character. So we decided to cast a series of little people that would play the different bodies of Benjamin at the different increments of his life and that we would in fact create a computer-generated version of Brad's head, aged to appear as Benjamin, and attach that to the body of the real actor. Sounded great.
ما حتی ایده استفاده از گریم رو هم کنار گذاشتیم. همچنین فهمیدیم که گریم های برجسته هم کیفیت لازم رو ندارند مخصوصا برای نما های نزدیک صورت نخواهد داشت. از سوی دیگه گریم روندی افزایشیه و به حجم صورت اضافه می کنه. اما دیوید میخواست برای نشون دادن افزایش سن ، شیار های عمیق روی صورت براد داشته باشه. او باید شخصیت خوشایند و دلنشینی می بود، پس ما تصمیم گرفتیم تعدادی بازیگر کوچک انتخاب کنیم که نقش بدن های متفاوت بنجامین رو در مقاطع مختلف زندگی اون بازی کنند و ما در واقع یک نسخه کامپیوتری از سر براد خواهیم ساخت که سن و سالش متناسب با بنجامین تنظیم خواهد شد و بعد تصویر این سر کامپیوتری رو به بدن بازیگر واقعی پیوند خواهیم زد. ایده خوبی به نظر میومد.
Of course, this was the Holy Grail of our industry, and the fact that this guy is a global icon didn't help either, because I'm sure if any of you ever stand in line at the grocery store, you know -- we see his face constantly. So there really was no tolerable margin of error. There were two studios involved: Warner Brothers and Paramount. And they both believed this would make an amazing film, of course, but it was a very high-risk proposition. There was lots of money and reputations at stake. But we believed that we had a very solid methodology that might work ...
طبعا این بزرگترین دستاورد ممکن در صنعت ما بود و البته اینکه این بازیگر یه نماد جهانیه خیلی به نفع ما نبود چون اگر تو صف فروشگاه سوپر مارکت وایساده باشید، حتما صورت این بابا رو بارها دیدید. پس عملا جایی برای خطا ی ما باقی نمیموند. دو استودیو در این کار دخیل بودند «پارامونت » و « برادران وارنر». والبته هردو بر این باور بودند که این فیلم جذاب خواهد شد، ولی این فکر بسیار پر خطر بود و سابقه کاری و سرمایه زیادی در گرو موفقیت این فیلم بود. ما باور داشتیم که روش بسیار کارامدی داریم که احتمالا کار خواهد کرد...
But despite our verbal assurances, they wanted some proof. And so, in 2004, they commissioned us to do a screen test of Benjamin. And we did it in about five weeks. But we used lots of cheats and shortcuts. We basically put something together to get through the meeting. I'll roll that for you now. This was the first test for Benjamin Button. And in here, you can see, that's a computer-generated head -- pretty good -- attached to the body of an actor. And it worked. And it gave the studio great relief. After many years of starts and stops on this project, and making that tough decision, they finally decided to greenlight the movie. And I can remember, actually, when I got the phone call to congratulate us, to say the movie was a go, I actually threw up. (Laughter) You know, this is some tough stuff.
و علیرغم تصدیق کلامی ما، اونها برای توانایی ما مدرک مستند میخواستند. پس در سال ۲۰۰۴ اونا ما رو استخدام کردند که یه نمونه سینمایی کوچیک از بنجامین را درست کنیم. و این کار رو ظرف پنج هفته انجام دادیم. و البته از یه عالم تقلب و میونبر استفاده کردیم. عملا یه چیزی سر هم کردیم که بتونیم توی جلسه ارایه بدیم. الان فیلمشو براتون پخش می کنم. اینم اولین نمونه ما برای بنجامین باتن . و اینجا میتونید ببینید که این یه کله کامپیوتریه -- بدک نشده ها -- که وصل شده به بدن بازیگر. این نمونه کار موفق بودو خیال استودیو رو راحت کرد. بعد از سالها شروع و توقف این پروژه و گرفتن اون تصمیم سخت، بالاخره به پروژه چراغ سبز دادن . یادم میاد اون موقه که به من زنگ زدن و تبریک گفتن برای شروع پروژه من واقعا بالا آوردم ( از ترس و نگرانی ) (خنده ) میدونین، این کار واقعا سخته.
So we started to have early team meetings, and we got everybody together, and it was really more like therapy in the beginning, convincing each other and reassuring each other that we could actually undertake this. We had to hold up an hour of a movie with a character. And it's not a special effects film; it has to be a man. We really felt like we were in a -- kind of a 12-step program. And of course, the first step is: admit you've got a problem. (Laughter) So we had a big problem: we didn't know how we were going to do this. But we did know one thing. Being from the visual effects industry, we, with David, believed that we now had enough time, enough resources, and, God, we hoped we had enough money. And we had enough passion to will the processes and technology into existence.
ما جلسات اولیه را با تیم برگزار کردیم نیرو ها رو دور هم جمع کردیم. اولش بیشتر شبیه گروه درمانی بود، سعی میکردیم به همدیگه اطمینان بدیم و همدیگه رو قانع کنیم که واقعا از پس این کار بر میایم. ما باید یک ساعت از فیلم رو پیش می بردیم با این شخصیت و این فیلم ، فیلم جلوه های ویژه نبود ، این شخصیت واقعا باید مثل یک انسان رفتار می کرد. انگار توی یه برنامه -- ترک اعتیاد بودیم و طبعا اولین مرحله اینه که اقرار کنیم که مشکلی داریم. ( خنده ) و مساله ای که داشتیم مساله بزرگی بود: ما نمیدونستیم که چجوری باید این کار رو انجام بدیم. چون همهمون از اهالی صنعت جلوه های بصری بودیم، ما به همراهی دیوید (فینچر) خوب میدونستیم که زمان کافی و منابع کافی داریم و امیدوار بودیم که پول کافی هم داشته باشیم. و البته شور و اشتیاق کافی هم برای برای پدید آوردن روند ها و فن آوری های لازم داشتیم.
So, when you're faced with something like that, of course you've got to break it down. You take the big problem and you break it down into smaller pieces and you start to attack that. So we had three main areas that we had to focus on. We needed to make Brad look a lot older -- needed to age him 45 years or so. And we also needed to make sure that we could take Brad's idiosyncrasies, his little tics, the little subtleties that make him who he is and have that translate through our process so that it appears in Benjamin on the screen.
وقتی که با چیزی این شکلی رو به رو میشید، طبیعیه که باید به قطعات ریز تر تقسیمش کنید. مساله های بزرگ رو به تکه های کوچکتر میشکنید و بهشون حمله می کنید. ما سه ناحیه اصلی داشتیم که باید روشون تمرکز می کردیم. باید کاری می کردیم که براد کلی پیر تر به نظر برسه -- باید کاری می کردیم که ۴۵ سال پیر تر به نظر بیاد. و باید کاری میکردیم که خصوصیت های خاص براد رو، تیک های ریز و سایر جزییات ظریفی رو که هویت اون تشکیل میده، رو ثبت کنیم و از طریق روال کاریمون طوری بگذرونیمش که در شخصیت بنجامین روی پرده سینما دیده بشه.
And we also needed to create a character that could hold up under, really, all conditions. He needed to be able to walk in broad daylight, at nighttime, under candlelight, he had to hold an extreme close-up, he had to deliver dialogue, he had to be able to run, he had to be able to sweat, he had to be able to take a bath, to cry, he even had to throw up. Not all at the same time -- but he had to, you know, do all of those things.
و البته باید شخصیتی می ساختیم که در همه شرایط ، واقعا همه شرایط ، باور پذیر باشه . باید میتونست در نور شدید روز قدم بزنه در صحنه های شب، زیر نور شمع و البته در نما های بسیار نزدیک باید درست به نظر می رسید باید دیالوگ می گفت، باید میتونست بدوه ، عرق کنه، به حمام بره، گریه کنه، و حتی باید میتوانست بالا بیاره. البته نه همزمان ولی خوب باید میتونست همه اینا رو انجام بده.
And the work had to hold up for almost the first hour of the movie. We did about 325 shots. So we needed a system that would allow Benjamin to do everything a human being can do. And we realized that there was a giant chasm between the state of the art of technology in 2004 and where we needed it to be.
واین شخصیت باید برای یک ساعت اول فیلم کاملا باور پذیر می بود. ما باید ۳۲۵ شات انجام میدادیم بنابر این به سیستمی نیاز داشتیم که اجازه بده بنجامین هر کاری که یه آدم انجام میده بتونه انجام بده. و اون موقع بود فهمیدیم که چه شکاف عظیمی بین پیشرفته ترین فن آوری موجود ۲۰۰۴ و چیزی که ما می خواستیم وجود داره .
So we focused on motion capture. I'm sure many of you have seen motion capture. The state of the art at the time was something called marker-based motion capture. I'll give you an example here. It's basically the idea of, you wear a leotard, and they put some reflective markers on your body, and instead of using cameras, there're infrared sensors around a volume, and those infrared sensors track the three-dimensional position of those markers in real time. And then animators can take the data of the motion of those markers and apply them to a computer-generated character. You can see the computer characters on the right are having the same complex motion as the dancers.
پس روی « موشن کپچر» (فن آوری و ابزار ضبط حرکات) تمرکز کردیم . مطمئنم عده زیادی ازشما « موشن کپچر» رو میشناسید. بهترین « موشن کپچر» موجود در اون زمان چیزی بود به عنوان « ضبط حرکات بر اساس علامت گذاری سوژه ». براتون مثالی میزنم. قضیه اینشکلیه که شما لباس چسبون می پوشید، و تعدادی علامت براق روی بدن شما میچسبونند و به جای دوربین تعدادی حسگر مادون قرمز در اطراف حجم صحنه قرار میدهند. و اون حسگر های مادون قرمز موقعیت سه بعدی اون علایم رو مدام ثبت میکنند. و بعد انیماتور ها میتونند اطلاعات حرکت اون علامت ها رو به یک شخصیت کامپیوتری اعمال کنند. در سمت راست شخصیت کامپیوتری رو میبینید که حرکات پیچیده رقاص ها رو تکرار میکنه .
But we also looked at numbers of other films at the time that were using facial marker tracking, and that's the idea of putting markers on the human face and doing the same process. And as you can see, it gives you a pretty crappy performance. That's not terribly compelling. And what we realized was that what we needed was the information that was going on between the markers. We needed the subtleties of the skin. We needed to see skin moving over muscle moving over bone. We needed creases and dimples and wrinkles and all of those things.
ما تعدادی از فیلم های اون موقع رو که از ثبت حرکات علایم روی صورت استفاده می کردند مطالعه کردیم که عملا مشابه «موشن کپچر» ه اما ایندفعه علامت ها روی صورت انسان قرار داده میشود و بقیه روال مشابه قبل انجام میشود. همونطور که میبینید نتیجه واقعا به درد نخوره . خیلی خوشایند نیست . و اون موقع فهمیدیم چیزی که ما میخوایم در واقع اطلاعات نقاط بین اون علامت ها هستند. ما ظرافت های پوست رو لازم داشتیم. باید لغزش پوست روی عضله روی استخون رو میدیدیم. شیار ها و چروک ها و جوش ها و همه و همه رو لازم داشتیم.
Our first revelation was to completely abort and walk away from the technology of the day, the status quo, the state of the art. So we aborted using motion capture. And we were now well out of our comfort zone, and in uncharted territory. So we were left with this idea that we ended up calling "technology stew." We started to look out in other fields. The idea was that we were going to find nuggets or gems of technology that come from other industries like medical imaging, the video game space, and re-appropriate them. And we had to create kind of a sauce. And the sauce was code in software that we'd written to allow these disparate pieces of technology to come together and work as one.
اولین چیزی که فهمیدیم این بود که باید کاملا روال موجود رو کنار بگذاریم و از فن آوری روز، وضعیت موجود و اوج هنرو فن آوری اون روز فراتر بریم. پس استفاده از « موشن کپچر» رو کاملا کنار گذاشتیم و بعد از اون دیگه کاملا از عرصه ابزار و روش های آشنا خارج شدیم و وارد محدوده جدید و نا شناخته شدیم. ما مونده بودیم و این افکار که آخرش اسمش رو « آش فن آوری» گذاشتیم. در عرصه های دیگه شروع به مطالعه کردیم و امیدمون این بود که بتونیم پاره های به درد بخور و کارآمد فناوری از صنایع دیگه مثل تصویر برداری پزشکی و بازی های رایانه ای رو پیدا کنیم و اونها رو برای استفاده خودمون تغییر بدیم و باید یه جورایی این آش رو درست می کردیم. و البته این آش یک نرم افزار بود که نوشته بودیم که بتونیم باهاش پاره های جور واجور فن آوری رو کنار هم دیگه قرار بدیم طوری که به شکل یکپارچه کار کنند.
Initially, we came across some remarkable research done by a gentleman named Dr. Paul Ekman in the early '70s. He believed that he could, in fact, catalog the human face. And he came up with this idea of Facial Action Coding System, or FACS. He believed that there were 70 basic poses or shapes of the human face, and that those basic poses or shapes of the face can be combined to create infinite possibilities of everything the human face is capable of doing. And of course, these transcend age, race, culture, gender. So this became the foundation of our research as we went forward.
اولش یک سری تحقیق عالی پیدا کردیم که توسط آقایی به نام دکتر پاول اکمن در ابتدای دهه ۷۰ انجام شده بود. او باور داشت که میتونه صورت انسان رو کاملا دسته بندی کنه. و در آخر سیستم نامگذاری اعمال صورت (FACS) رو اختراع کرد. او فکر میکرد که صورت انسان ۷۰ حالت پایه یا شکل داره و از ترکیب این ۷۰ وضعیت اولیه صورت میشه به ترکیب های نا محدودی که صورت انسان قادر به انجامه رو به دست آورد. البته این شکل های پایه، ها فرای مرز های سن و سال، فرهنگ و جنسیت قرار دارند و برای همه انسان ها مشترکند. این مقاله پایه تحقیقاتمون ما شد و بر اساس اون پیش رفتیم.
And then we came across some remarkable technology called Contour. And here you can see a subject having phosphorus makeup stippled on her face. And now what we're looking at is really creating a surface capture as opposed to a marker capture. The subject stands in front of a computer array of cameras, and those cameras can, frame-by-frame, reconstruct the geometry of exactly what the subject's doing at the moment. So, effectively, you get 3D data in real time of the subject. And if you look in a comparison, on the left, we see what volumetric data gives us and on the right you see what markers give us. So, clearly, we were in a substantially better place for this. But these were the early days of this technology, and it wasn't really proven yet. We measure complexity and fidelity of data in terms of polygonal count. And so, on the left, we were seeing 100,000 polygons. We could go up into the millions of polygons. It seemed to be infinite.
بعد به فن آوری بسیار جالبی به اسم « کانتور» برخورد کردیم. اینجا موضوع رو میبینید که روی صورتش رو با مواد آرایشی فسفری دون دون پوشوندند. و اینی که داریم میبینیم در واقع داره جزییات حرکت سطح صورت رو ضبط می کنه بر عکس قبلی که فقط حرکات علامت ها رو ثبت میکنه . سوژه در مقابل آرایه ای از دوربین های رایانه ای می ایسته. و این دور بین ها میتونن در هر فریم کل سطح هندسی هر آنچه که سوژه در حال انجامه ثبت کنند. پس عملا اطلاعات سه بعدی سوژه روبه در هر لحظه دلخواه خواهیم داشت. و اگر به مقایسه دقت کنید، سمت چپ نتیجه اطلاعات سه بعدی ( کانتور) رو خواهیم دید و سمت راست محصول اطلاعاتی که از موشن کپچرو علامت ها به دست اومده. و واضحه که نتیجه به مراتب بهتری رو به دست آورده بودیم . ولی این نتایج روز های ابتدایی پدید اومدن این فن آوری بود، و عملا کاراییش به اثبات نرسیده بود. ما پیچیدگی و کیفیت اطلاعات رو در مقیاس تعداد چندگوشه ها می سنجیم . در سمت چپی ما صد هزار چند گوشه میبینیم . و این مقداررو میتونیم تا چندین میلیون چند گوشه بالا ببریم . که عملا دقت بی نهایت بالاییه .
This was when we had our "Aha!" This was the breakthrough. This is when we're like, "OK, we're going to be OK, This is actually going to work." And the "Aha!" was, what if we could take Brad Pitt, and we could put Brad in this device, and use this Contour process, and we could stipple on this phosphorescent makeup and put him under the black lights, and we could, in fact, scan him in real time performing Ekman's FACS poses. Right? So, effectively, we ended up with a 3D database of everything Brad Pitt's face is capable of doing. (Laughter)
و این او لحظه ای بود که دستگیرمون شد که این یک دستاورد تازه است . و اون موقع به خودمون گفتیم « خوب دیگه فکر کنم مشکلمون حل شد، این واقعا کارمون رو راه میندازه. » چیزی که فهمیدیم این بود که اگر براد پیت رو بگیریم، بگذاریم توی این دستگاه، و از این فن آوری کانتور استفاده کنیم ، و این مواد فسفری رو به صورتش بمالیم، و بگذاریمش زیر نور ماورا بنفش، در واقع خواهیم تونست کل حرکاتش رو هنگام اجرای پوز های صورت FACS ثبت کنیم . خوب ! پس عملا و در آخر پایگاه داده ای سه بعدی از همه اونچه صورت براد پیت قادر به انجام بود جمع آوری کردیم . ( خنده )
From there, we actually carved up those faces into smaller pieces and components of his face. So we ended up with literally thousands and thousands and thousands of shapes, a complete database of all possibilities that his face is capable of doing.
و از اونجا شروع کردیم به تقسیم صورت های موجود به پاره های کوچک تر و عناصری که صورتش رو می ساخت و این کار منتهی به چندین هزار شکل متفاوت شد، یه پایگاه داده از همه حالت های ممکن که صورتش قادر به انجام بود .
Now, that's great, except we had him at age 44. We need to put another 40 years on him at this point. We brought in Rick Baker, and Rick is one of the great makeup and special effects gurus of our industry. And we also brought in a gentleman named Kazu Tsuji, and Kazu Tsuji is one of the great photorealist sculptors of our time. And we commissioned them to make a maquette, or a bust, of Benjamin. So, in the spirit of "The Great Unveiling" -- I had to do this -- I had to unveil something. So this is Ben 80. We created three of these: there's Ben 80, there's Ben 70, there's Ben 60. And this really became the template for moving forward.
فقط مشکل این بود که این اطلاعات رو در باره براد ۴۴ ساله داشتیم. و الان باید یه ۴۰ سال دیگه به سنش اضافه می کردیم . پس ریک بیکر رو به پروژه دعوت کردیم ، ریک یکی از اساتید بسیار ماهر جلوه های ویژه و گریم در صنعت ماست . همچنین سراغ آقای « کازو سوجی » Kazu Tsuji ، رفتیم و این آقا از بزرگترین مجسمه سازان واقع گرای زمان ماست. و از اونها خواستیم که یه ماکت بسازند، یا یه سردیس ، از بنجامین. و به رسم « پرده برداری بزرگ » -- باید این کارو می کردم -- بالاخره باید از یه چیزی پرده برداری می کردم دیگه . این بنجامین هشتاد ساله است. ما سه تا از اینها ساختیم: بن هشتاد ، بن هفتاد و بن شصت. و این عملا قالبی شد برای پیش رفتن.
Now, this was made from a life cast of Brad. So, in fact, anatomically, it is correct. The eyes, the jaw, the teeth: everything is in perfect alignment with what the real guy has. We have these maquettes scanned into the computer at very high resolution -- enormous polygonal count. And so now we had three age increments of Benjamin in the computer.
این از قالب صورت براد ساخته شده. و از نظر آناتومی دقیقه . چشم ، آرواره، دندون ها : همه در انطباق دقیق با اعضای مشابه بازیگر واقعی قرار دارند. ما این ماکت ها روبا کیفیت بسیار بالا اسکن کردیم و به داخل کامپیوتر بردیم -- با چند گوشه های بسیار زیاد. و حالا ما ۳ مرحله سنی از بنجامین در کامپیوتر داشتیم .
But we needed to get a database of him doing more than that. We went through this process, then, called retargeting. This is Brad doing one of the Ekman FACS poses. And here's the resulting data that comes from that, the model that comes from that. Retargeting is the process of transposing that data onto another model. And because the life cast, or the bust -- the maquette -- of Benjamin was made from Brad, we could transpose the data of Brad at 44 onto Brad at 87. So now, we had a 3D database of everything Brad Pitt's face can do at age 87, in his 70s and in his 60s.
ولی حالا یه پایگاه داده از بنجامین لازم داشته باشیم علاوه بر ۳ سن مختلف کارای دیگه ای هم بکنه . و ما وارد این روندی شدیم که بهش میگن تطبیق هدف اینجا برد رو در حال انجام یکی از شکل های FACS میبینید. و این اطلاعات حاصل از اونه ، مدل سه بعدی حاصل از اون . تطبیق هدف روندیه که در اون این اطلاعات حاصل شده به مدل جدیدی منتقل میشه . و چون اون مجسه قالب گیری شده یا سر دیس -- ماکت -- بنجامین از براد پیت ساخته شده بود، ما میتونستیم اطلاعات رو از براد ۴۴ ساله روی براد ۸۷ ساله منتقل کنیم. پس حالا یه پایگاه داده داشتیم از هر آنچه که از صورت براد بر میاد در سنین ۸۷، ۷۰ و ۶۰ سالگی .
Next we had to go into the shooting process. So while all that's going on, we're down in New Orleans and locations around the world. And we shot our body actors, and we shot them wearing blue hoods. So these are the gentleman who played Benjamin. And the blue hoods helped us with two things: one, we could easily erase their heads; and we also put tracking markers on their heads so we could recreate the camera motion and the lens optics from the set.
بعدش نوبت مرحله فیلمبرداری رسید. پس همزمان با پیشرفت اون جریانات ما به نیو-اورلئان رفتیم و سایر لوکیشن ها دور دنیا. و از هنرپیشه هایی که نقش بدن بنجامین رو بازی می کردند در حالی که کلاه های آبی رنگ به سر داشتند فیلم گرفتیم . و این آقایونی که نقش بدن بنجامین رو بازی می کردند و کلاه آبی ای که به سر داشتند در ۲ چیز به ما کمک کردند. ما میتونستیم به راحتی سرشون رو از فیلم پاک کنیم. و همچنین علامت هایی روی سرشون گذاشته بودیم که بر اساس اون میتونستیم حرکت دوربین رو باز سازی کنیم و همچنین خواص اپتیکی لنز رو در صحنه .
But now we needed to get Brad's performance to drive our virtual Benjamin. And so we edited the footage that was shot on location with the rest of the cast and the body actors and about six months later we brought Brad onto a sound stage in Los Angeles and he watched on the screen. His job, then, was to become Benjamin. And so we looped the scenes. He watched again and again. We encouraged him to improvise. And he took Benjamin into interesting and unusual places that we didn't think he was going to go. We shot him with four HD cameras so we'd get multiple views of him and then David would choose the take of Brad being Benjamin that he thought best matched the footage with the rest of the cast.
و حالا باید توان بازیگری براد رو برای جان بخشیدن به بنجامین مجازی خودمون به کار می گرفتیم. بنا بر این فیلم هایی که سر صحنه با حضور سایر بازیگرا و همچنین بازیگر بدن بنجامین گرفته بودیم تدوین کردیم و حدود شش ماه بعد دوباره براد رو به یه استودیو در لوس آنجلس بردیم و او نتیجه رو روی پرده دید. کار اون این دفعه این بود که بنجامین باشه. پس ما صحنه ها رو تکرار می کردیم و او بار ها صحنه ها رو میدید. تشویقش میکردیم که بداهه، بازی کنه . و اون بنجامین رو به موقعیت های عجیب و جذابی برد که فکرش هم نمیکردیم. ما براد رو با ۴ دوربین HD فیلم برداری کردیم، که بتونیم چندین نمای مختلف ازش داشته باشیم و بعد دیدوید ( فینچر) برداشتی از بازی براد در نقش بنجامین رو انتخاب می کرد که بهترین سازگاری رو با بازی بقیه بازیگر ها در پلان فیلمبرداری شده داشت .
From there we went into a process called image analysis. And so here, you can see again, the chosen take. And you are seeing, now, that data being transposed on to Ben 87. And so, what's interesting about this is we used something called image analysis, which is taking timings from different components of Benjamin's face. And so we could choose, say, his left eyebrow. And the software would tell us that, well, in frame 14 the left eyebrow begins to move from here to here, and it concludes moving in frame 32. And so we could choose numbers of positions on the face to pull that data from.
بعد از اون وارد روندی به نام « تحلیل تصویر» شدیم. حالا در اینجا شما برداشت منتخب رو میبینید و میبینید که اطلاعات حرکت اون روی بن هشتاد هفت ساله اعمال میشه. چیزی در این روش جالبه اینه که ما ابا استفاده از « تحلیل تصویر » زمانبندی حرکت عناصر مختلف صورت بنجامین رو استخراج کردیم. مثلا ما میتونستیم ابروی چپ رو انتخاب کنیم و نرم افزار به ما میگفت که مثلا در فریم شماره ۱۴ ابروی چپ حرکت رو از اینجا به سمت اونجا شروع میکنه و حرکت در فریم ۳۲ به پایان میرسه. و ما میتونستیم تعدادی نقاط روی صورت انتخاب کنیم و اطلاعات اونها رو استخراج کنیم.
And then, the sauce I talked about with our technology stew -- that secret sauce was, effectively, software that allowed us to match the performance footage of Brad in live action with our database of aged Benjamin, the FACS shapes that we had. On a frame-by-frame basis, we could actually reconstruct a 3D head that exactly matched the performance of Brad.
و بعدش، اون آش فن آوری که بهتون گفتم -- راز کار کرد اون آش عملا نرم افزاری بود که به ما اجازه میداد که حرکت و بازی براد رو که فیلم برداری شده بر اساس پایگاه های داده خودمون از اشکال صورت (FACS ) که داشتیم عین به عین باز سازی کنیم. در واقع در هر فریم ما یک سر سه بعدی می ساختیم که دقیقا با اجرای براد مطابقت داشت.
So this was how the finished shot appeared in the film. And here you can see the body actor. And then this is what we called the "dead head," no reference to Jerry Garcia.
و این نتیجه شات نهایی در فیلمه . ابتدا بازیگر بدن بنجامین رو میبینید. ما به این میگفتیم « سر بی جان » ( ربطی به جری گارسیا نداره ) .
And then here's the reconstructed performance now with the timings of the performance. And then, again, the final shot. It was a long process. (Applause)
این یکی بازیِ باز سازی شدهء براده و الان زمان بندی اش تصحیح شده و مجددا شات کامل و نهایی روند طولانی بود . ( تشویق )
The next section here, I'm going to just blast through this, because we could do a whole TEDTalk on the next several slides.
در این بخش دیگه به جزییات نمی پردازم، چون در باره هر کدوم از این اسلاید ها میشه یه سخنرانی TED دیگه برگزار کرد.
We had to create a lighting system. So really, a big part of our processes was creating a lighting environment for every single location that Benjamin had to appear so that we could put Ben's head into any scene and it would exactly match the lighting that's on the other actors in the real world.
ما باید یه سیستم نور پردازی درست می کردیم. در واقع یه بخش بسیار بزرگ روند تولید ما باز سازی نور پردازیِ تک تک صحنه هایی بود که بنجامین باید توش حضور میداشت. که بتونیم کله بن رو توی هر صحنه بگذاریم و نور پردازی اون دقیقا با نور پردازی بقیه بازیگر در دنیای واقعی سازگار باشه.
We also had to create an eye system. We found the old adage, you know, "The eyes are the window to the soul," absolutely true. So the key here was to keep everybody looking in Ben's eyes. And if you could feel the warmth, and feel the humanity, and feel his intent coming through the eyes, then we would succeed. So we had one person focused on the eye system for almost two full years.
ما باید یه سیستم هم برای چشم ها طراحی می کردیم. ما متوجه شدیم این پند قدیمی که میگه « چشم ها پنجره هایی به روه هستند » کاملا حقیقت داره. کلید موفقیت این بود که یه کاری کنیم که همه به چشم های بن نگاه کنن. اگر بیننده ها میتونستند اون گرما ، انسانیت، و قصدی که در چشم ها وجود داره رو حس کنند. ما موفق شده بودیم. ما یک نفر رو مامور کردیم که روی چشم ها متمرکز بشه و حدود ۲ سال تمام روی این مساله کار کرد.
We also had to create a mouth system. We worked from dental molds of Brad. We had to age the teeth over time.
ما همچنین باید برای دهان هم یه سیستم طراحی می کردیم. ما کار رو با قالب های دندون برد شروع کردیم. و باید اثر پیر شدن رو روی دندون ها باز سازی می کردیم.
We also had to create an articulating tongue that allowed him to enunciate his words. There was a whole system written in software to articulate the tongue. We had one person devoted to the tongue for about nine months. He was very popular.
باید یه سیستم برای زبان درست میکردیم که بتونه کلمات رو ادا کنه . و یه سیستم مجزا و کامل فقط برای حرکت دادن زبان برنامه نویسی کردیم و یکی از نیروها رو نه ماه فقط به حرکت دادن زبان اختصاص دادیم. این آقا بین بچه های تیم محبوب بود.
Skin displacement: another big deal. The skin had to be absolutely accurate. He's also in an old age home, he's in a nursing home around other old people, so he had to look exactly the same as the others. So, lots of work on skin deformation, you can see in some of these cases it works, in some cases it looks bad. This is a very, very, very early test in our process. So, effectively we created a digital puppet that Brad Pitt could operate with his own face. There were no animators necessary to come in and interpret behavior or enhance his performance.
جابه جایی پوست، یه کار بسیار مهم دیگه. پوست باید به دقیق ترین شکل باز سازی میشد. او توی خانه سالمندان هم بازی داشت، توی یه آسایشگاه سالمندان کنار افراد سالمنده دیگه، در نتیجه باید دقیقا مثل اونها به نظر میومد. پس ما کلی کار روی تغییر شکل پوست داشیتم، میبینید که تو بعضی از این نمونه ها خوب کار میکنه، تو بعضی ها کاملا بد به نظر می رسه . این یه نمونه خیلی خیلی خیلی اولیه است . عملا ما یه عروسک خیمه شب بازی دیجیال ساختیم که برات پیت میتونست با چهره اش اون رو هدایت کنه. و دیگه نیازی به متحرک ساز ها نبود که دست به کار بشند و رفتار براد رو تفسیر کنند یا اینکه اجرای اون رو بهتر کنند.
There was something that we encountered, though, that we ended up calling "the digital Botox effect." So, as things went through this process, Fincher would always say, "It sandblasts the edges off of the performance." And thing our process and the technology couldn't do, is they couldn't understand intent, the intent of the actor. So it sees a smile as a smile. It doesn't recognize an ironic smile, or a happy smile, or a frustrated smile. So it did take humans to kind of push it one way or another.
ولی به یه چیزها برخورد کردیم که اسمشون رو گذاشتیم «مشکل بوتاکس دیجیتال» . همینطور که کار ها در روال پیش میرفت، فینچر هی ایراد میگرفت که این روال «تیزی های اجرا رو نرم میکنه». چیزی که روند کاری و فن آوری ما از پسش بر نمی اومد درک «قصد» بود. درک قصد بازیگر. در واقع سیستم ما خنده رو به عنوان خنده میدید. و درک نمیکرد که این خنده کنایی ه یا خندهء شاد، یا خنده ای از روی نا امیدی. و از اینجا به بعد حضور انسان لازم بود که اون خنده رو به سمت یکی از این سمت ها متمایل کنه.
But we ended up calling the entire process and all the technology "emotion capture," as opposed to just motion capture. Take another look.
ولی در آخر ما اسم کل این روال و همه فن آوری های مربوط رو « ایموشن کپچر» ( ثبت عاطفه ) گذاشتیم در قیاس با « موشن کپچر » که فقط حرکات رو ثبت می کنه. یه دور دیگه ببینیم.
Brad Pitt: Well, I heard momma and Tizzy whisper, and they said I was gonna die soon, but ... maybe not.
براد پیت : خوب، من شنیدکه که مامان و تیزی پچ پچ میکنند، و گفتند که من به زودی میمیرم، ولی خوب شایدم نه.
EU: That's how to create a digital human in 18 minutes. (Applause)
اریک اولبرش: و این بود روش ساخت یه انسان دیجیتال در ۱۸ دقیقه. ( تشویق )
A couple of quick factoids; it really took 155 people over two years, and we didn't even talk about 60 hairstyles and an all-digital haircut. But, that is Benjamin. Thank you.
و یه سری حقایق کوتاه و جالب؛ پروژه با تلاش ۱۵۵ نفر ظرف بیش از ۲ سال انجام شد. و ما در باره ۶۰ آرایش موی مختلف و همه اون سلمونی های دیجیتالی که انجام شد صحبتی نکردیم ولی خوب این بنجامینه دیگه . ممنون .