Hi, I'm Refik. I'm a media artist. I use data as a pigment and paint with a thinking brush that is assisted by artificial intelligence. Using architectural spaces as canvases, I collaborate with machines to make buildings dream and hallucinate. You may be wondering, what does all this mean? So let me please take you into my work and my world.
سلام، من رفیک هستم. من یک هنرمند رسانه هستم. از دادهها به عنوان رنگدانه استفاده میکنم و با یک قلمموی هوشمند که هوش مصنوعی به آن کمک میکند، نقاشی میکنم. با استفاده از فضاهای معماری بهعنوان بوم، با دستگاهها همکاری میکنم تا ساختمانها را به رویا و توهم بکشانم. شاید از خود بپرسید که همه اینها به چه معناست؟ پس لطفاً بگذارید شما را وارد کار و دنیای خودم کنم.
I witnessed the power of imagination when I was eight years old, as a child growing up in Istanbul. One day, my mom brought home a videocassette of the science-fiction movie "Blade Runner." I clearly remember being mesmerized by the stunning architectural vision of the future of Los Angeles, a place that I had never seen before. That vision became a kind of a staple of my daydreams.
من از کودکی که در استانبول بزرگ شدم، از هشت سالگی شاهد قدرت تخیل بودم. یک روز، مادرم نوار ویدیویی فیلم علمی تخیلی «بلید رانر» را به خانه آورد. (اشاره به فیلم Blade Runner) من به وضوح به یاد میآورم که توسط چشمانداز معماری خیرهکننده از آینده لسآنجلس مسحور شده بودم، مکانی که قبلاً هرگز ندیده بودم. آن چشمانداز به نوعی پایه اصلی رویاهایم شد.
When I arrived in LA in 2012 for a graduate program in Design Media Arts, I rented a car and drove downtown to see that wonderful world of the near future. I remember a specific line that kept playing over and over in my head: the scene when the android Rachael realizes that her memories are actually not hers, and when Deckard tells her they are someone else's memories. Since that moment, one of my inspirations has been this question. What can a machine do with someone else's memories? Or, to say that in another way, what does it mean to be an AI in the 21st century?
هنگامی که در سال ۲۰۱۲ برای یک دوره تحصیلات تکمیلی در Design Media Arts وارد لسآنجلس شدم، یک ماشین اجاره کردم و برای دیدنِ آن دنیای شگفتانگیز از آینده نزدیک به مرکز شهر رفتم. خط خاصی را به خاطر میآورم که بارها و بارها به ذهنم خطور میکرد: وقتی اندروید ریچل متوجه میشود که خاطرات او واقعاً از آن او نیستند، و وقتی دکارد به او میگوید آنها خاطرات شخص دیگری هستند. از آن لحظه، یکی از الهامات من این سوال بود. یک دستگاه با خاطرات شخص دیگر چه کاری میتواند انجام دهد؟ یا، به طریقی دیگر بگویم، معنی یک هوش مصنوعی بودن در قرن ۲۱ چیست؟
Any android or AI machine is only intelligent as long as we collaborate with it. It can construct things that human intelligence intends to produce but does not have the capacity to do so. Think about your activities and social networks, for example. They get smarter the more you interact with them. If machines can learn or process memories, can they also dream? Hallucinate? Involuntarily remember, or make connections between multiple people's dreams? Does being an AI in the 21st century simply mean not forgetting anything? And, if so, isn't it the most revolutionary thing that we have experienced in our centuries-long effort to capture history across media? In other words, how far have we come since Ridley Scott's "Blade Runner"?
هر دستگاه اندرویدی یا هوش مصنوعی فقط تا زمانی که با آن همکاری کنیم هوشمند است. این میتواند چیزهایی را بسازد که هوش انسانی قصد تولید آن را دارد اما توانایی انجام آن را ندارد. به عنوان مثال در مورد فعالیتها و شبکههای اجتماعی خود فکر کنید. هرچه با آنها تعامل بیشتری داشته باشید هوشمندتر میشوند. اگر ماشینها میتوانند خاطرات را یاد بگیرند یا پردازش کنند، آنها میتوانند رویاپردازی هم کنند؟ توهم ببینند؟ غیر ارادی بیاد بیاورند، یا بین رویاهای چند نفر ارتباط برقرار کنند؟ آیا یک هوش مصنوعی در قرن ۲۱ بودن به معنای فراموش نکردن چیزی است؟ و اگر چنین است، آیا انقلابیترین چیزی نیست که ما در تلاش چند صد ساله خود برای ثبت تاریخ در رسانهها تجربه کردهایم؟ به عبارت دیگر، ما از زمان «بلید رانر» ساخته ریدلی اسکات تا کجا پیش رفتهایم؟
So I established my studio in 2014 and invited architects, computer and data scientists, neuroscientists, musicians and even storytellers to join me in realizing my dreams. Can data become a pigment? This was the very first question we asked when starting our journey to embed media arts into architecture, to collide virtual and physical worlds. So we began to imagine what I would call the poetics of data.
پس من استودیوی خودم را در سال ۲۰۱۴ تأسیس کردم و از معماران، دانشمندان کامپیوتر و داده، دانشمندان علوم اعصاب، موسیقیدانان و حتی داستان سرایان دعوت کردم تا در تحقق رویاهایم به من بپیوندند. آیا دادهها میتوانند به یک رنگدانه تبدیل شوند؟ این اولین سوالی بود که ما هنگام شروع سفر خود برای جاسازی هنرهای رسانهای در معماری، به منظور برخورد با دنیای مجازی و فیزیکی، پرسیدیم. سپس ما شروع به تصور چیزی که من آن را شاعرانگی دادهها مینامم، کردیم.
One of our first projects, "Virtual Depictions," was a public data sculpture piece commissioned by the city of San Francisco. The work invites the audience to be part of a spectacular aesthetic experience in a living urban space by depicting a fluid network of connections of the city itself. It also stands as a reminder of how invisible data from our everyday lives, like the Twitter feeds that are represented here, can be made visible and transformed into sensory knowledge that can be experienced collectively.
یکی از اولین پروژههای ما، «نمایش مجازی»، یک قطعه فرم هنر بصری دادههای عمومی بود که به سفارش شهر سانفرانسیسکو ساخته شد. این کار مخاطب را دعوت به بخشی از یک تجربه زیباشناسی دیدنی در یک فضای زندگی شهری بودن، با به تصویر کشیدن یک شبکه روان از اتصالات شهر میکند. همچنین این به عنوان یک یادآوری است که چگونه دادههای نامرئی از زندگی روزمره ما، مانند فیدهای توییتر که در اینجا نشان داده میشوند، قابل مشاهده هستند و به دانش حسی تبدیل شوند که میتوانند به صورت جمعی تجربه شوند.
In fact, data can only become knowledge when it's experienced, and what is knowledge and experience can take many forms. When exploring such connections through the vast potential of machine intelligence, we also pondered the connection between human senses and the machines' capacity for simulating nature.
در حقیقت، دادهها فقط زمانی میتوانند به دانش تبدیل شوند که تجربه شده باشند، و آنچه که دانش و تجربه است میتواند اشکال مختلفی داشته باشد. هنگام کاوش چنین ارتباطاتی از طریق پتانسیل وسیع هوش ماشینی، ما همچنین به ارتباط بین حواس انسان و ظرفیت ماشینها برای شبیه سازی طبیعت فکر کردیم.
These inquiries began while working on wind-data paintings. They took the shape of visualized poems based on hidden data sets that we collected from wind sensors. We then used generative algorithms to transform wind speed, gust and direction into an ethereal data pigment. The result was a meditative yet speculative experience. This kinetic data sculpture, titled "Bosphorus," was a similar attempt to question our capacity to reimagine natural occurrences. Using high-frequency radar collections of the Marmara Sea, we collected sea-surface data and projected its dynamic movement with machine intelligence. We create a sense of immersion in a calm yet constantly changing synthetic sea view.
این پرسشها هنگام کار روی نقاشیهای دادههای باد آغاز شد. آنها بر اساس مجموعه دادههای پنهانی که از حسگرهای باد جمع کردیم، شکل نظمهای مصوری را به خود گرفتند. سپس ما از الگوریتمهای تولیدی برای تبدیل سرعت، شدت و جهت باد به یک رنگدانه داده فضایی استفاده کردیم. نتیجه یک تجربه خیالی در عین حال برپایه حدس و گمان بود. این فرم هنری بصریِ پویا از داده، با عنوان «بسفر»، تلاشی مشابه برای زیر سوال بردن توانایی ما در تصورِ دوبارهی وقایع طبیعی بود. با استفاده از مجموعههای راداری با فرکانس بالا از دریای مرمره، ما دادههای سطح دریا را جمعآوری کردیم و حرکت پویای آن را با هوش ماشینی پیشبینی کردیم. ما احساس غوطهوری را در یک منظره دریای آرام و در عین حال دائما در حال تغییر ایجاد کردیم.
Seeing with the brain is often called imagination, and, for me, imagining architecture goes beyond just glass, metal or concrete, instead experimenting with the furthermost possibilities of immersion and ways of augmenting our perception in built environments.
اغلب دیدن با مغز تخیل نامیده میشود، و برای من، تصور معماری فراتر از شیشه، فلز یا بتن است، در عوض بیشترین احتمال غوطهوری و روشهای تقویت درک ما در محیطهای ساخته شده را آزمایش میکند.
Research in artificial intelligence is growing every day, leaving us with the feeling of being plugged into a system that is bigger and more knowledgeable than ourselves.
تحقیقات در مورد هوش مصنوعی هر روز در حال رشد است، و این احساس را برای ما ایجاد میکند که به سیستمی متصل شدهایم که از خودمان بزرگتر و باهوشتر است.
In 2017, we discovered an open-source library of cultural documents in Istanbul and began working on "Archive Dreaming," one of the first AI-driven public installations in the world, an AI exploring approximately 1.7 million documents that span 270 years. One of our inspirations during this process was a short story called "The Library of Babel" by the Argentine writer Jorge Luis Borges. In the story, the author conceives a universe in the form of a vast library containing all possible 410-page books of a certain format and character set. Through this inspiring image, we imagine a way to physically explore the vast archives of knowledge in the age of machine intelligence. The resulting work, as you can see, was a user-driven immersive space. "Archive Dreaming" profoundly transformed the experience of a library in the age of machine intelligence.
در سال ۲۰۱۷، ما یک کتابخانه منبع آزاد از اسناد فرهنگی در استانبول کشف کردیم و شروع به کار روی «بایگانی آرزو»، یکی از اولین چیدمانهای عمومی در جهان مبتنی بر هوش مصنوعی کردیم، یک هوش مصنوعی حدود ۱/۷ میلیون سند که ۲۷۰ سالهاند را کاوش میکند. یکی از الهامات ما در طی این روند، داستانی کوتاه به نام «کتابخانه بابل» از نویسنده آرژانتینی خورخه لوئیس بورخس بود. در داستان، نویسنده جهانی را در قالب یک کتابخانه گسترده شامل همه کتابهای ممکن ۴۱۰ صفحه ای با یک قالب و مجموعه شخصیت خاص تصور میکند. از طریق این تصویر الهامبخش، ما راهی برای کشف فیزیکی بایگانیهای گسترده دانش در عصر هوش ماشینی تصور میکنیم. همانطور که میبینید، نتیجه کار یک فضای غوطهوری کاربر محور بود. «بایگانی آرزو» تجربه کتابخانهای را در عصر هوش ماشینی عمیقاً دگرگون کرد.
"Machine Hallucination" is an exploration of time and space experienced through New York City's public photographic archives. For this one-of-a-kind immersive project, we deployed machine-learning algorithms to find and process over 100 million photographs of the city. We designed an innovative narrative system to use artificial intelligence to predict or to hallucinate new images, allowing the viewer to step into a dreamlike fusion of past and future New York.
«توهم ماشینی» کاوش در زمان و مکان است که از طریق آرشیو عکاسی عمومی شهر نیویورک تجربه میشود. برای این طرح منحصر به فرد فراگیر ما الگوریتمهای یادگیری ماشین را برای یافتن و پردازش بیش از ۱۰۰ میلیون عکس از شهر گسترش دادیم. ما یک سیستم روایتی خلاقانه طراحی کردهایم تا با استفاده از هوش مصنوعی تصاویر جدیدی را پیش بینی یا توهمزایی کند، به بیننده اجازه دهد تا در تلفیقی رویایی از نیویورک گذشته و آینده گام بردارد.
As our projects delve deeper into remembering and transmitting knowledge, we thought more about how memories were not static recollections but ever-changing interpretations of past events. We pondered how machines could simulate unconscious and subconscious events, such as dreaming, remembering and hallucinating. Thus, we created "Melting Memories" to visualize the moment of remembering.
همانطور که پروژههای ما بیشتر به یادآوری و انتقال دانش میپردازند، بیشتر به این فکر کردیم که چگونه خاطرات ایستا نیستند بلکه تفسیرهای در حال تغییر از وقایع گذشته هستند. ما در مورد اینکه چگونه ماشینها میتوانند حوادث ناخودآگاه مانند خواب دیدن، یادآوری و توهم را شبیهسازی کنند، فکر کردیم. بنابراین، ما «خاطرات ذوب شونده» را ایجاد کردیم تا لحظه به یادآوری را تجسم کنیم.
The inspiration came from a tragic event, when I found out that my uncle was diagnosed with Alzheimer's. At that time, all I could think about was to find a way to celebrate how and what we remember when we are still able to do so. I began to think of memories not as disappearing but as melting or changing shape. With the help of machine intelligence, we worked with the scientists at the Neuroscape Laboratory at the University of California, who showed us how to understand brain signals as memories are made. Although my own uncle was losing the ability to process memories, the artwork generated by EEG data explored the materiality of remembering and stood as a tribute to what my uncle had lost.
الهام انجام این کار از یک اتفاق غمانگیز حاصل شد، وقتی فهمیدم عموی من مبتلا به آلزایمر است. در آن زمان، تنها چیزی که میتوانستم فکر کنم این بود که راهی برای تکریم چگونگی و آنچه را که به یاد میآوریم، پیدا کنم وقتی هنوز قادر به انجام این کار هستیم. شروع کردم به یادآوری خاطرات نه به عنوان ناپدید شدن بلکه به عنوان ذوب شدن یا تغییر شکل. با کمک هوش ماشینی، ما با دانشمندان آزمایشگاه نوروسکیپ در دانشگاه کالیفرنیا کار کردیم، به ما نشان دادند که چگونه میتوان هنگام ایجاد خاطرات سیگنالهای مغز را درک کرد. اگرچه عموی خودم توانایی پردازش خاطرات را از دست میداد، اما آثار هنری تولید شده توسط دادههای EEG (نوار مغزی)، اهمیت یادآوری را کشف کرد و برای گرامی داشت آنچه که عموی من از دست داده بود، ایستاد.
Almost nothing about contemporary LA matched my childhood expectation of the city, with the exception of one amazing building: the Walt Disney Concert Hall, designed by Frank Gehry, one of my all-time heroes. In 2018, I had a call from the LA Philharmonic who was looking for an installation to help mark the celebrated symphony's hundred-year anniversary. For this, we decided to ask the question, "Can a building learn? Can it dream?" To answer this question, we decided to collect everything recorded in the archives of the LA Phil and WDCH. To be precise, 77 terabytes of digitally archived memories. By using machine intelligence, the entire archive, going back 100 years, became projections on the building's skin, 42 projectors to achieve this futuristic public experience in the heart of Los Angeles, getting one step closer to the LA of "Blade Runner." If ever a building could dream, it was in this moment.
تقریباً هیچ چیز در مورد لسآنجلس معاصر با دوران کودکی من از شهر مطابقت نداشت، به استثنای یک ساختمان شگفتانگیز: سالن کنسرت والت دیزنی، طراحی شده توسط فرانک گری، یکی از قهرمانان همیشه من. در سال ۲۰۱۸، تماسی از طرف فیلارمونیک لسآنجلس داشتم که به دنبال تاسیساتی برای کمک به بزرگداشت صد سالگی سمفونی جشن گرفته شده بود. برای این، ما تصمیم گرفتیم این سوال را بپرسیم، «آیا یک ساختمان میتواند یاد بگیرد؟ آیا میتواند خواب ببیند؟» برای پاسخ به این سوال، ما تصمیم گرفتیم همهی آرشیوهای ثبت شده در Phil و WDCH لسآنجلس را جمع آوری کنیم. به طور دقیق، ۷۷ ترابایت حافظه بایگانی شده دیجیتال. با استفاده از هوش ماشینی، کل بایگانی، با بازگشت به ۱۰۰ سال قبل، بر روی پوسته ساختمان نمایش داده شد، ۴۲ پروژکتور برای دستیابی به این تجربه عمومی آینده در قلب لسآنجلس، یک قدم به لسآنجلس در «بلید رانر» نزدیک شدن. اگر ساختمانی میتوانست خواب ببیند، در این لحظه بود.
Now, I am inviting you to one last journey into the mind of a machine. Right now, we are fully immersed in the data universe of every single curated TED Talk from the past 30 years. That means this data set includes 7,705 talks from the TED stage. Those talks have been translated into 7.4 million seconds, and each second is represented here in this data universe. Every image that you are seeing in here represents unique moments from those talks. By using machine intelligence, we processed a total of 487,000 sentences into 330 unique clusters of topics like nature, global emissions, extinction, race issues, computation, trust, emotions, water and refugees. These clusters are then connected to each other by an algorithm, [that] generated 113 million line segments, which reveal new conceptual relationships. Wouldn't it be amazing to be able to remember all the questions that have ever been asked on the stage?
اکنون، من شما را به آخرین سفر به ذهن ماشین دعوت میکنم. در حال حاضر، ما کاملاً در جهان دادههای هر سخنرانی TED مربوط به ۳۰ ساله گذشته شناوریم. یعنی این مجموعه داده شامل ۷۷۰۵ گفتگو از صفحه نمایش TED است. این گفتارها به ۷/۴ میلیون ثانیه ترجمه شده است، و هر ثانیه در اینجا در این جهان داده نمایش داده میشود. هر تصویری که در اینجا مشاهده میکنید بیانگر لحظات بینظیری از آن گفتگوها است. با استفاده از هوش ماشینی، ما در مجموع ۴۸۷,۰۰۰ جمله را در ۳۳۰ گروه منحصر به فرد از موضوعاتی مانند طبیعت، انتشار گازهای جهانی، انقراض، مسائل نژادی، محاسبات، اعتماد، احساسات، آب و پناهندگان پردازش کردیم. این گروهها سپس با الگوریتمی به یکدیگر متصل میشوند، ۱۱۳ میلیون بخش خطی ایجاد میکنند، که روابط مفهومی جدیدی را نشان میدهد. آیا اینکه بتوانید تمام سوالاتی را که تاکنون در صحنه پرسیده شده است به خاطر بسپارید، حیرتانگیز نخواهد بود؟
Here I am, inside the mind of countless great thinkers, as well as a machine, interacting with various feelings attributed to learning, remembering, questioning and imagining all at the same time, expanding the power of the mind.
من اینجا هستم، در ذهن بسیاری از متفکران بزرگ، و همچنین یک ماشین، در تعامل با احساسات مختلفی که ناشی از یادگیری، به خاطر سپردن، سوال پرسیدن و تخیل همزمان است، و قدرت ذهن را گسترش میدهم.
For me, being right here is indeed what it means to be an AI in the 21st century. It is in our hands, humans, to train this mind to learn and remember what we can only dream of.
برای من، اینجا بودن حقیقا معنای هوش مصنوعی بودن در قرن ۲۱ است. در دست ما انسانهاست، که این ذهن را آموزش دهیم تا آنچه را که فقط میتوانیم در رویای آن باشیم یاد بگیرد و به یاد بیاورد.
Thank you.
متشکرم.