Endless Attractions Museum / Музей вечно играющих аттракционов

Eden evolution / Эдем. Эволюция

AI, VR




Description
An interactive installation implementing artificial intelligence, watching video in virtual reality .
Описание
Интерактивная инсталляция, воплощающая искусственный интеллект, смотрящий видео в виртуальной реальности.


Concept
When a person creates artificial intelligence, does he doom his creation to a repetition of his own destiny?

If we start from a religious interpretation of the origin of the world, the starting point for the development of human history can be considered the moment when Adam and Eve ate an apple from the Tree of Knowledge. Since then, people have been tormented by eternal questions about the structure of the world and their place in it.

Over the past 80 years of work on the creation and development of artificial intelligence, people each time put it in an artificially created Eden, consisting of one or another system of predefined images. But if a person wanted to tell the AI about the existence of the apple of Knowledge, that the world is not limited to a set of pictures and sounds, but is full of complex connections - how could he do this? Perhaps the key to this is doubt.

In this project, artists show artificial intelligence a video from Youtube - “Stag Deer in a Church Cathedral” (https://www.youtube.com/watch?v=QH5Ka4TG6tg), in which a deer is walking among the columns of a Christian church. How will AI respond to what it sees? Will this video, where a non-standard situation is captured, become the key to the evolution of AI and to the realization of the existence of the “apple”? In search of answers to these questions, the authors suggest that each viewer plunge into the consciousness of AI through the helmet of virtual reality and observe the associative series that artificial intelligence builds in the process of thinking about what it saw.

The research material in this project was a video found by artists on Youtube, which, according to their assumption, is a recording of the backstage of the work “Furtherance” by artist Leonora Hamill. The final work of Hamill is a video installation for the church of St Eustache in Paris. In her project, the artist decodes the collective energy characteristic of this place of worship, following the steps of various inhabitants of the church: priests, parishioners, tourists, soup-kitchen volunteers (on duty at the West Entrance every evening during winter) and their “guests”, as well as a deer - a symbol the patronage of the temple. So, through general choreography, Leonora Hamill reveals the human and spiritual essence of this place. *

* Description of the work “Furtherance” is based on the artist’s website
Концепция
Когда человек создает искусственный интеллект, обрекает ли он свое творение на повторение его собственной судьбы?

Если отталкиваться от религиозной трактовки происхождения мира, точкой отсчета для развития истории человечества можно считать момент, когда Адам и Ева вкусили яблоко с Древа Познания. С тех пор люди мучаются вечными вопросами об устройстве мира и о своем месте в нем.

За последние 80 лет работы над созданием и развитием искусственного интеллекта, человек каждый раз помещает его в искусственно созданный Эдем, состоящий из той или иной системы предзаданных образов. Но если бы человек захотел рассказать ИИ о существовании яблока Познания, что мир не ограничивается набором картинок и звуков, а полон сложных связей - как бы он мог это сделать? Возможно, ключ к этому - сомнение. 

В данном проекте художники показывают искусственному интеллекту видео из Youtube – «Stag Deer in a Church Cathedral» (https://www.youtube.com/watch?v=QH5Ka4TG6tg), в котором среди колонн христианского храма прогуливается олень. Как ИИ отреагирует на увиденное? Станет ли это видео, где запечатлена нестандартная ситуация, ключом к эволюции ИИ, к осознанию существования «яблока»? В поиске ответов на эти вопросы авторы предлагают каждому зрителю погрузиться в сознание ИИ через шлем виртуальной реальности и понаблюдать за ассоциативным рядом, который выстраивает искусственный интеллект, по ходу размышлений об увиденном. 

Материалом исследования в данном проекте послужило найденное художниками на Youtube видео, которое, по их предположению, является записью съемки с бэкстейджа работы “Furtherance” художницы Леоноры Хэмилл (Leonora Hamill). Итоговая работа Хэмилл представляет собой видеоинсталляцию для церкви Святого Евстафия в Париже. В своем проекте художница, расшифровывает коллективную энергию, характерную для этого места поклонения, прослеживая за шагами различных обитателей церкви: священников, прихожан, туристов, добровольцев столовой (дежурящих у западного входа каждый вечер зимой) и их “гостей”, а также оленя - символа покровитея храма. Так, через общую хореографию, Леонора Хэмилл раскрывает человеческую и духовную суть этого места.*

*Описание работы “Furtherance”взято с сайта художницы 



Technical details
The following services and technologies were used to build associations:
  1. Translation of image frames of the source video into a text description:
    Microsoft Cognitive Services - Computer Vision. 
  2. Building associations in the form of phrases:
    word2vec using text8.bin model 
  3. Video Transformation: 
    Google search, Google translate. 

openFrameworks was used for programming.
VR scene was implemented in Unreal Engine 4.
Технические детали
Для построения ассоциаций использовались следующие сервисы и технологии:
  1. Перевод изображений кадров исходного видео в текстовое описание:
    Microsoft Cognitive Services – Computer Vision.
  2. Построение ассоциаций в виде словосочетаний:
    word2vec с использованием модели text8.bin
  3. Трансформация видео:
    Google search, Google translate.

Для программирования использовался  openFrameworks.
VR-сцена реализована в Unreal Engine 4.
Technical rider
The installation is exhibited in a dark room with an area of at least 5x5 m. 
Технический райдер
Инсталляция выставляется в темном помещении площадью не менее 5х5 м.