Bipolar Jamesa Allibana przedstawia zwierciadło audiowizualne, które generuje pejzaż dźwiękowy z obecności i ruchu jego poddanych. Wynikowe dane audio (w tym dane uczestnika) są wykorzystywane do przekształcania ciała w zniekształcony portret, który zmienia się między stanami chaosu i porządku. Film wykonuje także niezwykle skuteczną pracę, która pozwala uchwycić niekończącą się fascynację instalowanymi obiektami, zapewniając natychmiastową satysfakcję i poczucie nieograniczonych możliwości.
Jak wpadłeś na pomysł tego filmu?
Ten utwór rozpoczął się jako eksperyment. Mówiłem na festiwalu projektowym i zostałem poproszony (wraz z innymi mówcami) o przygotowanie krótkiego wideo „dziękuję za przybycie” do odtworzenia na zakończenie imprezy. Chciałem zrobić coś bardziej interesującego niż zwykłe mówienie do mojego smartfona. Pierwotnie planowałem stworzyć aplikację do śledzenia twarzy, która wypaczyła i poprawiła mi twarz w odpowiedzi na moją mowę. Z czasem zmieniłem to na doświadczenie całego ciała za pomocą kamery Kinect.
Natknąłem się na ten efekt, który wydawał się tak dramatyczny, że postanowiłem zbadać dalej i opublikować Bipolar (tak nazwany z powodu ciągłych wahań między stanami porządku i chaosu) w formie krótkiego wideo. Ludzie zaczęli interesować się wystawą, więc zmodyfikowałem ją, aby stała się instalacją. Projekt stał się wspólnym przedsięwzięciem, kiedy Liam Paton z Silent Studios dodał interaktywny aspekt dźwiękowy. Od tego czasu był wystawiany na kilku wydarzeniach i wystawach.
Uwielbiamy się bawić, więc pozwólcie sobie na to, na co tu patrzymy?
Podstawowy efekt nie jest zbyt zaangażowany. Używam openFrameworks, który jest zestawem programistycznym opartym na języku C ++. Około 30 razy na sekundę dane głębokości i wideo z kamery Xbox Kinect są łączone, aby stworzyć model 3D odwiedzających. Używam danych dźwiękowych pochodzących z mikrofonu, aby wyciągać co drugi punkt w modelu 3D. Punkty są wyciągane w kierunku, w którym są zwrócone, aby zapewnić przestrzenną estetykę, która nie jest tak naprawdę możliwa w przypadku danych ze standardowej kamery.
Poza tym bardzo się angażuje. Za kulisami dzieje się znacznie więcej. Wykorzystuję moc karty graficznej do wygładzania modelu 3D i obliczam mnóstwo danych, które przyspieszają aplikację i ogólnie poprawiają wygląd tego elementu. Mam interfejs użytkownika w aplikacji z około 15-20 stronami przycisków i suwaków, które pozwalają mi ulepszać kawałek, dopóki nie będę zadowolony. Pod względem dźwięku ruch uczestnika jest obliczany i wysyłany do osobnego oprogramowania wbudowanego w Liam przez Max / MSP. Następnie tworzy zakręcony pejzaż dźwiękowy na podstawie ilości aktywności i kilku innych czynników, takich jak lokalizacja i bliskość. Ten dźwięk jest następnie odbierany przez mikrofon wraz z innymi dźwiękami w otoczeniu i wizualizowany na ciele obiektu.
Jaki był dla Ciebie najbardziej satysfakcjonujący aspekt tego konkretnego utworu?
Podczas gdy proces uczenia się oraz odkrycie i przypadkowość były bardzo przyjemne, najlepszą częścią tego projektu był wynik końcowy. Oglądanie, jak ludzie odkrywają i wchodzą w interakcję z instalacją po raz pierwszy, jest wspaniałym doświadczeniem, które sprawia mi przyjemność z każdego elementu, który oferuję publiczności. Anonimowo stanie z tyłu pokoju i obserwowanie, jak ludzie cieszą się nieoczekiwanym doświadczeniem, nad którym ciężko pracowałem, jest zawsze bardzo satysfakcjonujące.
Jaka jest ostatnia wspaniała rzecz, którą przeczytałeś, zobaczyłeś lub usłyszałeś?
Niedawno poszedłem zobaczyć nowy utwór „Momentum” z University of Virginia w galerii Barbican's Curve. Składa się z serii 12 mechanicznych lekkich wahadeł, które kołyszą się równomiernie w ciemnej przestrzeni. Efekt był bardzo kontemplacyjny i, przynajmniej dla mnie, nieco niesamowity z powodu nienaturalnego zachowania tych wolno poruszających się reflektorów.
Co dalej?
Rozmawiam z kilkoma kuratorami o wystawieniu Bipolar, a tymczasem kontynuuję badania nad nowymi sposobami reprezentowania ciała poprzez interaktywność. W tej chwili pracuję nad kilkoma projektami, z których kilka wkrótce się zakończy, więc miej oko.
