Pierwsza orkiestra, w której wykorzystano kamery monitoringu, głośniki oraz sztuczną inteligencję
Czy kamery monitorujące mogą coś zagrać? Odpowiedź brzmi: tak. Globalna firma technologiczna Axis Communications przedstawia eksperyment o nazwie „The object detection orchestra” - pierwszy na świecie występ muzyczny w całości zagrany na kamerach monitorujących i głośnikach wykorzystujących sztuczną inteligencję. Celem tego wyjątkowego koncertu było odkrycie nowych kierunków poza klasycznym podejściem do bezpieczeństwa w systemach dozoru wizyjnego
Łącząc wysokowydajne kamery monitorujące z analizą opartą na sztucznej inteligencji, firma Axis stworzyła nowy rodzaj instrumentu, który odczytuje przedmioty codziennego użytku, takie jak piłki tenisowe, filiżanki do kawy czy gaśnice, jako sygnały muzyczne. Gdy określony przedmiot przemieszcza się w polu widzenia kamery, różne strefy wyzwalają różne nuty, zamieniając kamerę monitorującą w pełni funkcjonalny instrument muzyczny.
W eksperymencie chcieliśmy sprawdzić, jakie możliwości mają nasze kamery monitorujące i analityka oparta na sztucznej inteligencji w zakresie wykrywania niestandardowych obiektów i wyzwalania działań w czasie rzeczywistym. Stworzyliśmy orkiestrę. Jednak nasi klienci mogą wykorzystać tę samą najnowocześniejszą technologię do tworzenia szerokiej gamy zaawansowanych rozwiązań dostosowanych do ich potrzeb – mówi Ghaith Sankari, doświadczony inżynier oprogramowania w Axis Communications.
Wykonany utwór jest nową wersją kompozycji Richarda Straussa „Tako rzecze Zaratustra”, która stała się kultowa dzięki wykorzystaniu w filmie „2001: Odyseja kosmiczna”. Jednak zamiast instrumentów smyczkowych i dętych, w tej wersji wykorzystano piłki tenisowe, filiżankę do kawy i gaśnicę.
Tak naprawdę mogliśmy użyć dowolnych przedmiotów, a nawet dźwięków. To, do wykrywania czego używasz kamer i trenujesz analitykę, zależy wyłącznie od Ciebie. Na przykład mamy klientów, którzy wykorzystują tę technologię do automatycznego wykrywania wad projektowych lub błędów produkcyjnych – mówi Sankari.
„To, do czego użyjesz kamer i wytrenujesz systemy analityczne, zależy wyłącznie od Ciebie.”
Szwedzki producent muzyczny Jonas Quant, znany ze współpracy z Kylie Minogue, No Doubt i Hurts, podjął się wyzwania przygotowania tego utworu dla tak niekonwencjonalnego zespołu.
Fascynowało mnie traktowanie wykrywania obiektów jako nowego rodzaju instrumentu. Instrumenty zadziałały poprzez wykrywanie określonych obiektów w strefach przypisanych do danej nuty. Kiedy kamera wykryje właściwy obiekt, wysyła sygnał MQTT (lekki protokół komunikacyjny używany m.in.
w systemach IoT) do MIDI (standard komunikacji między urządzeniami muzycznymi i komputerami), który odtwarza dźwięk. Każda nuta była reprezentowana jako kwadrat w ramce kamery. Aby wykonać nową wersję utworu „Tako rzecze Zaratustra”, potrzebowaliśmy czterech muzyków grających na czterech kamerach podłączonych do komputera i konsoli mikserskiej na żywo – mówi Quant.
Chociaż nieoczekiwana i zabawna, orkiestra wykrywająca obiekty jest czymś więcej niż tylko innowacyjną ciekawostką. Jest to eksperyment potwierdzający słuszność koncepcji, pokazujący, w jaki sposób zaawansowana analityka oparta na sztucznej inteligencji firmy – w połączeniu z wysokowydajnymi kamerami monitoringu wizyjnego i głośnikami – może zostać przeszkolona do identyfikowania niemal wszystkiego i wyzwalania różnych działań. Wszystko to w czasie rzeczywistym. Ta sama technologia, która umożliwiła ten wyjątkowy koncert, napędza również automatyzację, umożliwia tworzenie inteligentnych miast i kształtuje przyszłość interakcji między maszynami, przenosząc monitoring wideo daleko poza obszar bezpieczeństwa.
source: Axis