Skvot

Mag

Skvot              Mag Skvot Mag
Курсы по теме:
Шире звука: визуальные эксперименты на музыкальной основе

5 аудиопроектов, которые учат мыслить нестандартно.

card-photo
card-photo
Вика Пушкина

автор в SKVOT

В дизайне правит вижуал, но звук тоже не на вторых ролях. Часто он влияет на визуальный креатив даже сильнее, чем можно представить.

Редактор Creative Review Патрик Бургойн считает, что 2020 год станет годом невизуального дизайна и звуковых инноваций. Как именно это будет выглядеть, пока неизвестно. Но первый в мире логотип по мотивам ASMR-«брейнгазма», выпущенный в январе 2020, точно можно считать одним из первых примеров.

Большинство экспериментов со звуками ожидаемо связаны с нейронными сетями. Но не все хорошее настолько сложнонаучное. Мы собрали простые для восприятия, но необычные аудиопроекты, которые покажут музыку с новой стороны, натолкнут на новые идеи и научат работать со сложными системами.

 

Audio-based Image Distortion

Audio-based Image Distortion — это экспериментальный проект 2020 года интерактивного веб-разработчика и музыканта Яниса Яннакополоуса.

Креатор исследует микс искусства и технологий. В проекте Audio-based Image Distortion он попробовал искажать картинки музыкой: изображения изменяются в такт звуковой волне.

Яннакополоус использовал две библиотеки языка программирования JavaScript: p5.sound для работы со звуком и p5.js для изображений. Код есть на Github, его можно использовать для личных или коммерческих проектов, веб-сайтов или приложений. А посмотреть, что вышло, можно на сайте с демороликами проекта.

Роликов восемь: для каждого Яннакополоус совместил постер фильма с его саундтреком. Известных фильмов в подборке нет, но атмосфера произведения, особенно если смотреть со звуком, улавливается моментально.

Польза: новый способ изменять вижуал. Пока доступен только для разработчиков, интерфейса для обычных пользователей нет.

Google: Search Sounds

Google: Search Sounds — это интерактивный сайт, который в 2019 году запустила команда Google Germany в коллаборации с рекламным агентством 72andSunny и продакшеном Unit9. Для проекта популярные поисковые запросы Google в Германии трансформировали в звуки и анимацию, которая их издает.

Например, zero waste превратился в хрустящие пластиковые бутылки, tattoo — в жужжащую тату-машинку, а Pride 2019 — в хлопающий на ветру флаг. Анимация для запросов получилась немного сюрреалистичная: например, в tattoo рука, которая держит машинку, делает татуировку самой себе.

Экспериментировать в Search Sounds можно только со смартфона. Создатели предлагают выбрать три запроса и автоматически замиксовать из них трек. Фоновая музыка для всех роликов одна и та же, но дополненная звуками выбранных анимаций. Получается 15-секундное видео, которое можно скачать или поделиться им в соцсетях.

Польза: крутой пример трансформации стандартных вещей в нестандартные.

Listen

Listen — это проект из одной музыкальной композиции, которую можно послушать только через фильтр в инстаграме. Этот эксперимент выпустила команда дизайн-агентства HUSH, которая любит играть со звуками: раньше они превращали записи голосов в картины, а отдельные слова — в необычные фигуры.

Идея Listen родилась, когда команда пообещала больше слушать друг друга в 2020 году. В проекте HUSH хотели выразить уникальность опыта и восприятия каждого человека.

Для этого все члены команды рассказали о местах, которые считают своим домом. Они назвали адрес этого места, период, когда там жили, и песню, с которой это все ассоциируется. На основе этих данных HUSH создали музыкальную композицию «коллективного ностальгического опыта».

Этот трек визуализировали в виде точек, расположенных по кругу. Каждая точка — дом одного из членов команды. Визуализация похожа на виниловую пластинку и ее можно прослушать, как ту же пластинку — но не на граммофоне, а в инстаграме.

Проект открывается как инстаграм-фильтр: на экране нарисована полупрозрачная копия «пластинки». Чтобы трек заиграл, надо навести камеру смартфона на изображение «пластинки» на экране или бумаге и совместить с точками в фильтре.

Listen можно слушать двумя способами. Пассивно — когда фильтр автоматически проигрывает всю композицию, и активно — проводить пальцами по отдельным точкам и включать новые звуки.

Польза: пример «очеловечивания» технологий и свежего использования привычных форматов.

Closer

Closer — интерактивное аудиовизуальное приложение диджея Ричи Хоутина, который выпускает минималистичные треки под псевдонимом Plastikman. В Closer можно деконструировать концертные записи Хоутина: включать и выключать отдельные слои звука и переключаться между ракурсами камеры.

Приложение вышло в 2019 году, но Хоутин задумал его еще 10 лет назад. Идея была в том, чтобы вдохновить пользователей творчески использовать технологии и исследовать потенциал диджеинга. Но реализация оказалась трудной: первые прототипы были слишком буквальными, много весили и в них не хватало визуала.

Главным вдохновением для финальной версии стало аудиовизуальное выступление Хоутина Close в 2017 году. Визуальные эффекты для него создавались в режиме реального времени и зависели от движений диджея. Камеры снимали руки Хоутина, эффекты и оборудование — в результате получилась картинка интерфейса Closer.

В актуальной бета-версии приложения три вертикальных экрана. Верхний показывает зрителей и визуальные эффекты шоу, нижний — оборудование крупным планом, а центральный позволяет включать и выключать синтезаторы и ударные.

Для Closer использовали записи концертов в Глазго, Токио, Лондоне и Будапеште. Чтобы работать с ними, нужно загрузить видео на смартфон. Файлы весят много — до 5 Гб и загружать их сложно, Хоутин планирует это доработать. Еще в планах добавить live streaming с концертов с теми же возможностями деконструкции.

Польза: учит смотреть на систему мультиформатного проекта в целом и разбирать его по кусочкам.

Learning Synths

Learning Synths — это интерактивный визуальный гид по игре на синтезаторе, который в 2019 году выпустила компания Ableton. Эта берлинская фирма делает музыкальные программы и приложения.

Проект создан в виде пошагового интерактива с игровой панелью в финале. Свою композицию с его помощью сделать не получится — функции записи и сохранения нет, но экспериментировать можно.

В обучающей части 10 основных разделов и в каждом почти столько же подразделов. Объясняют все очень просто, начиная с элементарного. Например, в первом разделе предлагают покликать мышкой по анимированному прямоугольнику, чтобы услышать, как меняется звук в зависимости от силы давления:

Игровая панель для неподготовленного человека выглядит страшно. Но для тех, кто прошел все разделы или набил базу где-то еще, это крутое поле для онлайн-экспериментов с возможностями реального инструмента. Например, на ней есть 20 пресетов с настройками звучания. Из самых интересных: немецкая сирена, звук старого компьютера и прыгающего мяча.

Польза: удобный интерактивный гид по созданию звуков — подойдет креаторам, которые не разбираются в создании музыки, но очень хотят научиться.

Поделиться материалом
РАССЫЛКА SKVOT

Раз в две недели мы отправляем новые публикации и анонсы курсов на почту