👋 Снова новости, да-да )

Через 6 дней я буду выступать на Data New Year 2024 в Москве. Основные темы для докладов: успешные и не очень проекты. Делимся опытом. Приглашаю вас!)

Мой доклад по теме обработки звука. Помните я писал про модель для генерации нот из аудио?

Времени на лекцию нет) Наверное, мне и так больше всех выделили... 20 минут.

План выступления:

*️⃣Идея проекта и как она зародилась.
*️⃣Какие данные нужны, смотрим на спектрограммы и слушаем музыку 🙂
*️⃣Первые шаги к реализации, алгоритм.
*️⃣А когда ML и нужен ли он? (нужен).
*️⃣Задача обнаружения звуковых событий.
*️⃣Какие идеи на данном этапе?

Самое интересное, это идея обнаружения звукового события. Есть вариант с алгоритмом, который имеет множество минусов) и есть вариант с CRNN (сверточная рекуррентная нейронная сеть).

Также, есть важный аспект — сопоставление нот. Вариантов существует очень много. Как сделать звучание максимально похожим на оригинал? Это уже другой модуль, отвечающий за генерацию нот и тут, возможно, имеет смысл прикрутить генеративную нейронку)

Результатов с нейронками я предоставить не смогу, т.к. я просто школьник без денег и власти!) Но обсудить, надеюсь, интересные для вас идеи — конечно.

Материалы с выступления выложу в сообществе канала. Также, если у вас есть желание, могу сделать материалы про deep learning для обработки звука. Это будет отклонение от основного потока материалов. Но ничего, одно другому не мешает.

#news