Навчання музики традиційно передається від учителя до учня майже без змін: методи, якими користувалися десятиліттями тому, часто залишаються незмінними навіть тоді, коли застаріли. Британський стартап MuseCool вирішив розірвати це коло за допомогою технологій.

Після публічного запуску в квітні компанія опрацювала близько 2000 музичних уроків. Аудіо-ШІ платформи не просто транскрибує розмови вчителя й учня, а й аналізує саму музику — так формується масив даних, який здатен показати те, що галузь роками не могла виміряти: що насправді відбувається на музичному занятті.

Технології в консервативній галузі

Співзасновник і CEO компанії Petru Cotarcea зазначає, що останні півроку стали показовим експериментом щодо того, як індустрія музичної освіти сприймає нові інструменти.

Music education can be quite conservative. People go to conservatoires to study, and naturally a lot of what you learn relates to how music has historically been taught and played.

Petru Cotarcea, CEO та співзасновник MuseCool

Із приблизно 100 репетиторів, до яких звернулася компанія, 40 навіть не спробували продукт — дехто відповідав у стилі «у мене свої методи». З 60, хто все ж випробував сервіс, лише 28 стали постійними користувачами, приводячи з собою власні студії.

Cotarcea переконався, що впровадження технологій у музичну освіту дається важко, проте ті, хто залишається, тримаються за платформу надовго.

Once people become accustomed to a system, they’re likely to continue using it for quite a long time. That’s where many other apps in our field struggle. You can get amateur musicians to try apps, but it’s much harder to get professional musicians and teachers to incorporate apps deeply into education.

Petru Cotarcea

Як штучний інтелект вчиться розуміти урок музики

На сьогодні платформа опрацювала близько 2000 занять. Кожен урок музики — це фактично відкрите поле подій, де може статися що завгодно. Головна перевага сервісу — здатність розуміти сам урок, наче своєрідний Shazam нового покоління: система розпізнає твір, визначає, у якому саме місці перебуває учень, що саме грається і що відбувається довкола гри.

В основі MuseCool лежить технологія Music Information Retrieval (MIR), яка дозволяє платформі аналізувати й розуміти музичну складову заняття.

Компанія тісно співпрацює з Queen Mary University of London у сфері MIR-досліджень і готується розпочати спільний проєкт в рамках програми Innovate UK для подальшого розвитку своєї технології. За словами Cotarcea, саме здатність аналізувати музику, а не лише розшифровувати сказане під час уроку, і є ключовою відмінністю MuseCool.

We listen to the lesson itself and understand what is happening musically. Everything else comes from that.

Petru Cotarcea

Cotarcea згадує добре профінансованого конкурента з США, що вийшов на ринок цього літа. Спершу його венчурна підтримка викликала занепокоєння, проте після тестування продукту думка змінилася.

They can record the speech, generate summaries, and isolate the music so you can play it back. But they don’t seem to analyse the music itself. For us, understanding music is fundamental.

Petru Cotarcea

Від аналізу уроків до універсальної платформи для викладання

І це лише початок. За словами Cotarcea, доступ до нот залишається серйозною проблемою для багатьох користувачів. На щастя, значна частина класичного репертуару перебуває у суспільному надбанні, тож влітку MuseCool найняв команду, переважно в Україні, щоб розширити бібліотеку таких творів і перевести їх у формат XML.

Наразі застосунок містить близько 4000 творів для фортепіано, і колекція зростає стрімко — практично подвоюється щомісяця завдяки вдосконаленню програмного забезпечення. Це означає, що батькам більше не потрібно купувати, наприклад, збірку творів Моцарта — застосунок пропонує ноти з суспільного надбання безкоштовно.

До кінця року компанія планує додати до каталогу ще й ліцензовану музику.

Водночас, у міру вдосконалення аналізу уроків, звіти платформи стають дедалі детальнішими. Теплові карти дозволяють користувачам натискати на окремі такти музики, щоб побачити, що обговорювали вчитель і учень та що відбувалося музично в цей момент. Прагнучи завоювати довіру нового покоління викладачів, MuseCool намагається розв'язати одразу кілька проблем репетиторів.

We discovered that tutors can find it surprisingly awkward to talk about money. Obviously, it’s incredibly important that people actually get paid, so we wanted to make that process easier.

Petru Cotarcea

It takes around five minutes to sign up, and then you can manage your lesson payments through the platform.

Petru Cotarcea

Сервіс також формує підсумки уроків, допомагає дітям регулярно практикуватися і надає доступ до нот. Крім того, платформа потенційно може приводити до репетиторів нових учнів.

MuseCool працює за моделлю B2B2C: репетитори виступають посередниками до батьків і учнів, які платять за послуги. За словами Cotarcea, у середньому один викладач на платформі має 14,8 приватних учнів, тож навіть невелика кількість репетиторів дозволяє охопити сотні потенційних підписників.

Наразі стартап співпрацює з навчальними закладами та студентськими спільнотами при Royal College of Music, Royal Academy of Music, Trinity Laban, Royal Conservatoire of Scotland, Royal Welsh College of Music & Drama, Leeds та інших.

We’re particularly interested in reaching conservatoire students because they’re generally between 18 and 25, and many of them already teach. They’re also younger and more open to technology because they grew up with it. We have the potential to expose MuseCool to around 6,000 musicians across these conservatoires.

Petru Cotarcea

Компанія також автоматизувала модель локального маркетплейсу. Щойно кількість підключених репетиторів у певній локації досягає певного рівня, MuseCool генерує локальний сайт, де батьки можуть знаходити викладачів, які погодилися на публічний профіль. У перспективі компанія планує тиражувати такі маркетплейси у різних містах і країнах, зокрема місцевими мовами.

Тисячі уроків перетворюються на дані

Завдяки своїй роботі MuseCool накопичує потенційно цінний ресурс — дані про те, що насправді відбувається на музичних заняттях. Уже зараз ці дані дають несподівані висновки. За інформацією MuseCool, у середньому лише близько 40 відсотків уроку припадає безпосередньо на гру на інструменті. Решта часу йде на пояснення, обговорення музики та загальне спілкування, особливо якщо йдеться про заняття з дітьми.

Cotarcea зазначає, що це спростовує поширене уявлення, ніби платний музичний урок майже повністю складається з гри на інструменті.

There is much more happening around the playing.

Petru Cotarcea

Втім, потенційна цінність цих даних виходить далеко за межі розуміння того, як розподіляється час на уроці.

Imagine tutors using MuseCool inside a conservatoire, music school, or another formal educational institution.

Petru Cotarcea

Керівництво, адміністрація чи завідувачі навчальних програм могли б отримувати картину успішності та прогресу учнів у режимі реального часу, а також перевіряти, чи проходять заняття взагалі.

You don’t need somebody to listen to every lesson. You have data points showing what is happening across 600 or 800 students. If something starts going wrong, the institution can potentially intervene much earlier — before a student gives up or reaches a crisis point. That could help educational institutions keep students learning for longer.

Petru Cotarcea

Це означає, що замість очікування підсумкових іспитів наприкінці навчального року школи могли б бачити реальну картину прогресу сотень учнів у режимі реального часу.

Ще одна сфера застосування — академічні дослідження в галузі педагогіки музики.

I dream of doing so many papers with this data.

Petru Cotarcea

I go to a lot of teaching events, and so much of what I hear is anecdotal. People tell stories about how they taught something, what they tried, and whether they thought it was successful. There isn’t much genuine quantitative data showing what happens inside lessons and what actually works. With enough data, that becomes possible.

Petru Cotarcea

Однак цінність даних не обмежується розумінням структури уроку. Ще одна потенційна категорія клієнтів — виробники музичних інструментів. Розуміння того, як насправді грають на інструменті, дає виробникам знання, яких вони наразі не мають.

Також у полі інтересу — музичні компанії.

If you have a genuine understanding of what musicians, students, or children in a particular area are learning, you can understand what kinds of music, composers, or artists resonate with them.

Petru Cotarcea

Від помічника на уроці до фортепіано, яке говорить

Для Cotarcea все це — лише перший крок. Він мріє про фортепіано, що спілкується, подібно до казки «Красуня і Чудовисько».

Now imagine that applied to a piano — a talking piano. Maybe that’s five or ten years away, or perhaps much sooner.

Petru Cotarcea

Уже сьогодні існують технології, здатні розпізнавати, як людина фізично натискає клавіші фортепіано — як саме вона торкається і взаємодіє з інструментом, — а також технології розпізнавання мовлення.

What we bring is the layer that understands the music in the room and analyses the audio. Imagine rehearsing with your friends or your band while the piano listens to the room. It understands what is happening, who is playing what, who did what, and who said what.

Petru Cotarcea

We could collaborate with instrument manufacturers and bring the software directly into the piano. Then the piano effectively comes alive. It understands what is happening in the room, alongside technologies that understand how you physically interact with the instrument and what you say. That’s the vision.

Petru Cotarcea

Від музичного автобуса до нового раунду інвестицій

https://www.youtube.com/embed/j0rJUaUNsvc?si=QSVtLlNJrIpjJzq4

Амбіції MuseCool не обмежуються лише технологіями. Документальний фільм компанії The Most Beautiful Noise вийде на каналі PBS на Західному узбережжі США вже за два тижні.

Стрічка розповідає історію перетворення старого двоповерхового автобуса на пересувну музичну школу — проєкт, народжений з ідеї зробити музичну освіту безкоштовною й доступною для кожної дитини в Лондоні.

Наразі компанія також працює над закриттям наступного раунду фінансування, який має допомогти в розширенні платформи.

There are still plenty of hurdles. Music education isn't the sexiest area for investors, so it can be an uphill battle. But we’re managing.

Petru Cotarcea

Від музичної школи на лондонському автобусі до штучного інтелекту, який одного дня зможе змусити фортепіано «розуміти» кімнату довкола себе, — амбіція Cotarcea залишається незмінною: переосмислити підхід до навчання музики і зробити музичну освіту доступнішою для всіх.