Назад к тому, как работает распознаваниеЧто нового в OMR

Сканирование PDF и фото: что нового.

Сканирование в Opuscan на базе оптического распознавания нот (OMR) становится все лучше. На этой странице собраны обновления импорта PDF и фотографий, начиная с самых новых.

Новая версия модели с поддержкой неявных нерегулярных групп

Граверы обычно печатают маленькую «3» или «6» только над первой триолью или секстолью пассажа, а следующие группы оставляют без цифры — исполнитель должен продолжить рисунок сам. Такие необозначенные группы и есть неявные нерегулярные группы: играются как триоли или секстоли, хотя на странице об этом ничего не написано. Они очень часто встречаются в изданиях XIX века, в этюдах и вариациях.

  • НовоеНеявные нерегулярные группы теперь поддерживаются: они восстанавливаются по ритму такта, а не за счёт удаления нот, чтобы такт уложился в размер.
  • УлучшеноГораздо меньше выдуманных триолей — нерегулярная группа попадает в партитуру только там, где на странице действительно напечатана цифра.
  • НовоеЗаголовки на хангыле и корейские указания к исполнению теперь распознаются.
  • ИсправлениеРепетиционные знаки привязываются к такту, который они открывают, а не к ближайшей ноте.
  • ИсправлениеПлюс набор более мелких исправлений: текст песни, буквенные обозначения аккордов, названия инструментов, табулатуры, затакты и сведения о партитуре.

Новая версия модели с упором на точность распознавания сканов

Новая версия нашей собственной модели теперь используется при каждом импорте PDF и фотографий: на наших тестовых наборах отсканированных нот ошибок стало меньше на 22–51%. Сильнее всего результат вырос на сложных страницах — старых гравюрах и неровной печати.

Новая версия модели с упором на исправления в нотации

Улучшенная версия нашей собственной модели теперь используется при каждом импорте PDF и фотографий, в частности:

  • НовоеТеперь поддерживаются многоголосные фрагменты с общими паузами и невидимыми паузами.
  • ИсправлениеТактовые черты и окончания повторов (вольты) теперь корректно размещаются внутри тактов.
  • УлучшеноЛиги (beams) распознаются надёжнее.
  • НовоеТеперь распознаются размеры, записанные через несколько станов, как в оркестровых партитурах.
  • ИсправлениеИсправлены некоторые буквенно-цифровые обозначения аккордов, которые экспортировались в MusicXML с нестандартным типом аккорда.

Opuscan для Windows

  • НовоеOpuscan — наше отдельное приложение «сканирование → партитура» — теперь доступно для Windows, наряду с macOS, iPhone, iPad и Android. Отсканируйте страницу или откройте PDF — и получите редактируемую партитуру с воспроизведением, которую можно экспортировать в MusicXML и MIDI.

Улучшения нотации и распознавания

  • НовоеТеперь распознаются смены ключа в середине такта.

Opuscan для iPhone и iPad

  • НовоеOpuscan — наше отдельное приложение «сканирование → партитура» — теперь доступно в App Store для iPhone и iPad, дополнив версии для macOS и Android. Сфотографируйте страницу или откройте PDF — и получите редактируемую партитуру с воспроизведением, которую можно экспортировать в MusicXML и MIDI.

Отдельные приложения Opuscan для macOS и Android

  • НовоеOpuscan — наше отдельное приложение «сканирование → партитура» — теперь имеет отдельные версии для macOS и Android. Построенное на той же собственной OMR-системе, оно позволяет превратить PDF или фотографию нот в редактируемую партитуру с воспроизведением и экспортировать её в MusicXML и MIDI. Opuscan создан для тех, кому нужна технология сканирования, чтобы передать результат в любимую музыкальную программу — от нотных редакторов (MuseScore, Dorico, Sibelius, Finale) до DAW (GarageBand, Logic Pro, Ableton Live). Доступно в Mac App Store и Google Play.

OMR теперь доступен как API для разработчиков

  • НовоеOMR-движок Opuscan теперь доступен программно через API для разработчиков. Отправляйте PDF или фотографии, отслеживайте прогресс распознавания, проверяйте определённые инструменты, затем импортируйте результат как редактируемую партитуру в библиотеку партитур или экспортируйте в MusicXML или MIDI. Это та же собственная модель, которая обеспечивает импорт PDF и фотографий в редакторе, — теперь доступная в масштабе для ваших приложений и рабочих процессов.

Улучшения нотации и распознавания

  • НовоеТеперь распознаются предупредительные (cautionary) знаки альтерации.
  • ИсправлениеИсправлены некоторые многоголосные фрагменты, где два голоса разделяют одну паузу.

Более точный анализ страницы для сложной верстки

Мы улучшили то, как сканирование считывает верстку страницы. Импорт PDF и фотографий теперь даёт более чистые и точные партитуры, особенно при сложной разметке:

  • УлучшеноПлотные страницы теперь корректно разделяются. Страницы с большим количеством коротких систем, расположенных друг над другом, больше не объединяются — каждая система определяется отдельно.
  • УлучшеноЛучше для оркестровых и больших ансамблевых партитур. Многостановые инструменты, такие как фортепиано и орган, а также большие партитуры с множеством станов распознаются надёжнее.
  • УлучшеноШирокие, альбомные и буклетные макеты. Альбомные страницы больше не обрезаются по левому краю (что могло «съедать» ключи), а многостраничные и буклетные сканы обрабатываются корректно.
  • ИсправлениеМеньше ложных элементов. Случайные объекты рядом с нижними колонтитулами и полями страницы больше не распознаются как нотация.

Улучшения нотации и распознавания

  • НовоеТеперь распознаются и сохраняются при импорте пользовательские схемы группировки лиг.
  • НовоеТеперь поддерживаются лиги, проходящие через паузы (например, нота / пауза / нота).
  • НовоеДля джазовых партитур, при корректном определении, теперь автоматически применяются джазовый стиль обозначений аккордов и рукописный джазовый нотный шрифт.

Более точная модель

Теперь каждый импорт PDF и фотографий обрабатывается собственной моделью Tutteo. Этот релиз — крупная новая версия, сфокусированная на точности транскрипции: музыкальная корректность (ноты, ритмы, лиги, знаки альтерации, от которых зависит «правильность» партитуры) улучшилась на всех тестовых наборах, с наибольшим приростом в:

Нотация Улучшение
Динамические обозначения +39%
Ферматы, артикуляция, лиги, знаки альтерации +30–37%
Длительности нот +22%
Слуры, пунктир, паузы, назначение стана и голоса +14–20%

Размещение текста, динамики и элементов верстки тоже стало точнее: слова, названия аккордов и динамические обозначения надёжнее привязываются к нужным нотам, включая сложные макеты — например, фортепианные большие станы и партии со сменой ключа.

Мы начинаем развёртывание собственной AI-модели

Мы начинаем развёртывание нашей собственной AI-модели для импорта PDF и фотографий, разработанной и обученной внутри команды, чтобы заменить сторонний движок, использовавшийся при запуске. Полный контроль над технологией позволяет нам сильнее повышать точность, расширять распознаваемую нотацию, выпускать улучшения гораздо быстрее и согласовать результат с собственным форматом нотации Tutteo, чтобы импорт естественно «встраивался» в продукт. Уже в первом релизе распознаётся заметно больше музыкального материала:

Более широкая поддержка нотации. Теперь распознаются:

  • НовоеБуквенно-цифровые обозначения аккордов, корректно закодированные по музыкальному смыслу как редактируемые аккорды, а не просто текст
  • НовоеПовторы тактов и ритмические слэши
  • НовоеОбозначения темпа и метронома (с BPM)

Тексты и слова на большем числе языков. Тексты песен, репетиционные отметки и другой текст по умолчанию распознаются для языков на латинице, а также для японского, корейского и китайского.

Ближе к исходной верстке. Импорт теперь гораздо точнее следует верстке исходной партитуры: количество тактов в строке, систем на странице и общая структура. Это особенно важно для больших и сложных партитур, например оркестровых произведений, а также для многостановых инструментов вроде фортепиано. Также поддерживается больше форматов страниц, включая альбомные, которые раньше не поддерживались.

Запуск импорта PDF

Теперь доступен импорт PDF: он позволяет превратить PDF с нотами в редактируемую партитуру. Функция работает на базе сторонней технологии оптического распознавания нот.


Эта страница была автоматически переведена с английского языка. Посмотреть оригинальную версию на английском.