Назад к тому, как работает распознаваниеЧто нового в OMR

Сканирование PDF и фото: что нового.

Сканирование в Opuscan на базе оптического распознавания нот (OMR) становится все лучше. На этой странице собраны обновления импорта PDF и фотографий, начиная с самых новых.

Записи автоматически переведены с английского. Прочитать оригинал на английском

28 сентября·Улучшено·

Новая версия модели распознаёт редкие размеры и строки без ключа

Мы обновили модель сканирования, уделив особое внимание музыкальным размерам, ключам и многотактовым паузам.

  • Больше размеров распознаётся так, как они напечатаны. Теперь модель распознаёт 29 размеров, а также обозначения обычного и сокращённого размера. В этом месяце добавлены 6/4, 7/4, 8/4, 9/4, 10/8, 11/8, 13/8, 14/8, 15/8, 9/16, 11/16, 13/16, 15/16 и 17/16, которые встречаются в народной, джазовой и современной музыке. Раньше они заменялись более привычными размерами (10/8 превращался в 12/8, а 8/4 — в 5/4), длительности в тактах переставали сходиться, и ноты удалялись, чтобы их подогнать. См. полный список поддерживаемых обозначений.
  • Многотактовые паузы сохраняют свою фактическую длительность. В партиях духового или симфонического оркестра число над многотактовой паузой показывает, сколько тактов нужно отсчитать. Теперь это число считывается неправильно гораздо реже. Раньше «10» могло превратиться в 100, и в партии появлялись десятки лишних пустых тактов.
  • Строки без ключа сохраняют правильную высоту нот. Во многих партиях, особенно в джазовых партитурах и старых изданиях, ключ печатается только на первой строке страницы. Раньше модель пыталась угадать ключ для остальных строк, и при ошибке все ноты на строке смещались вверх или вниз. Теперь такие строки сохраняют ключ предыдущей строки.
  • Меньше обозначений, которых нет на странице. Маленькая «3» над триолью больше не распознаётся как аппликатура, октавная линия (8va) не добавляется там, где её нет, а нотоносец, на котором вся строка содержит только паузы, больше не заполняется нотами ударных.
  • Больше нот попадает в партитуру. Если в распознанном такте суммарная длительность нот превышает допустимую для его размера, часть нот приходится пропускать, чтобы длительности сошлись. Теперь ритм и размеры распознаются точнее, поэтому это происходит гораздо реже: при тестовом импорте пропало примерно на 70% меньше нот.

Также в сентябрь

32 небольших изменения
7 августа·Улучшено·

Новая версия модели с поддержкой неявных триолей и других туpletов

Новая версия нашей собственной модели теперь используется при каждом импорте PDF и фотографий и уделяет особое внимание тому, как tuplets напечатаны на странице.

  • Теперь поддерживаются неявные tuplets. Гравёры обычно печатают маленькую «3» или «6» над первой триолью или секстолью в пассаже, а следующие группы оставляют без обозначения — предполагается, что исполнитель сам продолжит этот ритмический рисунок. Такие неотмеченные группы — это неявные tuplets: они исполняются как tuplets, хотя на нотной странице это никак не указано. Они очень часто встречаются в изданиях XIX века, этюдах и вариациях. Теперь при сканировании они восстанавливаются по ритму такта, вместо того чтобы удалять ноты ради соответствия размеру.
  • Меньше tuplets, придуманных на пустом месте. Раньше модель могла отмечать обычные группы под общим ребром как триоли, даже если над ними не было напечатано никакой цифры, и эти цифры появлялись в вашей партитуре. Теперь tuplet записывается только там, где он действительно указан на странице.

Также в август

19 небольших изменения
29 июля·Улучшено·

Новая версия модели с упором на точность распознавания сканов нот

Новая версия нашей собственной модели теперь используется для каждого импорта PDF и фотографий и показывает на 22%–51% меньше ошибок в наших тестах распознавания сканированных нот. Наибольший прирост заметен на более сложных страницах — старых гравированных изданиях и при неравномерной печати.

24 июля·Улучшено·

Новая версия модели с упором на исправления нотации

Улучшенная версия собственной модели Flat теперь используется для импорта всех PDF-файлов и фотографий, в частности:

  • Теперь поддерживаются многоголосные фрагменты с общими паузами и невидимыми паузами.
  • Тактовые черты и окончания повторов (вольты) теперь правильно размещаются внутри тактов.
  • Группировка нот рёбрами теперь распознаётся надёжнее.
  • Обозначения размера, записанные через несколько нотоносцев, как в оркестровых партитурах, теперь распознаются.
  • Исправлены некоторые буквенно-цифровые обозначения аккордов, которые экспортировались в MusicXML с нестандартным типом аккорда.
21 июля·Новое·

Opuscan для Windows

Opuscan — наше отдельное приложение для сканирования нот в партитуру — теперь доступно на Windows наряду с macOS, iPhone, iPad и Android. Отсканируйте страницу или откройте PDF и получите редактируемую, воспроизводимую партитуру, которую можно экспортировать в MusicXML и MIDI — учётная запись Flat не требуется.

15 июля·Новое·

Opuscan для iPhone и iPad

Opuscan — наше отдельное приложение для сканирования нот в партитуру — теперь доступно в App Store для iPhone и iPad, дополняя приложения для macOS и Android. Сфотографируйте страницу или откройте PDF и получите редактируемую, воспроизводимую партитуру, которую можно экспортировать в MusicXML и MIDI — без необходимости создавать аккаунт Flat.

10 июля·Новое·

Отдельные приложения Opuscan для macOS и Android

Opuscan — наше отдельное приложение для распознавания нот — теперь доступно в виде отдельных приложений для macOS и Android. Оно создано на том же собственном OMR-движке, что и Flat, и позволяет любому пользователю преобразовать PDF или фотографию нот в редактируемую, воспроизводимую партитуру и экспортировать её в MusicXML и MIDI — без необходимости создавать учётную запись Flat. Приложение предназначено для тех, кому нужна только технология сканирования, чтобы передавать результат в любимое музыкальное ПО: от нотных редакторов (MuseScore, Dorico, Sibelius, Finale) до DAW (GarageBand, Logic Pro, Ableton Live). Доступно в Mac App Store и Google Play.

Также в июль

11 небольших изменения
23 июня·Улучшено·

Более точный анализ страницы для сложных макетов

Мы улучшили распознавание макета страницы при сканировании. Импорт PDF-файлов и фотографий теперь даёт более чистые и точные партитуры, особенно при сложной компоновке:

  • Плотные страницы теперь разделяются правильно. Страницы с большим количеством коротких систем, расположенных друг над другом, больше не объединяются — каждая система распознаётся отдельно.
  • Лучше для оркестровых партитур и больших ансамблей. Инструменты с несколькими нотоносцами, такие как фортепиано и орган, а также большие партитуры с множеством нотоносцев распознаются надёжнее.
  • Широкие, альбомные страницы и буклеты. У альбомных страниц больше не обрезается левый край (из-за чего могли пропадать ключи), а многостраничные сканы и сканы буклетов теперь обрабатываются корректно.
  • Меньше случайных распознаваний. Посторонние элементы рядом с нижними колонтитулами и полями страницы больше не принимаются за нотный текст.
15 июня·Улучшено·

Более точная модель

Теперь каждый импорт PDF и фотографий обрабатывается собственной внутренней моделью Flat. В этом выпуске представлена крупная новая версия, сосредоточенная на точности распознавания: музыкальная корректность (ноты, ритмы, лиги, знаки альтерации — всё, что определяет правильность партитуры) улучшена на всех тестовых наборах, а наибольший прирост достигнут в следующих областях:

  • Динамика: +39%
  • Ферматы, артикуляция, лиги, знаки альтерации: +30 to 37%
  • Длительности нот: +22%
  • Лиги фразировки, ноты с точкой, паузы, назначение нотоносца и голоса: +14 to 20%

Текст, динамика и размещение элементов в нотной записи также стали точнее: слова, буквенно-цифровые обозначения аккордов и динамические обозначения теперь надёжнее привязываются к правильным нотам, в том числе в сложной записи, например на фортепианных системах из двух нотоносцев и в партиях со сменой ключа.

1 июня·Новое·

Начинается внедрение нашей собственной модели ИИ

Мы начинаем внедрять собственную модель ИИ Flat для импорта PDF и фотографий, разработанную и обученную внутри компании, чтобы заменить сторонний движок, использенный при запуске. Полный контроль над технологией позволяет нам ещё больше повышать точность, расширять набор распознаваемых элементов, выпускать улучшения значительно быстрее и лучше согласовывать результаты с собственным форматом нотации Flat, чтобы импортированные партитуры естественно вписывались в остальную часть продукта. Уже в этом первом выпуске распознаётся гораздо больше музыкального материала:

Более широкий охват нотации. Теперь распознаются:

  • Буквенно-цифровые обозначения аккордов, корректно кодируемые по их музыкальному значению как редактируемые аккорды, а не просто как обычный текст
  • Повторы тактов и ритмические слэши
  • Обозначения темпа и метрономические указания (с BPM)

Текст и слова на большем числе языков. По умолчанию распознаются слова песен, репетиционные буквы и другой текст на языках с латиницей, а также на японском, корейском и китайском.

Более точное соответствие исходной вёрстке. Теперь импортированные партитуры гораздо точнее следуют макету исходной партитуры, сохраняя число тактов в строке, систем на странице и общую структуру. Это особенно заметно на больших и сложных партитурах, например в оркестровых произведениях и для многострочных инструментов, таких как фортепиано. Также поддерживается больше форматов страниц, включая альбомные страницы, которые раньше не поддерживались.

Также в июнь

8 небольших изменения