Пойдём домой-2: Американец HXVOC отвечает китаянке Mo Xu ))
Никакой обработки, чистый аутпут из SynthV.
Никакой обработки, чистый аутпут из SynthV.
Synthesizer V Pro (Synth V) (1 онлайн
- Автор темы dr-music
- Дата начала
По поводу "метода тыка"- подметил сейчас интересную деталь во второй версии- написание в тексте предлога " to " заглавными или прописными буквами даёт разную транскрипцию фонемами. Маленькую t -программа интерпретирует как "dx" , а заглавную T , как "t uw" . Я очень долго боролся с неестественным произношением этого предлога, а, оказывается надо было писать через заглавную. Это работает, если нет в ноте точки или запятой ( фонемы cl ).
На другие согласные вроде не влияет, но не факт. Устал бороться с неестественными яркими "с-ками".
Но это всё про забивку текста непосредственно английскими буквами. Если кто пишет сразу фонемами, там всё по другому..
На другие согласные вроде не влияет, но не факт. Устал бороться с неестественными яркими "с-ками".
Но это всё про забивку текста непосредственно английскими буквами. Если кто пишет сразу фонемами, там всё по другому..
Эта информация, увы, недокументирована, а прочитать все форумы, конечно же, невозможно. Я просмотрел Phoneme Reference (пролистать вниз и выбрать язык), и не нашёл разницы в использовании заглавной и строчной t ни в одном из языков. Этот раздел остался с предыдущей версии Synth V, корейского языка по ссылке так и вовсе нет.
Мне-то русский язык нужен, причём в любом качестве, как иностранный тоже сойдёт. (Как у нас в армии говорили, за неимением повара будем ... кухарку.) И такие мысли у меня в голове бродят, которые, наверно, мог бы или реализовать, или показать, почему это невозможно, филолог-программист. Я нашёл таблицу слогов русского языка, их всего 643 — не безумное количество. Можно было бы создать таблицу соответствия слогов фонемам и скрипт, который прогонял бы через себя подготовленный (разбитый на слоги) русский текст. А ещё скрипт бы помечал, какой слог на фонемы из какого языка «переведён». В Synth V язык выбирается отдельно на каждую дорожку пиано-ролла (на выбранный голос), но каждой ноте/слогу язык можно поменять индивидуально, так что должны быть доступны, по идее, фонемы всех языков.
Да, одними слогами всех вопросов не решить, на стыке с предлогами без гласных придётся корректировать произношение (например, предлог «в» может произноситься и глухо, и звонко в зависимости от окружения). Но с таким скриптом всё было бы легче. (Наверно, легче — не знаю, не пробовал.)
1)
2) Тоже не сам натыкал, а прочитал, т.ч. возможны уточнения после экспериментов. Команда Modify > Trace Pitch into Control Points нужна, когда хочется подменить голос. Например, чтобы, поработав с Галенайей и добившись приемлемого «классического» звучания (для имитации которого этот голос создавали и которого сравнительно легче достичь именно с ним), применить результат к другому, например, теноровому голосу. Раньше это (как-то) делалось в Manual mode, но этого мода больше нет.
3) Mouth Opening — мощный инструмент, иногда спасительный. Найденное ему применение (уж не знаю, для этого ли он задумывался) — подправить гласные, особенно в неродном языке, которые по дефолту слишком открытые или закрытые. Голос Mo Xu мне больше недоступен (пробная лицензия истекла), выложить пример не могу. Но на посошок мне удалось во фразе «пойдём домой» (см. в комментах выше) приоткрыть «а», чтобы она была не очень «э», в слове «пойдём», и призакрыть «о», чтобы она не была слишком «а», в слове домой.
Не сам методом тыка натыкал, но прочитал. Эта команда нужна, когда нужно подвинуть ноты, но не хочется, чтобы Synth V отрендерил всё заново. Т.е. когда всё устраивает во фрагменте и нужно просто его подвинуть, выделяем ноты, применяем эту команду (параметры добавляются к выделению), двигаем. Надо поэкспериментировать, чтобы лучше понять, как оно работает и когда нужно. Жаль, что при применении этой команды нет никакой обратной связи — что-то бы мигнуло, пикнуло, цвет поменяло, не знаю, что ещё — было бы комфортнее.
2) Тоже не сам натыкал, а прочитал, т.ч. возможны уточнения после экспериментов. Команда Modify > Trace Pitch into Control Points нужна, когда хочется подменить голос. Например, чтобы, поработав с Галенайей и добившись приемлемого «классического» звучания (для имитации которого этот голос создавали и которого сравнительно легче достичь именно с ним), применить результат к другому, например, теноровому голосу. Раньше это (как-то) делалось в Manual mode, но этого мода больше нет.
3) Mouth Opening — мощный инструмент, иногда спасительный. Найденное ему применение (уж не знаю, для этого ли он задумывался) — подправить гласные, особенно в неродном языке, которые по дефолту слишком открытые или закрытые. Голос Mo Xu мне больше недоступен (пробная лицензия истекла), выложить пример не могу. Но на посошок мне удалось во фразе «пойдём домой» (см. в комментах выше) приоткрыть «а», чтобы она была не очень «э», в слове «пойдём», и призакрыть «о», чтобы она не была слишком «а», в слове домой.
У меня при применении этой команды кривые всё равно пересчитываются так же, как и без оной... На это как раз есть обратная связь- кривую хорошо видно на ноте. Возможно, имелись в виду параметры голоса или формы огибающих для этих нот. У меня почему то никаких изменений при применении этой команды вообще не происходит ((.
А с помощью кривой открытия рта можно также прекрасно регулировать твёрдость согласных и общую экспрессию слога. И её форма показана изначально уже пунктиром на огибающей, т.е. рисуем мы не саму кривую, а лишь её изменения в большую или меньшую сторону. Эклипсы в своём ролике так вообще говорят, что настоятельно рекомендуют держать эту кривую постоянно в поле зрения, мол можно полностью изменить произношение вокалиста..
Может кому пригодится: (более полезно в рок жанре) долго мучался, чтобы заставить Synth V в словах типа "stay" на одной длинной ноте петь не длинную гласную "а", а длинную экспрессивную согласную "y". По дефолту оно просто удлиняет гласную.
Хотелось добиться характерного (да не в оркестровом отделе будет упомянутого) Хэтфилдовского произношения. Для этого нужно разделять ноту пополам, в первой части ноты писать текст "stay" как есть, а вот там где хочется длинного продолжения согласной (по русски это будет как "Й") надо набивать в текст ".ih" (обязательно с точкой в начале). И регулировать экспрессивность этого слога уже на панели фонем-таймингов. И вообще, запятая и точка перед текстом ноты творят чудеса- надо самому поэкспериментировать, чтобы это понять. На протяжном пении практически бесполезно, а вот на коротком экспрессивном используется почти везде!
В только что вышедшем обновлении добавили наконец то меню своих пресетов на голоса и, что очень важно, исправили игнорирование силы фонемы голосами версии 1.
Это была огромная проблема- так как во второй версии ползунки регулировки и силы вовсе убрали и заменили на нижнюю удобную панель. Только вот она НЕ РАБОТАЛА с голосами первой версии, делая их практически бесполезными! Я думал это они специально, от жадности... Но нет, только что проверил- исправили (правда в меньшем диапазоне, но уже хорошо и это). Теперь можно редко используемые голоса даже и не обновлять. Теряем только время рендеринга и добавленные тембры.
Кстати, на форумах очень многие пишут, что старые голоса звучат лучше без обновления. Лучше, не лучше, но по другому-это факт..
Пять обновлений за девять дней... Спешили голубчики выпускать неготовый продукт.. Но хорошо, что исправляют. Глядишь, через месяц и ручной режим вернут... Публика стонет от его отсутствия. Очень многие использовали Synt-V не для собственного творчества, а только для каверов, отцифровывая вырезанные вокальные дорожки. А там спето то уже всё как надо, и в ручном режиме прекрасно переводится в миди. А сейчас ИИ программы корёжит спетый оригинальный вокал, заменяя своей интерпретацией.
Мне, с моим кривым пением, вторая версия с ИИ гораздо больше полезна, а вот если петь уметь, то ручной режим будет предпочтительней...
Это была огромная проблема- так как во второй версии ползунки регулировки и силы вовсе убрали и заменили на нижнюю удобную панель. Только вот она НЕ РАБОТАЛА с голосами первой версии, делая их практически бесполезными! Я думал это они специально, от жадности... Но нет, только что проверил- исправили (правда в меньшем диапазоне, но уже хорошо и это). Теперь можно редко используемые голоса даже и не обновлять. Теряем только время рендеринга и добавленные тембры.
Кстати, на форумах очень многие пишут, что старые голоса звучат лучше без обновления. Лучше, не лучше, но по другому-это факт..
Пять обновлений за девять дней... Спешили голубчики выпускать неготовый продукт.. Но хорошо, что исправляют. Глядишь, через месяц и ручной режим вернут... Публика стонет от его отсутствия. Очень многие использовали Synt-V не для собственного творчества, а только для каверов, отцифровывая вырезанные вокальные дорожки. А там спето то уже всё как надо, и в ручном режиме прекрасно переводится в миди. А сейчас ИИ программы корёжит спетый оригинальный вокал, заменяя своей интерпретацией.
Мне, с моим кривым пением, вторая версия с ИИ гораздо больше полезна, а вот если петь уметь, то ручной режим будет предпочтительней...
Ещё раз о Cantai.
Ричард ДеКоста испытывает определённые финансовые трудности, но продолжает работу над проектом. На Кикстартере можно поддержать проект, получив, если всё сложится хорошо, полную бессрочную лицензию и возможность пользоваться всеми будущими голосами за $250.
На данный момент отработан рендеринг на сервере для MIDI-файлов с текстом (Сиб и MuseScore уже умеют в такой экспорт, Дорико будет уметь в следующей версии). Язык пока только английский, но латынь и испанский на подходе. Сейчас началось бета-тестирование серверного рендеринга для MusicXML, более естественного формата для нотных редакторов. VST-версия позже. Как раз ради того, чтобы VST-версия состоялась, кикстартер и используется.
===============
Ниже мой последний комментарий по поводу MusicXML экспорта из Дорико (из Дискорда). Сорри, переводить обратно лень.
About the difference between MIDI and MusicXML export in Dorico.
Anyone who has not tried Dorico does not know that in Dorico, unlike other rapidly aging score editors, each note has two sets of timestamps, one for displaying the notes on the screen and one for playback. In most cases they are the same, but a composer/arranger can move the beginning or end of a note at any time to achieve greater expressiveness without spoiling the way the sheet music looks on the screen. For example, composers very often do not mark caesuras where they would occur most naturally for breathing. Dorico allows you to make a note shorter for playback without changing its representation in the score.
However, there is currently no option in Dorico to export MusicXML, taking the timestamps for playback. Look at the picture.
(1) This is my short but brilliant new song.
(2) Here I’ve moved the beginnings and ends of the notes for playback (in Play Mode). My edit is rather silly, but at least it is clearly visible.
(3) The song exported to MusicXML and then imported back. You can see that all the changes in playback are lost.
I don’t know how laborious this would be for the Dorico team, but you could at least ask them for the option to export MusicXML with playback timestamps. If you import such a file back, the score might look bad, but for audio rendering purposes it would be the best option. Of course, if one uses MIDI-file for export, all playback changes are preserved.
Ричард ДеКоста испытывает определённые финансовые трудности, но продолжает работу над проектом. На Кикстартере можно поддержать проект, получив, если всё сложится хорошо, полную бессрочную лицензию и возможность пользоваться всеми будущими голосами за $250.
На данный момент отработан рендеринг на сервере для MIDI-файлов с текстом (Сиб и MuseScore уже умеют в такой экспорт, Дорико будет уметь в следующей версии). Язык пока только английский, но латынь и испанский на подходе. Сейчас началось бета-тестирование серверного рендеринга для MusicXML, более естественного формата для нотных редакторов. VST-версия позже. Как раз ради того, чтобы VST-версия состоялась, кикстартер и используется.
===============
Ниже мой последний комментарий по поводу MusicXML экспорта из Дорико (из Дискорда). Сорри, переводить обратно лень.
About the difference between MIDI and MusicXML export in Dorico.
Anyone who has not tried Dorico does not know that in Dorico, unlike other rapidly aging score editors, each note has two sets of timestamps, one for displaying the notes on the screen and one for playback. In most cases they are the same, but a composer/arranger can move the beginning or end of a note at any time to achieve greater expressiveness without spoiling the way the sheet music looks on the screen. For example, composers very often do not mark caesuras where they would occur most naturally for breathing. Dorico allows you to make a note shorter for playback without changing its representation in the score.
However, there is currently no option in Dorico to export MusicXML, taking the timestamps for playback. Look at the picture.
(1) This is my short but brilliant new song.
(2) Here I’ve moved the beginnings and ends of the notes for playback (in Play Mode). My edit is rather silly, but at least it is clearly visible.
(3) The song exported to MusicXML and then imported back. You can see that all the changes in playback are lost.
I don’t know how laborious this would be for the Dorico team, but you could at least ask them for the option to export MusicXML with playback timestamps. If you import such a file back, the score might look bad, but for audio rendering purposes it would be the best option. Of course, if one uses MIDI-file for export, all playback changes are preserved.
CantAI, кажется, идёт в сторону opensource-проекта, по экономическим причинам (однако альфа-тестирование VST-версии для MuseScore уже идёт). А поскольку все мы хотим русский язык, то кому-то рано или поздно придётся участвовать в его поддержке, американец сам не справится. Петь на русском языке машинки уже обучали, используя OpenUTAU for DiffSinger, но я не знаю, могли бы эти разработки помочь Ричарду ДеКосте или нет. Видео ниже — по следам этого русского обучения. Проект неживой, судя по всему (мёртвые ссылки в описании и т.п.), а куда копать дальше, я не умею сообразить.
В только что вышедшем Шестом Дорико MIDI-экспорт теперь включает экспорт подтекстовки (lyrics). Теперь возможен рендеринг вокальной музыки на CantAI-сервере без промежуточной доработки файла. Но дорикане пока не сделали необходимые изменения, чтобы в Дорико могла работать VST-версия CantAI. А тем временем в MuseScore Studio уже тестируется VST-версия. Голоса пока не менялись, всё те же отвратительно вибрирующие. Пока меня это не пугает, на данном этапе дорабатывается английское произношение и собственно VST-механизм, на большее у производителя просто не хватает ресурсов.
Автоматический перевод: «Посмотрите пошаговую демонстрацию рабочего процесса Cantai в MuseScore. В видео показано, как установить VST-плагин, назначить голоса Cantai на вокальные дорожки, отрендерить партитуру и вносить изменения в музыку в режиме реального времени. Будущие версии будут автоматически отслеживать изменения и рендерить по мере необходимости, а также улучшат управление файлами для удобного экспорта в другие аудиоприложения.»
Автоматический перевод: «Посмотрите пошаговую демонстрацию рабочего процесса Cantai в MuseScore. В видео показано, как установить VST-плагин, назначить голоса Cantai на вокальные дорожки, отрендерить партитуру и вносить изменения в музыку в режиме реального времени. Будущие версии будут автоматически отслеживать изменения и рендерить по мере необходимости, а также улучшат управление файлами для удобного экспорта в другие аудиоприложения.»
Вышло наконец то официальное обновление до 2.10 Из главного, на мой взгляд, это добавили, наконец то, звук переносимой ноты, как в мелодайне (хотя, тоже через одно место- звук только при перемещении ноты) и возможность копирования выделенных нот с помощью зажатой кнопки Alt. Есть также дублирование нот через cntrl+D, но я плохо представляю зачем оно такое нужно.. Для Протулз вроде бы тоже добавили поддержку ARA, но я в Риппере работаю, так что проверить не могу. Пишут, что появилась возможность отключить назойливые подсказки, и постоянные напоминания, что нужно сменить язык (для тех, кто пытался иностранными фонемами писать русский текст постоянно раньше выскакивало предупреждение, что, мол, не тот язык используешь-слов таких, мол, не бывает). Разметку сетки темпа сделали по человечески, и добавили кнопку отключения привязки к сетке.
С новым детектированием темпа пока не разобрался. Но, кажется, это позволяет автоматически определять переменный темп в разных частях композиции.. У меня вся музыка квадратная- мне за ненадобностью))
Остальное по мелочи... Но обновление крупное, ребята явно учли пожелания публики- советую внимательно приглядеться!
С новым детектированием темпа пока не разобрался. Но, кажется, это позволяет автоматически определять переменный темп в разных частях композиции.. У меня вся музыка квадратная- мне за ненадобностью))
Остальное по мелочи... Но обновление крупное, ребята явно учли пожелания публики- советую внимательно приглядеться!
CantAI, вокальный синтезатор, поющий прямо из нотных редакторов — начинается альфа-бета тестирование с программами Дорико и Сибелиус (ссылка на Дискорд), необходимые дополнения внесены в код обеих программ и в следующих апдейтах будут доступны всем. Наблюдаем.
Там у SynthV ещё два голоса вышли (Amara and Archie), но то не очень интересно.
Интереснее ещё одна демка с Natalie. Во-первых, это красиво (с). Во-вторых, это французский язык, вроде как не предусмотренный пока японо-писателями. В-третьих, автор кавера настолько щедр, что выложил файлы SVP для изучения всеми желающими (ссылка под видео).
Интереснее ещё одна демка с Natalie. Во-первых, это красиво (с). Во-вторых, это французский язык, вроде как не предусмотренный пока японо-писателями. В-третьих, автор кавера настолько щедр, что выложил файлы SVP для изучения всеми желающими (ссылка под видео).
SynthV 2.2.0 beta (от 25 ноября). За MusicXML импорт их можно даже поцеловать.
В стриме об использовании SynthV внутри Дорико (ссылку на стрим я уже давал в «оркестровых новостях») эту бету и пользуют.
В стриме об использовании SynthV внутри Дорико (ссылку на стрим я уже давал в «оркестровых новостях») эту бету и пользуют.
SynthV 2.2.0 beta 2
Дублинг — имитация ансамбля или хора, до 16-ти голосов на одну прописанную партию (если мощи компьютерной хватит).
Дублинг — имитация ансамбля или хора, до 16-ти голосов на одну прописанную партию (если мощи компьютерной хватит).
Это для диалектных произношений. Ну или если что-то не нравится в машинном произношении.
Для других языков (русского в т.ч.) настроек нет.
Последнее редактирование:
Может кому пригодится, сделал такого помощника для ChatGPT, для примерной прикидки топлайна пригождается:
Да нет волшебных фонем, чтобы Synth V по-русски без акцента пело, просто местами будет понятен текст, который имелся ввиду. А местами будет все равно непонятно.
просто вводите текст на русском, он выдает то, что нужно ввести в поле фонем для ноты в СинтV(не в поле текста!). Ну и плюс рекомендации и варианты, там есть выбор между английскими и испанскими фонемами. Поет все слова понятно, но с акцентом. Естественно нужно возиться с длиной и положением фонем по тайм лайну, иногда громкостью согласных, чтоб максимально приблизится к русскому произношению
Нет, все очень понятно, просто местами акцент сильнее, местами норм, зависит от конкретного слова. В общем впечатление, что поет англоязычный человек, который хорошо выучил русский, но произношение хромает)