Вот как раз уровень эмпатии, интонирование — это делает машина, у меня нет над этим контроля. Я просто не ленюсь запустить много раз и выбираю лучший вариант.
И это потрясающе красиво! Хотя русский романс действует сильнее из-за связки слов и музыки.
Как машина сочиняет музыку — я еще могу понять, музыка — это математика, но как она выбирает интонации — по аналогии с уже существующими романсами? Надо уточнить у chatGPT))
Я бы предположил, что разбивают слова на фонемы. У каждой фонемы есть сотня вариантов произношения. У каждого из вариантов есть эмоциональный контекст. Фонемы, конечно же, можно комбинировать с разными весами, как вектора.
Голос человека это набор фонем. Таким образом, если взять десять человеческих голосов (сиречь, наборов фонем) с разными весами, то из них можно построить новый, абсолютно уникальный голос.
Машина анализирует текст, выбирает веса эмоционального контекста. Потом строит новый голос, и всё.
Действительно хорошо получилось. Голос похож на Лизу Штрамбанд. Я даже подумала вначале, что это она за кадром поёт. Но зная тебя, быстро поняла, в чём дело. ) Удивительно на самом деле.
![[identity profile]](https://www.dreamwidth.org/img/silk/identity/openid.png){kind=small}
![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png)
branchandroot
no subject
Date: 2025-06-12 06:12 am (UTC)А кто поет?
no subject
Date: 2025-06-12 06:50 am (UTC)no subject
Date: 2025-06-12 07:47 am (UTC)Suno?
no subject
Date: 2025-06-12 08:03 am (UTC)Да.
no subject
Date: 2025-06-12 07:46 am (UTC)Это ИИ? Невероятно! Я думала, дочь Елены Камбуровой) Просто страшно делается.
no subject
Date: 2025-06-12 08:06 am (UTC)Для такого качества нужно поиграться со стилями, запустить 40-50 раз, выбрать лучший вариант, иногда подправить в редакторе. Но результат того стоит.
no subject
Date: 2025-06-12 08:16 am (UTC)А, так здесь много Вашей работы! Потому что такой уровень эмпатии, интонирование — это что-то запредельное для машины. Спасибо!
no subject
Date: 2025-06-12 08:24 am (UTC)Вот как раз уровень эмпатии, интонирование — это делает машина, у меня нет над этим контроля. Я просто не ленюсь запустить много раз и выбираю лучший вариант.
Иногда получается неплохо.
no subject
Date: 2025-06-12 08:36 am (UTC)И это потрясающе красиво! Хотя русский романс действует сильнее из-за связки слов и музыки.
Как машина сочиняет музыку — я еще могу понять, музыка — это математика, но как она выбирает интонации — по аналогии с уже существующими романсами? Надо уточнить у chatGPT))
no subject
Date: 2025-06-12 09:10 am (UTC)Я бы предположил, что разбивают слова на фонемы. У каждой фонемы есть сотня вариантов произношения. У каждого из вариантов есть эмоциональный контекст. Фонемы, конечно же, можно комбинировать с разными весами, как вектора.
Голос человека это набор фонем. Таким образом, если взять десять человеческих голосов (сиречь, наборов фонем) с разными весами, то из них можно построить новый, абсолютно уникальный голос.
Машина анализирует текст, выбирает веса эмоционального контекста. Потом строит новый голос, и всё.
0.5 * грустный + 0.4 * задумчивый + 0.1 * надрывный
no subject
Date: 2025-06-12 09:21 am (UTC)"И всё". Это потрясающе! И обескураживает. Спасибо за объяснение!
no subject
Date: 2025-06-12 09:58 am (UTC)Ты можешь подробнее объяснить какой именно доболнительный инпут помимо текста?
no subject
Date: 2025-06-12 10:15 am (UTC)Набор стилей, и уровень от 0 до 100 двух параметров: Weirdness и Style Influence.
К стилям надо попривыкнуть. К примеру, здесь: spoken word, harpsichord, dream pop.
spoken word связан с эмоциями, harpsichord похож на гитару, но лучше, dream pop повлияет на задумчивость и медленный ритм
no subject
Date: 2025-06-12 02:08 pm (UTC)Голос похож на Лизу Штрамбанд. Я даже подумала вначале, что это она за кадром поёт.
Но зная тебя, быстро поняла, в чём дело. )
Удивительно на самом деле.
голос хорошо получился
Date: 2025-06-13 11:48 pm (UTC)https://www.youtube.com/watch?v=LOIze6wdjq8
no subject
Date: 2025-06-15 07:14 pm (UTC)