| Предыдущая глава |
↓ Содержание ↓
↑ Свернуть ↑
| Следующая глава |
В итоге выбран процесс такой: вначале выдаётся образец мелодии (основного трека), который загружается в сервис типа Suno, и затем "продолжается" (наращивается).
Процесс аналогичен использованию LoRA в случае картинок, с единственной тренировочной мелодией: сервис очень точно и узнаваемо "продолжает" трек, поддерживая его ритмическую картину и используя отдельные музыкальные фразы, при этом добавляет уже "от себя".
Правда, чтобы основа стала устойчивой, сервису нужен большой фрагмент (в примерах ниже — около 60 секунд). Впрочем, никто не мешает затем отсечь вступительный эталонный фрагмент в редакторе и сделать таким образом трек желательной структуры.
Несколько занудно, но в принципе работает. Образцы ниже.
Исходником служит фрагмент, иллюстрирующий сцену испытания искина, когда тот должен по нескольким примитивным звукам (треск зубьев расчёски, стук по большой бочке и т.д.) написать мало-мальски пригодную для танцев мелодию. Можно ли под перечисленное ниже танцевать — думаю, можно.
На краю крыши
Your browser does not support the audio tag.
На краю крыши (виолончель)
Your browser does not support the audio tag.
На краю крыши (дабстеп)
Your browser does not support the audio tag.
На краю крыши (фанк)
Your browser does not support the audio tag.
На краю крыши (металл)
Your browser does not support the audio tag.
На краю крыши (оркестр)
Your browser does not support the audio tag.
На краю крыши (рок)
Your browser does not support the audio tag.
На краю крыши (рок-опера)
Your browser does not support the audio tag.
На краю крыши (техно)
Your browser does not support the audio tag.
Котопятница-угадайка (2024-07-26)
Какие из этих кошек настоящие? Ответы ниже.
1
2
3
4 (синтез)
5 (синтез)
6
7
Конечно, поиск в Сети этих картинок будет считаться неспортивным поведением.
Ответ: синтетическими являются изображения номер 4 и 5, остальные — фото подлинных кошек.
===== Перейти к комментариям
Песенник — Александра Ковалевская (2024-07-24)
Коллекция озвучки стихотворений Александры Ковалевской находится здесь.
Хромой король (2024-07-16)
Вначале — одно из самых известных исполнений (Эдуард Хиль). Увы, там только три куплета.
Эдуард Хиль — Хромой король
Your browser does not support the audio tag.
Железный шлем, деревянный костыль,
Король с войны возвращался домой.
Солдаты пели, глотая пыль,
И пел с ними вместе король хромой.
Троянский бархат, немурский шёлк — (*)
На башне ждала королева, и вот
Платком она машет, завидев полк,
Она смеётся, она поёт.
Рваная обувь, а в шляпе цветок,
Плясал на площади люд простой...
Он тоже пел, он молчать не мог
В такую минуту и в день такой.
Бой барабанный, знамён карнавал -
Король с войны возвратился домой.
Войну проиграл, полноги потерял,
Но рад был до слёз, что остался живой.
— — — — — — — — — -
* — Итог обсуждения в SU.KSP:
— Ошибка перевода. Должно быть
"...Труанский бархат, намюрский шелк..."
Бархат изготовленный в городе Труане (Troyes)
Шелк изготовлен в городе Намюре — (Бельгия)
Ну и то, что выдал искин.
Хромой король (рок)
Your browser does not support the audio tag.
Хромой король (поп-опера)
Your browser does not support the audio tag.
Хромой король (барды)
Your browser does not support the audio tag.
Хромой король (кафе)
Your browser does not support the audio tag.
Хромой король (металл)
Your browser does not support the audio tag.
Хромой король (оперетта)
Your browser does not support the audio tag.
Хромой король (панк)
Your browser does not support the audio tag.
NB: я в курсе, что во втором и третьем вариантах удвоен второй куплет ("галлюцинация" искина).
===== Перейти к комментариям
Картинка и видео (2024-07-15)
К "магии" получения картинки по описанию многие уже привыкли.
К "магии" получения видео по картинке ещё только предстоит.
Обратите внимание, как "электронный режиссёр" достраивает появляющиеся подробности интерьера лабиринта.
Ваш браузер не поддерживает просмотра встроенного видео, но вы можете скачать его и просмотреть в любом привычном вам проигрывателе.
===== Перейти к комментариям
Веверлеи (2024-07-14)
Что ж, обещал варианты исполнения известной песни про Веверлея, вот они.
Слова:
Пошёл купаться Веверлей,
Оставив дома Доротею,
С собою пару пузырей
Берёт он, плавать не умея.
Нырнул он, как он только смог,
Нырнул он прямо с головою,
Но голова тяжеле ног,
Она осталась под водою.
Жена, узнав про ту беду,
Удостовериться хотела
Но ноги милого в пруду
Она узрев, окаменела.
Прошли года, и пруд заглох,
И поросли травой аллеи,
Но всё торчит там пара ног
И остов бедной Доротеи.
Веверлей (поп)
Your browser does not support the audio tag.
Веверлей (кафе)
Your browser does not support the audio tag.
Веверлей (рок)
Your browser does not support the audio tag.
===== Перейти к комментариям
Мастеринг: Time (2024-07-12)
Что ж, теперь записью и сведением трека занимаются "специально обученные подпрограммы", и оставался только один шаг, мастеринг.
Что это такое, вы легко найдёте на просторах Сети. Если что, это приведение трека в оптимальное с точки зрения звучания состояние.
Ну и два примера: трек до мастеринга и после.
Time (Viona Zeth), до мастеринга
Your browser does not support the audio tag.
Time (Viona Zeth), после мастеринга
Your browser does not support the audio tag.
Пошёл подвергать этой процедуре остальные ранее скомпонованные треки. Которые не в мусор.
===== Перейти к комментариям
Фонограммы: breaking (2024-07-08)
Итак, это случилось: минутная заминка, и я не смог найти адекватного короткого перевода основного слова этой композиции, "breaking" (to break: ломаться, распадаться, делать паузу и ещё много значений)
В общем, нужна была не очень сложная, прилипчивая танцевальная композиция. Вам судить, насколько это удалось.
Дополнение. Два варианта композиции.
Breaking (Joey)
Your browser does not support the audio tag.
Breaking (Martin)
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограммы: таинственный лес (2024-07-06)
В классику искин тоже может. При этом структурно пьесы вполне походят на то, что ожидается.
То, что нужно для настройки на рабочий лад утром в субботу.
Романтическая фуга
Your browser does not support the audio tag.
Sonata Della Foresta Mistica
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограммы: прочь! (2024-07-03)
Пока я пытаюсь сделать что-то, похожее на блатняк, захотелось чего-нибудь незатейливого и бодро-танцевального.
Короче. В этот дождливый сонный день — немного бодрого металла. На сон грядущий.
Прочь!
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограммы: напиши мне письмо (2024-07-02)
Спрашивали — отвечаем. Suno умеет писать песни по русскому тексту, ниже две обработки моих давешних стихотворений.
Как обойти ошибку в последней строке "...письма", пока не очень понимаю, спрошу тех.поддержку. Искин не "понимает", где именно по контексту должно быть ударение в слове "стоит".
Напиши мне письмо
Your browser does not support the audio tag.
Нарисованные люди
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограмма: яркий новый день (2024-07-01)
Немного бодрящего регги этим жарким утром.
Феникс плохого не посоветует.
Яркий новый день
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограмма: иди на мой голос (2024-06-27)
Эпизод в повествовании, где протагонисты оказываются в постоянно меняющемся лабиринте, и выбраться можно только следуя за голосом друг друга — а единственное, что удерживает по эту сторону рассудка — стук собственного сердца.
Иди на мой голос
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограмма: восхождение (2024-06-26)
Едем (идём) дальше. "Восхождение" — основная серия эпизодов о начале путешествия — как герои выбираются из ставшей смертельно опасной библиотеки и бегут прочь, поднимаясь всё выше, за облака — буквально.
Восхождение
Your browser does not support the audio tag.
===== Перейти к комментариям
Фонограмма: призраки ждут нас (2024-06-25)
На случай, если кто-нибудь интересовался, что нонче могут нейросети по части музыки, вот пример. Музыкальное сопровождение к пишущейся книге; трек 4, "Призраки ждут нас", иллюстрация к эпизоду бегства из библиотеки.
Призраки ждут нас
Your browser does not support the audio tag.
===== Перейти к комментариям
SD3 (2024-06-15)
Меж тем Stability.AI выставило во всеобщий доступ файлы весов ("модели") Medium третьей версии SD.
Мой любимый графический интерфейс от AUTOMATIC1111 пока не поддерживает, пришлось в темпе научиться пользоваться ComfyUI.
Принцесса
Балерина
Чёрная роза
Кот
Вишнёвое дерево
Часовое королевство
Полярное сияние
В библиотеке
Лунная ночь
Крестьянка
Кролик
Берег моря
Потому что!
Плачущий ангел
Качество деталей местами очень приятно радует (обратите внимание на капельки росы на розе и столе, а также на волны в море).
Добиться вменяемой человеческой фигуры в случае девушки у книжных полок оказалось дико сложно: только одна (!) из примерно полусотни попыток дала что-то не очень страхолюдное.
А вот кота, принцессу и балерину, внезапно, выдало без особых сложностей.
Засада есть теперь и в коммерческом использовании. Теперь под это требуется платная лицензия ($20 в месяц; как платить из России — не очень въехал, но это не самое большое затруднение). Самое большое — что если вы делаете, например, производную работу (модель на базе основной модели SD3), то после отказа от коммерческой лицензии, по лицензионному соглашению, все такие производные работы вы должны удалить и картинок с них не строить.
В общем, создатели SD отчётливо движутся к максимальной коммерсализации своего продукта, теперь можно делать ставки — начиная с какой именно версии они закроют код (или существенную его часть).
По понятной причине, производных моделей для SD3 будет на порядок-другой меньше, чем для предыдущих его версий. Увы.
Тем не менее ждём, предвкушаем и надеемся.
===== Перейти к комментариям
Кот Кузьма (2024-05-21)
Помнится, написано было лимериков про кота Кузьму порядком, в рабочих записях их за сотню.
Теперь, при помощи электронного художника, их вполне можно проиллюстрировать.
Кот Кузьма, кочегар из Гааги,
Слыл гребцом небывалой отваги:
Он Ла-Манш, говорят,
Раз пятнадцать подряд
Пересёк на плоту из бумаги.
===== Перейти к комментариям
Ложкин, как его нет (2024-05-07)
Случилось прекрасное: некая добрая душа натренировала корректировочную модель (LoRA) на работах Васи Ложкина. Так что теперь можно развлекаться.
Пой, гитара!
Сезон открыт
Начинаем зарядку!
Вечер трудного дня
Согласитесь, что-то в этом есть.
===== Перейти к комментариям
Чудо света (2024-04-25)
Уже упоминавшееся заблуждение о том, что описание для генеративных моделей воспринимается программой примерно так же, как автором описания (обычно человеком) ведёт и к другим достаточно интересным находкам.
Оптические иллюзии и "смешение сцен" — достаточно сложная категория изображений. Сложная в том смысле, что вряд ли получится описать её словами и получить от электронного художника именно то, что заказывал. Простой пример:
Чудо света
Обратите внимание — там, где стоит человек, вероятнее всего сухо, но вот прямо над ним уже толща воды. Плюс расположение теней, плюс "переливающийся в воду" луч света. Всё верно, это тоже галлюцинация модели "HelloWorld", а сцена описывается как extremely detailed, oil painting, "wonder of the world". Т.е., "чудо света". Некоторые из таких галлюцинаций очень, я бы сказал, пугающие.
Поэтому стало привычкой время от времени запускать длинный прогон (обычно на ночь) нескольких тысяч галлюцинаций на проверенные опытом описания, а поутру быстренько пролистывать это всё. И всегда там можно найти что-то любопытное, что нарочно не придумаешь.v
Вообще достаточно занятно осваивать технологии, которые не реже раза в год меняются так основательно, что сама мысль сопровождать это учебником или хотя бы рабочими записями лишена смысла: всё устаревает не то чтобы в момент написания, но очень вскоре.
Поэтому правило здесь примерно такое же, как при наблюдении за цветущей "ночной красавицей" (кактус, цветок которого к утру следующего дня уже увядает): смотри, восхищайся и пользуйся, пока возможно. Завтра будет уже что-то совсем другое. Ну, почти совсем.
===== Перейти к комментариям
Последние дни (2024-04-19)
Фраза "last days" (последние дни) также оказалась плодотворной в смысле галлюцинаций.
Занятно, что на портретную ориентацию двигатель выдал огромное количество очень интересных (и вовсе не жутких) портретов, преимущественно женских.
На ландшафтную... Там и собственно ландшафты, и, неожиданно, большое количество т.н. "body horror" — ужасы, опирающиеся на сцены жутких изменений тела и всевозможные уродства. Кто видел "The Thing" Карпентера, тот поймёт, о чём речь.
50
55
65
83
90
101
107
Но бывает и другое, и тоже не редкое, примеры выше.
===== Перейти к комментариям
Галлюцинации (2024-04-14)
Предыдущие опыты с "ультракороткими" описаниями дали интересные результаты. Обозначился ряд моделей, которые, если можно так сказать, очень эффектно галлюцинируют. А именно, выдают самые разные по направленности картинки в ответ на короткий запрос.
Дело, конечно, не в краткости определения, а в том, как тренировалась модель. Неожиданный всплеск "галлюцинаций" в ответ на описание "sound of silence", "звук тишины", объясняется именно этим: в рамках свободы творчества (коэффициента CFG) модель находит более или менее весомые цепочки ассоциаций, которые и разрастаются в очень странные картинки.
Чемпионы по части галлюцинирования, среди моделей на CivitAI:
LEOSAM's Hello World
Copax Art Brush
ICBINP ("I can't believe it's not photo" — "Поверить не могу, что это не фото")
Lah Mysterious
Epic Fantasy Vision
Составлять списки моделей в данном случае дело неблагодарное (очень уж быстро меняется ситуация в этой отрасли — SD 3 уже не за горами), но упомянутые модели с очень живым воображением также входят в список тех, что я отобрал для работы (куда входят также Proteus RunDiffusion, Crystal Clear Lightning, Cinematix, Lightning Bloom, Real Good Fast Pass, Realism from Hades, Real Vis, WLOP Style и Zavy Chroma, всего изучено 50+ моделей).
| Предыдущая глава |
↓ Содержание ↓
↑ Свернуть ↑
| Следующая глава |
