Нейросеть Reve работает примерно так, как мне хотелось бы, чтобы работала нейросеть, один из желаемых компонентов. Нейросеть раскладывает или референсную картинку или сгенерированную собой картинку на компоненты и позволяет эти компоненты редактировать отдельно.
Вот пара примеров:
Всё рассказано в ролике. Если кратко, то автор рекомендует в Nano Banana сгенерировать раскадровку из 9 кадров по промпту "create a sequence of 9 cinematic film stills that tell a short story. *put your story here*. It should be very cinematic with a shallow depth of field to create a film like style. Preserve the character's exact identity and likeness." (создайте последовательность из 9 кинематографических кадров, рассказывающих короткую историю. *разместите свою историю здесь *. Она должна быть очень кинематографичной, с небольшой глубиной резкости, чтобы создать стиль фильма. Сохраните точную идентичность и сходство с персонажем.)
А затем на основе этих девяти кадров уже генерировать видео.
Также в описании к видео есть шпаргалка на английском языке, как описать в промпте различные ракурсы и движения камеры.
Не знаю, кто придумал этот способ, но он явно неновый, и умельцы наделали кучу подобных роликов, в том числе, полностью нейросетевых. Но здесь, вроде, живой человек и есть дополнительная информация.
Несколько дней новостное пространство бурлит: компания Maxon сделала бесплатной свою программу Autograph.
Autograph - это аналог Adobe After Effects, поэтому многие комментаторы предсказывают если не закат, то заметное снижение влияния Adobe на рынке.
На YouTube уже выложены уроки по Autograph (на английском).
Дополнительный удар по Adobe, как будто, должна нанести ещё одна бесплатная программа - Cavalry, но мне показалось, что она слишком уж векторная, годится для анимации прыгающих кружков или графиков, но не более. Могу ошибаться.
Если вы решите поиграться с Autograph, обратите внимание, что вам нельзя просто скачать и установить программу. Вам сперва надо установить оболочку Maxon, зарегистрироваться, а потом уже через неё скачать Autograph. Иначе всё будет тормозить и выдавать сообщение, что невозможно получить лицензию.
Камера старая, но вы с ней ещё можете где-нибудь столкнуться. Ну и надо же о чём-то в блоге писать, чтобы мои дорогие читатели не скучали.
Итак, Rekam DVC-540 - старая дешёвая камера, забавной особенностью которой является то, что она базируется на CMOS сенсоре для мобильных телефонов.
А неприятная особенность состоит в том, что аккумулятор камеры - NP-60 - это абсолютно симметричный кирпичик, который вкладывается в камеру любой стороной. Т.е., если вы аккумулятор вынули, 50% вероятность, что вы вставите его неправильно. И второе: аккумулятор вставляется в камеру, если его раздует, его будет довольно сложно вытащить. Я с этим на работе столкнулся.
У камеры существует до сих пор продающийся родственник Rekam DVC-560, у которого аккумулятор со скруглённой стороной, т.е., вставить неправильно его невозможно, но он по-прежнему вставляется, т.е., если его раздует, его будет довольно сложно вытащить.
Возможно, авторы этих изделий не планировали, что они доживут до момента вздутия аккумуляторов и кто-то будет заниматься их заменой. Экологичный ответственный бизнес 👍
За базу я возьму Suno.
У нас есть окошко Lyrics (Слова), куда мы вставляем слова для нашей песни (или оставляем пустым, если планируем инструментальную мелодию). Также Suno может автоматически сочинить стихи, но стихи на русском у всех нейросетей получаются не очень хорошо.
Затем у нас есть окошко Styles (Стили), куда мы вписываем слова, описывающие желаемую мелодию. Раньше было ограничение на количество символов в окошке, сейчас его, кажется, нет. Ещё нельзя указывать названия групп и названий. Можно использовать другие нейросети (ChatGPT, DeepSeek), чтобы сгенерировать описания стилей групп.
Затем есть "дополнительные опции", которые со временем меняются.
Ещё есть окошко Song Title (Название песни) - это необязательно, но его лучше указывать, чтобы не запутаться, когда генераций будет много.
В результате, при некотором опыте мы получаем неплохие песни длиной до 5 минут. Можно пользоваться бесплатно, для чего даются 50 кредитов в день. 10 кредитов тратится на генерацию двух вариантов песни по одному промпту. Также бесплатно нам доступна одна модель, и ограничено использование некоторых инструментов.
Существует Udio, которая по интерфейсу похожа на Suno, но по результатам мне нравится гораздо меньше.
Нейросеть Gemini от Google (доступна далеко не во всех странах) превращается в комбайн - вы можете общаться с ней в чате, в этом же чате можете создавать картинку или музыку. Сейчас музыка ограничена 30 секундами. Кажется, эта опция подаётся как источник не защищённой авторскими правами музыки для видео. Музыка получается не очень (похожей на промпт), но вполне сойдет для звуковых подложек на видео.
Producer.ai - а это как раз чат, заточенный на создание музыки. Теоретически, вы можете прям в чате просить, что-то поправить в мелодии, практически, это (пока?) получается не очень хорошо.
В "продюсере" есть дополнительные инструменты, но у меня они почему-то не заработали.
Ограничения "продюсера" я не понял. Базово (если просто сгенерировать мелодию, не пытаясь дорабатывать) результат получается, на мой взгляд, не хуже, чем у Suno.
Как бы то ни было. Проблема первая - плохой контакт батареек. На коробке видны батарейки типа "Крона", которые обычно надеваются на контакты в устройстве. Здесь же в микрофонах плоские контактные площадки, а в крышке микрофона нет ни пружины, ни пенки, поэтому батарейка не прижимается к контактам, и микрофон не работает. А если батарейку прижимать рукой, то всё нормально.
Вторая проблема - база плохо ловит микрофоны, но прекрасно ловит радио, причём, несколько станций одновременно.
Модель старая, но встречается на "Авито" и даже в некоторых магазинах, ещё есть аналоги, которые выглядят точно также, но носят другую марку.
Подробная статья с описанием используемых нейросетей, промптов, этапов производства.
Также напомню вам о пособии по созданию промптов для создания видео.
FUJIFILM вдохновились успехом своей фотокамеры с мгновенной печатью и теперь выпустили видеокамеру FUJIFILM instax mini Evo Cinema, внешне стилизованную под 8мм кинокамеру.
Камера выглядит эффектно, но функционал её небогат - снимать вертикальное видео с разным разрешением и длиной до 15 секунд. Ручкой можно выбрать визуальные и звуковые эффекты, имитирующие разные десятилетия.
Как я понял, ролики загружаются на сервера FUJIFILM, а камера позволяет распечатать фотографию с qr-кодом, который два года даёт доступ к загруженным роликам, потом ролики удаляются.
TouchDesigner, или TD, — программа для работы с мультимедийным контентом. Она позволяет создавать интерактивные инсталляции и генеративный дизайн.
Уникальность TD заключается в том, что мы можем настраивать взаимодействие между различными видами данных: управлять звуком, параметрами видео. Видеоданные могут трансформироваться в цифровые протоколы, управляющие световыми приборами, кинетическими лебедками, роботами, лазерами и всем, что вы только можете представить, — и даже больше. Главный плюс программы — работа в реальном времени. То есть вам не нужно ждать рендера, чтобы получить результат, — все изменения происходят в программе мгновенно.
Читайте полную статью про TouchDesigner.
Статья о родственных продуктах - Что выбрать: TouchDesigner, Notch или Ventuz?
Видеоролики есть и на Ютубе и на ВКвидео (где есть ролик даже 10-летней давности).
Я уже писал про yt-dlp, утилиту для командной строки для скачивания видео из интернета. Поскольку пользоваться командной строкой не всем привычно, добрые люди делают для таких утилит графические надстройки.
Всё прекрасно работает.
Но обнаружился нюанс в работе yt-dlp (и, соответственно, программ на его базе). Так как скачивальщик подключается незалогиненным, он не может скачать ролики, на которые YouTube повесил значок "18+". Для решения этой проблемы у yt-dlp есть инструкция по экспорту куки из браузера. Я смог экспортировать куки в текстовый файл, но не смог подключить этот файл к yt-dlp. Но к Open Video Downloader вы, кажется, подключить файл с куки не сможете, потому что это делается из командной строки.
Для скачивания таких файлов проще найти онлайн-скачивальщик, но конкретно советовать не буду, потому что они сегодня работают, завтра не работают, например, savefrom.net работает, но через пень-колоду.
Текст взят из пособия для нейросети Wan 2.2, но в общем подойдёт для любой нейросети.
Промпты используются для описания содержания и движения в видео, что является ключевым фактором при управлении визуальными эффектами. Чем полнее, точнее и детализированнее промпт, тем выше качество создаваемого видео и тем больше оно соответствует вашим ожиданиям. Чтобы помочь вам быстро приступить к работе, мы подготовили три простых рецепта, адаптированных к различным потребностям использования:
Базовая формула. Для новых пользователей, которые впервые пробуют видео с использованием искусственного интеллекта или ищут творческого вдохновения: простые, открытые промпты помогут создать более креативное видео.
Промпт = Описание объекта + Описание сцены + Описание движения
Усовершенствованная формула. Для пользователей, имеющих некоторый опыт в создании видео с использованием искусственного интеллекта: добавление более насыщенных и подробных описаний к базовой формуле повышает качество видео, его живость и повествовательность.
Промпт = Описание объекта + Описание сцены + Описание движения + Эстетический контроль + Стилизация
Формула преобразования изображения в видео. (если у вас есть картинка, которую вы "оживляете") Исходное изображение уже определяет тему, сцену и стиль съемки, поэтому в промпте следует сосредоточить внимание на описании желаемого движения и перемещении камеры.
Промпт = Описание движения + Движение камеры
Как ни крути, иностранные нейросети лучше понимают английский язык, поэтому осваивайте. Либо, можно писать промпт по-русски, а потом автоматически переводить на английский.
Документ с промптами довольно большой, поэтому ознакомьтесь сами.
Статья о том, как в России в Омске делали клип со Снуп Доггом для рекламы телеграма. Клип делался с помощью нейросетей. В статье говорится, что над клипом три дня работали в основном 5 человек:
В статье рассказывается, какие конкретно нейросети были использованы для разных задач.
Также говорится, что всё ещё нельзя обходиться без ручной обработки традиционными средствами типа Фотошопа и After Effects.
Когда работаешь с нейросетями, «восхищение и отчаяние ходят бок о бок». Но чем больше экспериментируешь, тем быстрее добиваешься нужного результата, говорят сооснователи [студии Mamontov Production]. Сейчас на одну хорошую видеогенерацию у команды уходит в среднем 10-15 попыток и, если это Veo 3, то примерно по 700 рублей на каждую.
Читайте также: Как пять нейросетей заменяют целую студию людей.
Также ножки двигаются вокруг крепления почти на 180 градусов, но уверенно фиксируются далеко не во всех положениях.
Голова плавно двигается. Надёжно фиксируется.
К сожалению, всё это абсолютный нонейм (и при этом качественный). Есть только ссылка на taobao, там указан, вроде бы, бренд Westage, но найти по этому бренду аналогичные штативы и головы невозможно.
