Представлена новая нейросеть, способная менять стиль готовых видео
Runway, стартап в области генеративного ИИ, стоящий за проектом Stable Diffusion, представил свою последнюю инновацию — модель ИИ под названием Gen-1, которая способна преобразовывать существующие видео в новые, применяя любой стиль, заданный текстовой подсказкой или эталонным изображением. В демонстрационном ролике на своем сайте компания Runway показала, как ее программное обеспечение может изменить визуальный стиль существующих видеороликов и фильмов, например, превратить кадры людей на улице в пластилиновых кукол или стопку книг на столе в ночной городской пейзаж. Runway надеется, что Gen-1 произведет революцию в индустрии видеомонтажа, подобно тому, как Stable Diffusion изменил индустрию редактирования изображений.
Основанная в 2018 году компания Runway уже несколько лет разрабатывает программное обеспечение для редактирования видео на основе ИИ, которое используется целым рядом создателей контента, от Tik-Tok и YouTube до крупных кино- и телестудий. На самом деле, программное обеспечение Runway уже использовалось в «Позднем шоу со Стивеном Колбертом» и командой визуальных эффектов хита «Все и сразу» для создания определенных сцен.
В 2021 году компания Runway в сотрудничестве с исследователями из Мюнхенского университета создала первую версию модели Stable Diffusion. Прорывная модель привлекла внимание британского стартапа Stability AI, который оплатил вычислительные затраты, необходимые для обучения модели на большем наборе данных, что сделало Stable Diffusion глобальным явлением в 2022 году. С запуском Gen-1 Runway продолжает лидировать в области видеомонтажа на основе ИИ, расширяя границы возможного в мире визуального повествования.
