足球尤物 AI 视频巨头重磅更新！教导词皆无须长途写了，从未有过这么的视频创作方式

发布日期：2024-11-29 12:16    点击次数：77

AI 视频，还能往哪个办法卷？Luma AI 的谜底有些卓尔不群。敌手还在练一招一式，它却像风清扬传授独孤九剑足球尤物，认真纯真变通，如落魄不羁，苟且所之。

Luma AI 大略不如可灵、Runway 知名，但论实力也在第一梯队，它的视频模子叫作 Dream Machine，本年 6 月发布，最近进行了重磅升级，是推分娩物以来声威最大的一次。

其中包括两项更新，一是发布我方的图像模子 Luma Photon，将翰墨、图像、视频一锅端；二是打造了生成 AI 视频的全新责任流，咱们可以像和 ChatGPT 聊天一样，让 AI 生成视频，无须对教导词精雕细刻。

对于生成视频这件事，Dream Machine 首创了一种很新的方式。

指路https://dream-machine.lumalabs.ai/

聊着聊着，就把视频给生成了

绽开 Dream Machine，咱们先看到的是「Board」，可以将它清爽为无穷的创意画布，在这里，咱们使用天然谈话，解放地生成图像或者视频。

初始一块 Board，我的教导词写得十分浮浅：「创建一个日式悬疑少年漫画的变装。」

AI 扩写了我的教导词，一次生成了 4 张图片，然则不行，年代阔别。

不首要，再在对话框输入一句，「放在当代布景」。

AI 暗示懂了，又生成了 4 张图片，右上这张孤身走暗巷，仍是接近我想要的嗅觉了，但仍然不够，我想要他抬来源，清楚五官。

不难，连续微调，忘掉复杂的教导词，和 AI 打直球就可以。

右下这张可以，天然形象幼态了点。接下来，我想让 AI 生成一个视频，主角在统一条胡同里从白昼走到暮夜。

Dream Machine 生成视频的首尾帧功能，即是为这种需求准备的——咱们挑好头尾的两张图片，让 AI 补足中间的流程。

那么，咱们只需基于舒畅的图片，让 AI 生成几张白昼场景的，调换方式照旧一样的浮浅豪爽。最终采用的两张图片，细大要有落差，但同框也不违和。

万事俱备，只等生成视频，AI 过渡得还算天然。

看到这里，你应该解析 Dream Machine 和其他视频器具的区别了。

其他视频器具，络续是给你一个填入教导词的文本框，然后让你竖立运镜、时长等参数。竖立一次，生成一次。

但 Dream Machine 的界面，看起来十分像和聊天机器东谈主交互，底部是输入框，文生图、图生图、图生视频、文生视频，皆可以在这里进行。

专科创作家可以连续写传统的教导词，但咱们也领有了「讲东谈主话」的权益，压力给到 AI，Dream Machine 能够清爽荆棘文，帮咱们完善教导词，咱们可以从一个十分粗略的想法初始，和它边聊边改边优化。

又因为 Dream Machine 是无穷画布情势的足球尤物，咱们可能在一个智商反复生成，素材皆会保留住来，不会彼此袒护。

咱们的念念维，不会局限在一段教导词、一个视频，而是像水一样流淌，更多的想法，可能就在这个流程里产生了。

更可控的图片，更可控的视频

性爱经历

Dream Machine 的全新责任流就像大树的骨干，其中一些好玩且实用的功能则像枝叶，井水不犯河水，才气枝繁叶茂。

起到要道作用的，即是 Dream Machine 最新发布的图像模子 Luma Photon。

图片若何生成得更相宜咱们的审好意思？Dream Machine 赈济立场参考和变装参考功能。

先说立场参考，咱们可以导入我方的图片，AI 会将立场融入到创作中。官方给出了一个例子：按蒙德里安立场，生成小鸟版的《戴珍珠耳饰的青娥》。

按这个念念路实操一下，基于男性阅览的形象，参考梵高《星月夜》的立场，生成女性阅览。

二次元遇上后印象派，化学反馈很奇妙。

变装参考功能，则可以通过一张图片，就结束变装的一致性，让这个变装出当今更多的图片和视频里。

马斯克是行走的素材库，这么的例子太没挑战性了，我决定让甄嬛瞬移到哈利波特的全国，看场景变了之后，她还能不可气场两米八。

纵脱有些不好评价，看得出来是甄嬛的样子，但娘娘的长相入乡顺俗，五官尤其眼睛，变得更像泰西东谈主了。

其实，不另外找图片参考，Dream Machine 也可以让图片、视频不泯然于世东谈主，这时辰就要用到「头脑风暴」功能，它会字据你生成的图片，保举一些艺术家的立场。

就像甄嬛进霍格沃茨这张，咱们可以用吉卜力责任室立场二创。

不仅如斯，教导词里的一些要道词，被框选了起来，能用下拉的选项替换，Dream Machine 称之为「成见药丸」，咱们无须我方手写教导词，一键更换艺术立场，或者画面元素。

把「吉卜力」换成「新海诚」，把「独角兽」换成「龙」，不外点击几下的功夫。

Luma Photon 模子，基于 Luma 的通用 Transformer 架构构建。通过开荒我方的图像模子，Luma AI 可以减少对 Midjourney 等外部图像模子的依赖，同期也能不停文生视频不踏实的问题。

天然，视频是成本行，镜头通顺这种可控性功能，Dream Machine 也少不了。

紫禁城的甄嬛，和霍格沃茨的甄嬛，能不可结束丝滑的转场呢？用推拉镜头，画面有动感，东谈主物莫得严重的变形，可以打个 80 分。

视觉的念念维，讲故事的方式

巧的是，前两天 Runway 也官宣了我方的图像生成模子 Frame，和 Luma 更新是统一个晚上，看演示就知谈十分肃穆审好意思，目下正渐渐向 Gen-3 Alpha 开放履历。

▲ Runway Frame

图片的生成质地、好意思学高度，以及视觉立场的一致性和可控性，越来越被视觉模子怜爱了。

这对创作家来说是善事，当咱们用 AI 进行平面策画、变装设定时，其实即是在生成一个私有的全国，讲一个私有的故事。

Runway 的 CEO Cristóbal Valenzuela 认为，Runway 不是一家 AI 公司，而是一家媒体和文娱公司，AI 公司的时期仍是罢昭着。

他不是在唱衰 AI，偶合违抗，他认为 AI 是一种基础设施，果真的创新不在于工夫自己，而在于它所结束的东西：新的抒发情势、推崇故事的新方式、连续东谈主类体验的新设施。这和 Luma 的进化办法一辞同轨。

此次更新之后，Luma AI 首席践诺官兼纠合创始东谈主 Amit Jain，给 Dream Machine 下了一个很意旨的界说——视觉念念维相助伙伴。

成见有些轮廓，他的兴味其实即是，让生成图片、视频这么的视觉创作，像聊天一样浮浅、直不雅。

交互的方式，影响着咱们念念考的方式。画布式的责任流，能将脑洞可视化，记载总共的创作流程和纵脱，呈现生成视频的完好念念路。

无穷画布络续在图像模子较为常见，比如 Recraft 和 Ideogram 的 Canvas。Dream Machine 的画布愈加规整，一样教导词生成的素材和变体横向陈列，不同的则竖向陈列。

边聊边生成边优化的流程，会让东谈主以为，一个沉寂的小全国仿佛在画布里出生。

先让 Dream Machine 用超写实电影 CG 立场，创造一个工业废土布景游戏的主角。

然后用环绕镜头，让主角动起来，并塑造环境的空间感。

接着，咱们可以再和 AI 聊，让 AI 连续生成废土全国不雅里室内室外的多样场景，让 AI 苛刻咱们若何塑造得更有末日气味。

某种进程上，这个画布，即是咱们个东谈主故事的设定集。

天然，Luma AI 的 bug 也许多，包括但不限于，用一张图片结束变装一致性，后果并不睬想；积分如活水，图片和视频照旧要反复抽卡；图片模子可以生成准确的英文，但汉文不行……

但兴味传达到位了——少谈参数，以交互为起点，构建一个 AI 创作器具。

更好的视频模子，不仅仅有更快的生成速率、更可控的镜头通顺、更私有的好意思学，它应该也提供更好的讲故事的方式，让翰墨、图像、视频皆行动抒发想法的器具。

Dream Machine，造梦机器。

只管去创作吧，如同 Luma AI 的这句话：「不需要写复杂的教导词，问就好了。」改日 AI 留给咱们的问题，不再对于工夫，而是对于咱们用它构建什么。