从8月份开始,我就在各种场合表达过,AI视频现在最痛苦的点,是控制性极差。Gen2的语义理解本来就差,还几乎没有任何可控性,只有那几个镜头控制,剩下全靠roll。但是你roll的,全是白花花的银子啊...
所以AI视频,急需类似AI绘画中的ControlNET类似的功能,增强可控性。而这次更新的运动笔刷,就是基于此之下的产物,只不过就我看来,目前在“可控”一词上,还是个半成品,真正可用级别的控制,我认为应该是基于运动笔刷的轨迹控制。
而现在Gen2的运动笔刷,还不能够控制运动轨迹,只能框选部分物体,做上下左右以及摄像机的拉近推远运动,复杂的还是不太行。
所以我说,还是目前我心中的可控性的半成品。但是有比没有好,现在已经是AI视频可控进化的一大步了。
打开Runway,可以看到页面上已经多了一个Montion Brush,这就是运动笔刷。