过去一年我开发 AI 视频编辑器的收获

AIGC动态欢迎阅读

原标题：过去一年我开发 AI 视频编辑器的收获
关键字：元宇宙,模型,视频,小米,提示
文章来源：AI前线
内容字数：0字

内容摘要：

作者 | Kirk Kaiser 译者 | Sambodhi 策划 | 褚杏娟
去年，我在一个新岗位上仅工作 6 个月就被解雇了。
我离开了一家很棒的公司和老板，去冒险加入一家初创公司，但还没真正开始，一切就结束了。
我决定以此为契机，探索 LLM（大语言模型）、扩散模型以及越来越多的其他开放模型在视频领域中的新可能性。
多年前，我曾帮助打造了一个后来成为独角兽的生成式视频编辑#Launch_and_Early_years)，并从那时起就有了一些想要实现的想法。
在 2015 年，这些想法大多显得不切实际，但随着 LLM 和计算机视觉模型的进步，现在它们已经变得有实现的可能了。GPU 资源紧缺与本地优先、
多模态生成式人工智能
我最初专注于构建一个通过多模态人工智能改进的本地视频编辑器。它利用计算机视觉检测、提取和跟踪视频中的物体，并结合扩散模型为视频添加和动画化新物体。
5 年前，我曾使用 Mask-RCNN 每天制作视频草稿，尝试滑板视频的创作。
这些视频草稿让我在没有任何强烈预期的情况下，探索了人工智能辅助视频编辑这一媒介。我认为，开发一个工具来继续探索这项工作将会取得丰硕的成

原文链接：过去一年我开发 AI 视频编辑器的收获