在一个由新手摄影师和摄像师组成的世界里,他们通过自己的智能手机和手持设备捕捉海量的内容,冠蓝在线测速因此需要一种智能的、易于使用的工具来自动创建电影和视频蒙太奇。到目前为止,许多高质量的视频仍然依赖于专业的基于框架的编辑工具来操作原始素材,并生成具有迷人的故事情节的连贯视频。
来自中国清华北大、美国哈佛大学和以色列国际数据公司(IDC)的一个全球计算机科学家团队开发了“Write-A-Video”,这是一种从主题文本生成视频的新工具。使用文字和文本编辑,该工具自动确定从存储库中选择哪些场景或镜头来演示所需的故事情节。该工具使新手用户以简单和用户友好的方式制作高质量的视频蒙太奇,不需要专业的视频制作和编辑技能。
该团队将于11月17日至20日在澳大利亚布里斯班举行的ACM SIGGRAPH亚洲展上展示他们的成果。SIGGRAPH Asia已经成立12年,吸引了来自世界各地计算机图形、动画、交互、游戏和新兴技术领域最受尊敬的技术和创意人才。
虽然现有的视频编辑工具仍然需要视频处理和编辑方面的知识,但研究人员的新方法允许新手创建更自然地讲述故事的视频。研究人员说,Write-A-Video允许用户通过简单地编辑视频附带的文本来创建视频蒙太奇。例如,增加或删除文本,移动句子,转换为视频编辑操作,如找到相应的镜头,剪切和重新安排镜头,监冠测速并创建一个最终的视频蒙太奇结果。
IDC Herzliya的Efi Arazi计算机科学学院院长Ariel Shamir教授说:“Write-A-Video利用了当前在自动视频理解方面的进步和独特的用户界面,使视频创作更加自然和简单。”“使用我们的工具,用户主要以文本编辑的形式提供输入。该工具会从视频资源库中自动搜索语义匹配的候选镜头,然后使用一种优化方法,通过自动剪切和重新排序镜头来组合视频蒙太奇。”
来自北京航空航天大学的王淼博士解释说:“Write-A-Video还允许用户使用电影习语来探索每个场景的视觉风格,例如,产生更快或更慢的电影节奏,更少或更多的内容移动,等等。”
当从视频存储库中选择候选镜头时,该方法还考虑了镜头的美学吸引力,选择那些理想的灯光、聚焦良好、不模糊或不稳定的镜头。清华大学的胡世民教授说:“用户可以在任何时候渲染电影,并在伴随的旁白中预览视频蒙太奇效果。”
该团队的研究表明,智能数字工具结合了人类和算法的能力,可以帮助用户在创意过程中。Shamir说:“我们的工作展示了在基于习语的计算编辑中自动视觉语义匹配的潜力,提供了一种使非专业人员更容易进行视频创作的智能方法。”
在这项研究中,该方法在不同的主题文本和视频资料库中进行了测试,并进行了定量评估和用户研究。没有任何视频编辑经验的用户可以使用Write-A-Video工具制作出满意的视频,有时甚至比使用基于框架的编辑软件的专业人员还要快。在SIGGRAPH Asia,该团队将演示Write-A-Video应用程序,蓝冠2测速并展示文本到视频制作的各种示例。