Meta 近日再开源一个名为 Animated Drawings 的新项目,该项目与之前开源的 Segment Anything Model(SAM)都是图像相关的人工智能工具,只不过 Animated Drawings 是一个可以让绘画和涂鸦从静态转为动态的工具,让内容变得更加生动。

Animated Drawings 由 Meta Fundamental AI Research(FAIR)团队创建,其实该项目最初在 2021 年时,就以免费的网络工具形式亮相供用户使用。用户可以上传绘画和涂鸦,之后系统就会生成对应的动画版本,上传图像的用户可以选择是否同意 Meta 使用该图画来训练其人工智能模型。全球共有超过 320 万用户使用了这个工具,并上传了 670 万张图片,虽然并非所有用户都同意 Meta 使用这些图片训练 AI,但这仍然为 Animated Drawings 提供了丰富的数据。当初这项服务推出时,主要 “卖点” 就是借助 AI 让儿童绘画变得栩栩如生。

之所以是让儿童绘画变得栩栩如生,主要一个原因是儿童绘画通常十分独特、且富有创造力。图画内容也更加抽象,甚至融合了一些奇思妙想。虽然家长或老师很容易就能看出小朋友的绘画作品在表达什么,但这项任务对 AI 来说却比较艰巨,市面上各类 AI 产品也都不适用于儿童绘画。

FAIR 团队在博客文章中介绍道:"Animated Drawings" 是利用物体检测、姿势预测和基于图像处理的分割模型建立的,这些模型一起工作来捕捉图像的数字版本。之后,它使用传统的计算机图形技术对图像进行变形和动画。

在开发过程中,Meta 收到了很多用户的请求,他们希望 Meta 可以提供诸如增加声音效果、添加文本等更高级、更深入的功能。由于人们对 "Animated Drawings" 有如此广泛的兴趣,Meta 最终决定将该工具与图像数据集一起开源,以便开发者能够创造出更多图像转动画的工具和服务。

通过将 Animated Drawings 开源,Meta 公司希望其他开发者能够在此基础上创造更丰富的体验。

Meta 研究人员表示:

绘画是一种自然而富有表现力的方式,世界上大多数人都可以使用。我们希望我们的工作将使其他研究人员更容易探索专门为使用人工智能补充人类创造力而定制的工具和技术。

虽然 Meta 一开始的目标是让孩子们绘制的人物形象动起来,但用户上传的图像千奇百怪,其中包括公司 logo、毛绒玩具、动漫人物、宠物、人偶等等,Animated Drawings 如今也可以让这些东西动起来。

项目地址:链接

最后修改于 2023-04-18 09:23:30
上一篇