您当前的位置:科技视窗网 > 游戏
10

RunwayML将AI工具交到各地创作者的手中

时间:2022-02-17 21:01:43    来源:网易    阅读量:7001   

一种易于访问机器学习的新模型

假设您是一位预算有限的动画师,想要将人类演员的视频转换为 3D 模型您可以使用 Runway 将名为PosetNet的神经网络应用到您的素材中,而不是使用昂贵的动作捕捉设备,从而创建您的演员的线框模型,然后可以将其导出为动画

一种尝试机器学习的简单方法

这些例子只是 Runway 的冰山一角,联合创始人 Cristóbal Valenzuela 将其描述为极端平等的工具机器学习是一项非常独特的技术,巴伦苏埃拉告诉The Verge但我想让事情更具包容性,让来自不同背景的人围坐在桌子旁并使用这些模型

Runway 始于 Valenzuela 在纽约大学 Tisch 艺术学院的论文项目在得到 AI 艺术社区的热情反馈后,他决定将该计划纳入主流,邀请两位学校朋友作为联合创始人加入,并从纽约市和硅谷的支持者那里筹集种子资金该公司于去年 12 月成立,并于今年 1 月推出测试版

Valenzuela 跨越艺术和代码领域,并表示他希望架起这两个世界的桥梁,让非编码人员能够使用机器学习模型,进而将研究人员与直接从他们的工作中受益的人联系起来。

在Valenzuela 去年 5 月写的一篇博客文章中,他将当前的人工智能艺术场景比作 16 和 17 世纪的绘画在那个时候,简单地储存和使用颜料的行为是一种工艺秘密,画家依赖于涉及猪膀胱和绳子的深奥技术但是伴随着 1841 年油漆管的发明,这门手艺变得更容易获得在户外进行也更容易,从而产生新的风格和动作

为 AI 做油漆管为肖像画做的事

正如 19 世纪画家皮埃尔·奥古斯特·雷诺阿 告诉他儿子的那样:如果没有管中的颜色,就不会有塞尚,莫奈,西斯莱或毕沙罗,也不会有记者所说的印象派 换句话说:可访问性产生创造力

但现代艺术家的画管是什么Valenzuela 提出了一个令人信服的论点,认为它可能是 Runway——或者至少是一个看起来很像它的程序

在这种情况下,猪的膀胱阻碍了进展,这是目前使用机器学习模型所需的技能这意味着学习使用 TensorFlow 或 PyTorch 等软件,这可能意味着购买一些昂贵的 GPU,或者改为连接到 AWS 实例这些任务都不是非编码人员无法完成的,但它们肯定需要时间并为用户带来瓶颈相比之下,Runway 的模型是完美的油漆管:只需点击即可

当然,该公司并不是第一个让 AI 模型更易于使用的公司但早期的例子——比如Lobe,它让用户在被微软收购之前使用可视化界面训练人工智能系统——专注于商业用例,而不是创意用例

当您加载 Runway 的店面时,它的目标市场就很明显了,这让您可以浏览从文本生成到运动跟踪的各种模型。。

您单击以查看每个模型的详细信息,单击以将其添加到您的工作区,设置您的输入和输出,然后启动系统运行有一些钩子可以将这些输出连接到其他应用程序,并且用户只需几行代码就可以直接从 GitHub 导入新模型

探索使用 Runway ML 生成肖像和卧室风格图像的两个预训练生成对抗网络。

后一点是 Runway 最重要的一点很难低估当前 AI 艺术领域的快节奏和协作性,以及个人从彼此的工作和专业研究中受益的程度新模型刚一发布,就会被以各种意想不到的方式使用它的大众抢购一空

以研究实验室 OpenAI 于 2 月推出的名为 GPT—2的 AI 文本生成系统为例在它推出后的几个月里,GPT—2 已经变成了可访问的网络应用程序,它被用来帮助写小说,有人甚至创建了一个 subreddit,完全由模仿其他subreddit的聊天机器人使用它填充

简而言之:这是一个充满活力和活力的场景,Runway 希望尽可能与它保持联系Valenzuela 说,他的团队不断响应用户的反馈,每个月都会向程序添加新模型并更新软件界面

正是这种与社区的联系和更新速度,他说这也将阻止 Runway 被该行业的老牌玩家占领我们的团队只有四个人,他说我们喜欢快速发货,让人们兴奋并让他们使用东西 尽管像 Adobe 这样的企业巨头肯定对类似的AI 应用程序很感兴趣,但他们将它们集成到产品中的速度肯定会变慢

到目前为止,Runway 收到的招待会证实了 Valenzuela 的评论。

我个人觉得这对于快速尝试一些模型很有用,最近在苏富比出售他的作品的 AI 艺术家马里奥·克林格曼 说他说,该程序对研讨会和课程特别有用,因为它允许教师在几分钟内启动并运行新的机器学习模型

克林格曼也有保留他告诉The Verge,该软件对于制作他自己的艺术作品来说太有限了,因为它只提供预训练的模型这意味着如果有人想要自定义生成器系统的输出,例如生成对抗网络 ,他们无法根据自己的数据对其进行训练Valenzuela 表示,该功能将很快添加到该程序中,同时还能将一个模型的输出用作另一个模型的输入

另一位以与 GAN 合作而闻名的AI 艺术家Robbie Barrat 也称赞了该程序,特别指出它在使 AI 艺术界民主化方面的潜力特别积极。这些汽车将由人类驾驶,但该公司最终正在努力实现全自动驾驶。

如果跑道可以降低进入门槛......我完全赞成。据外媒报道,当地时间周三,Alphabet自动驾驶部门Waymo表示,将从当地时间周四开始在纽约测试其自动驾驶汽车。

现在,对于在谷歌或其他地方工作的富有的技术兄弟来说,这是最容易的,去一所高档的计算机科学学校,并且可以在工作中使用巨大的 GPU 集群来使用神经网络制作艺术品,巴拉特告诉The Verge如果 Runway 可以降低进入门槛,让更多不同的人轻松地用 AI 创作艺术,我完全赞成

但 Barrat 同意该程序的简单性是一个限制因素他说,想要使用 AI 做的不仅仅是简化流程中现有步骤的人将需要比 Runway 更强大的程序无论它作为一种工具有多好,编码的人仍然能够制作更大范围的东西,并最终对他们生产的东西有更多的控制权

Barrat 和 Klingemann 还表示,在 Runway 上训练 ML 模型时,价格是一个潜在问题该软件可免费下载,并附带 10 美元的云积分,足以了解其潜力但在那之后,用户每分钟计算成本为 5 美分对于像 Klingemann 和 Barrat 这样需要训练自己模型的艺术家来说,购买自己的 GPU 或连接到云服务可能更便宜我不确定这对我来说在经济上是否有意义,克林格曼说

但是,说 Runway 并不适合所有用户并不是一个巨大的批评当他们的瑞士军刀不能用于挖壕沟时,没有人会感到惊讶对于 Valenzuela 来说,主要任务不是迎合职业选手,它正在扩大人工智能艺术世界的边界

这些技术将从根本上改变我们创建内容的方式,因为算法以与我们相同的方式理解文本,视频和声音,他说如果我们将这些工具交到以前从未访问过这些工具的人手中,他们就会开始思考使用它们的新方法


声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。

为您推荐
  • 2022京东云峰会广州站举行,以数智供应链服务广东产业数字化

    2022京东云峰会广州站举行,以数智供应链服务广东产业数字化
    日前,以数字智能供应链驱动新增长为主题的京东云城市峰会广州站成功举办本次活动围绕在当前不确定的行业环境下,企业关注的发展韧性,数字化升级等话题展开京东云发布了多项基于京东的解决方案COM围绕数字化智能供应链的领先供应链实践,来自广东零售,交......
    2022-05-26

  • 首届全球绿氢大会中国区平行论坛在北京大兴成功举办

    首届全球绿氢大会中国区平行论坛在北京大兴成功举办
    大兴国际氢能示范区作为全球绿色氢组织的战略合作伙伴,共同举办了中国区域平行论坛平行论坛围绕中国:绿色氢动力,氢能产业发展中长期规划的主题,与全球绿色氢产业同仁共同探讨可再生能源和绿色氢的发展模式和思路,呼吁全世界认识和关注能源转型,实现全球......
    2022-05-18

  • 80% 的 Steam top 100 游戏已支持在 Linux 系统中游玩

    80% 的 Steam top 100 游戏已支持在 Linux 系统中游玩
    IT之家 12月21日消息,根据统计平台ProtonDB的数据,80%的Steamtop100游戏已支持在Linux系统中游玩。根据报告数据,支持运行的评分标准为:白金:开箱即玩,完美运行金:经过调整后完美运行银:虽然有小问题,但......
    2021-12-23

  • OpenCloudOS 开源操作系统社区成立,腾讯等倡议发起:完全中立、全面开放

    OpenCloudOS 开源操作系统社区成立,腾讯等倡议发起:完全中立、全面开放
    IT之家 12月23日消息,12月22日,开源操作系统社区OpenCloudOS正式宣布成立,腾讯及宝德、北京初心、北京红旗、飞腾、浪潮、龙芯中科、OPPO、先进开源、中电科申泰、中科方德、兆芯等20余家操作系统生态厂商及用户成为......
    2021-12-23

  • 获得场景视频常江出席2021培博会 高效赋能企业在线学习

    获得场景视频常江出席2021培博会 高效赋能企业在线学习
    ▲获得场景视频常江出席2021培博会近期,2021培博会在北京盛大举行,获得场景视频人力资源中心及业务拓展中心副总裁常江受邀出席了本次会议,与现场各行业知名企业家、学者共聚一堂,从行业发展、组织发展、技术变革等方面探讨企业培训、在线学习的新......
    2021-12-23