一种易于访问机器学习的新模型
假设您是一位预算有限的动画师,想要将人类演员的视频转换为 3D 模型您可以使用 Runway 将名为PosetNet的神经网络应用到您的素材中,而不是使用昂贵的动作捕捉设备,从而创建您的演员的线框模型,然后可以将其导出为动画
一种尝试机器学习的简单方法
这些例子只是 Runway 的冰山一角,联合创始人 Cristóbal Valenzuela 将其描述为极端平等的工具机器学习是一项非常独特的技术,巴伦苏埃拉告诉The Verge但我想让事情更具包容性,让来自不同背景的人围坐在桌子旁并使用这些模型
Runway 始于 Valenzuela 在纽约大学 Tisch 艺术学院的论文项目在得到 AI 艺术社区的热情反馈后,他决定将该计划纳入主流,邀请两位学校朋友作为联合创始人加入,并从纽约市和硅谷的支持者那里筹集种子资金该公司于去年 12 月成立,并于今年 1 月推出测试版
Valenzuela 跨越艺术和代码领域,并表示他希望架起这两个世界的桥梁,让非编码人员能够使用机器学习模型,进而将研究人员与直接从他们的工作中受益的人联系起来。
在Valenzuela 去年 5 月写的一篇博客文章中,他将当前的人工智能艺术场景比作 16 和 17 世纪的绘画在那个时候,简单地储存和使用颜料的行为是一种工艺秘密,画家依赖于涉及猪膀胱和绳子的深奥技术但是伴随着 1841 年油漆管的发明,这门手艺变得更容易获得在户外进行也更容易,从而产生新的风格和动作
为 AI 做油漆管为肖像画做的事
正如 19 世纪画家皮埃尔·奥古斯特·雷诺阿 告诉他儿子的那样:如果没有管中的颜色,就不会有塞尚,莫奈,西斯莱或毕沙罗,也不会有记者所说的印象派 换句话说:可访问性产生创造力
但现代艺术家的画管是什么Valenzuela 提出了一个令人信服的论点,认为它可能是 Runway——或者至少是一个看起来很像它的程序
在这种情况下,猪的膀胱阻碍了进展,这是目前使用机器学习模型所需的技能这意味着学习使用 TensorFlow 或 PyTorch 等软件,这可能意味着购买一些昂贵的 GPU,或者改为连接到 AWS 实例这些任务都不是非编码人员无法完成的,但它们肯定需要时间并为用户带来瓶颈相比之下,Runway 的模型是完美的油漆管:只需点击即可
当然,该公司并不是第一个让 AI 模型更易于使用的公司但早期的例子——比如Lobe,它让用户在被微软收购之前使用可视化界面训练人工智能系统——专注于商业用例,而不是创意用例
当您加载 Runway 的店面时,它的目标市场就很明显了,这让您可以浏览从文本生成到运动跟踪的各种模型。。
您单击以查看每个模型的详细信息,单击以将其添加到您的工作区,设置您的输入和输出,然后启动系统运行有一些钩子可以将这些输出连接到其他应用程序,并且用户只需几行代码就可以直接从 GitHub 导入新模型
探索使用 Runway ML 生成肖像和卧室风格图像的两个预训练生成对抗网络。
后一点是 Runway 最重要的一点很难低估当前 AI 艺术领域的快节奏和协作性,以及个人从彼此的工作和专业研究中受益的程度新模型刚一发布,就会被以各种意想不到的方式使用它的大众抢购一空
以研究实验室 OpenAI 于 2 月推出的名为 GPT—2的 AI 文本生成系统为例在它推出后的几个月里,GPT—2 已经变成了可访问的网络应用程序,它被用来帮助写小说,有人甚至创建了一个 subreddit,完全由模仿其他subreddit的聊天机器人使用它填充
简而言之:这是一个充满活力和活力的场景,Runway 希望尽可能与它保持联系Valenzuela 说,他的团队不断响应用户的反馈,每个月都会向程序添加新模型并更新软件界面
正是这种与社区的联系和更新速度,他说这也将阻止 Runway 被该行业的老牌玩家占领我们的团队只有四个人,他说我们喜欢快速发货,让人们兴奋并让他们使用东西 尽管像 Adobe 这样的企业巨头肯定对类似的AI 应用程序很感兴趣,但他们将它们集成到产品中的速度肯定会变慢
到目前为止,Runway 收到的招待会证实了 Valenzuela 的评论。
我个人觉得这对于快速尝试一些模型很有用,最近在苏富比出售他的作品的 AI 艺术家马里奥·克林格曼 说他说,该程序对研讨会和课程特别有用,因为它允许教师在几分钟内启动并运行新的机器学习模型
克林格曼也有保留他告诉The Verge,该软件对于制作他自己的艺术作品来说太有限了,因为它只提供预训练的模型这意味着如果有人想要自定义生成器系统的输出,例如生成对抗网络 ,他们无法根据自己的数据对其进行训练Valenzuela 表示,该功能将很快添加到该程序中,同时还能将一个模型的输出用作另一个模型的输入
另一位以与 GAN 合作而闻名的AI 艺术家Robbie Barrat 也称赞了该程序,特别指出它在使 AI 艺术界民主化方面的潜力特别积极。这些汽车将由人类驾驶,但该公司最终正在努力实现全自动驾驶。
如果跑道可以降低进入门槛......我完全赞成。据外媒报道,当地时间周三,Alphabet自动驾驶部门Waymo表示,将从当地时间周四开始在纽约测试其自动驾驶汽车。
现在,对于在谷歌或其他地方工作的富有的技术兄弟来说,这是最容易的,去一所高档的计算机科学学校,并且可以在工作中使用巨大的 GPU 集群来使用神经网络制作艺术品,巴拉特告诉The Verge如果 Runway 可以降低进入门槛,让更多不同的人轻松地用 AI 创作艺术,我完全赞成
但 Barrat 同意该程序的简单性是一个限制因素他说,想要使用 AI 做的不仅仅是简化流程中现有步骤的人将需要比 Runway 更强大的程序无论它作为一种工具有多好,编码的人仍然能够制作更大范围的东西,并最终对他们生产的东西有更多的控制权
Barrat 和 Klingemann 还表示,在 Runway 上训练 ML 模型时,价格是一个潜在问题该软件可免费下载,并附带 10 美元的云积分,足以了解其潜力但在那之后,用户每分钟计算成本为 5 美分对于像 Klingemann 和 Barrat 这样需要训练自己模型的艺术家来说,购买自己的 GPU 或连接到云服务可能更便宜我不确定这对我来说在经济上是否有意义,克林格曼说
但是,说 Runway 并不适合所有用户并不是一个巨大的批评当他们的瑞士军刀不能用于挖壕沟时,没有人会感到惊讶对于 Valenzuela 来说,主要任务不是迎合职业选手,它正在扩大人工智能艺术世界的边界
这些技术将从根本上改变我们创建内容的方式,因为算法以与我们相同的方式理解文本,视频和声音,他说如果我们将这些工具交到以前从未访问过这些工具的人手中,他们就会开始思考使用它们的新方法
。