您的位置:首页 >科技 >

Adobe如何使用深度学习来改进其产品

来源:时间:2021-11-16

与每年一样,Adobe 的 Max 2021 活动特色产品展示和世界领先的计算机图形软件公司发生的其他创新。

该活动最有趣的特点之一是 Adob​​e 不断将人工智能集成到其产品中,这是该公司过去几年一直在探索的领域。

与许多其他公司一样,Adobe 正在利用深度学习来改进其应用程序并巩固其在视频和图像编辑市场中的地位。反过来,人工智能的使用正在塑造 Adob​​e 的产品战略。

人工智能驱动的图像和视频编辑

Adobe 的 AI 平台 Sensei 现在已集成到其Creative Cloud 套件的所有产品中。今年会议上展示的功能之一是 Photoshop 中的自动蒙版工具,它使您只需将鼠标悬停在对象上即可选择该对象。类似的功能会自动为其在场景中检测到的所有对象创建遮罩层。

自动遮罩功能可节省大量时间,尤其是在对象具有复杂轮廓和颜色且使用经典工具很难选择的图像中。

Adobe 还改进了神经过滤器,这是去年添加到 Photoshop 的一项功能。神经过滤器使用机器学习来增强图像。许多滤镜适用于人物肖像和图像。例如,您可以应用皮肤平滑、将妆容从源图像转移到目标图像,或更改照片中主体的表情。

其他神经过滤器进行更一般的更改,例如为黑白图像着色或更改背景风景。

Max 大会还公布了一些预览和即将推出的技术。例如,Adobe 照片集产品的一项新功能称为“中间”,可以拍摄两张或多张以较短间隔拍摄的照片,并通过自动生成照片中间的帧来创建视频.

正在开发的另一个功能是“on point”,它通过提供参考姿势帮助您搜索 Adob​​e 庞大的库存图像库。例如,如果您提供一张人坐着并伸出手的照片,机器学习模型将检测该人的姿势并找到其他人处于相似位置的照片。

AI 功能也已添加到 Lightroom、Premiere 和其他 Adob​​e 产品中。

交付人工智能产品的挑战

当您单独查看 Adob​​e 的 AI 功能时,它们都不是开创性的。虽然 Adob​​e 没有在此次活动中提供任何架构或实施细节,但任何一直关注人工智能研究的人都可以立即将 Max 上展示的每一项功能与过去几年在机器学习和计算机视觉会议上发表的一篇或多篇论文和演示相关联年。Auto-masking 使用深度学习的对象检测和分割,这是一个最近取得巨大进展的研究领域。

使用神经网络进行风格迁移是一项至少已有四年历史的技术。支持多个图像生成功能的生成对抗网络 (GAN) 已经存在七年多。事实上,Adobe 使用的许多技术都是开源且免费提供的。

Adobe 人工智能背后的真正天才不是卓越的技术,而是公司向客户交付产品的战略。

成功的产品需要具有差异化价值,以说服用户开始使用它或从旧解决方案切换到新应用程序。

将深度学习应用于不同的图像处理应用的好处非常明显。它们可以提高生产率并降低成本。深度学习模型提供的帮助可以帮助那些没有专业图形设计师的技能和经验的人降低艺术创造力的障碍。在自动屏蔽和神经过滤器的情况下,这些工具甚至可以让有经验的用户更快更好地解决他们的问题。一些新功能,例如“中间”功能,正在解决其他应用程序尚未解决的问题。

但除了卓越的功能外,成功的产品还需要以一种无摩擦且具有成本效益的方式交付给其目标受众。例如,假设您开发了一个最先进的深度学习驱动的神经过滤器应用程序,并希望在市场上销售它。您的目标用户是已经在使用 Photoshop 等照片编辑工具的图形设计师。如果他们想应用你的神经过滤器,他们必须不断地在 Photoshop 和你的应用程序之间移植他们的图像,这会导致过多的摩擦并降低用户体验。

您还必须处理深度学习的成本。许多用户设备没有运行神经网络的内存和处理能力,需要基于云的处理。因此,您必须设置服务器和 Web API 来为深度学习模型提供服务,并且您还必须确保您的服务随着使用量的增加而保持在线和可用。只有当您接触到大量付费用户时,您才能收回此类成本。

您还必须弄清楚如何以一种既能支付您的成本又能保持用户对使用它的兴趣的方式通过您的产品获利。您的产品是基于广告的免费产品、免费增值模式、一次性付款还是订阅服务?大多数客户宁愿避免与具有不同支付模式的多个软件供应商合作。

而且您需要一个外展策略,使您的产品在其目标市场上可见。您会在社交媒体上投放广告、进行直接销售并联系设计公司,还是使用内容营销?许多产品失败并不是因为它们没有解决核心问题,而是因为它们无法进入正确的市场并以具有成本效益的方式交付产品。

最后,您需要一个路线图来不断迭代和改进您的产品。例如,如果您使用机器学习来增强图像,您将需要一个工作流程来不断收集新数据,找出模型失败的地方,并对其进行微调以提高其性能。

Adobe的人工智能战略

Adobe 已经在图形软件市场占有很大的份额。每天有数百万人使用 Adob​​e 的应用程序,因此该公司在接触其目标市场方面没有问题。每当有了新的深度学习工具时,它就可以立即使用 Photoshop、Premiere 和 Creative Cloud 套件中的其他应用程序,使其对用户可见并可供用户使用。用户无需付费或安装任何新的应用程序;他们只需要将新插件下载到他们的应用程序中。

该公司在过去几年逐步向云端过渡,也为将深度学习无缝集成到其应用程序中铺平了道路。Adobe 的大部分 AI 功能都在云中运行。对于用户而言,基于云的功能体验与使用直接在他们自己的设备上运行的过滤器和工具没有什么不同。同时,Adobe 云的规模使该公司能够以极具成本效益的方式运行深度学习推理,这就是为什么已经订阅 Creative Cloud 的用户可以免费使用大多数新的 AI 功能的原因。

最后,基于云的深度学习模型为 Adob​​e 提供了运行非常高效的 AI 工厂的机会。由于 Adob​​e 的云为其用户提供深度学习模型,因此未来还将收集数据以提高其 AI 功能的性能。例如,该公司在 Max 会议上承认,自动遮罩功能尚未适用于所有对象,但会随着时间的推移而改进。持续的迭代将反过来使 Adob​​e 能够增强其 AI 能力并巩固其在市场中的地位。反过来,人工智能将塑造 Adob​​e 未来推出的产品。

运行应用机器学习项目非常困难,这也是公司未能实现这些项目的主要原因。Adobe 是一个有趣的案例研究,说明如何将正确的元素结合在一起可以将 AI 的进步转化为有利可图的业务应用程序。

图说财富