
多年来,Adobe持续在创意工作流中投入生成式AI技术。如今,其研究人员正致力于利用AI模型实现微小且精确的编辑,以对抗生成式AI常见的“幻觉”问题,提升创作可控性。
Deep Brush:具备上下文感知的智能画笔
由高级研究科学家Iliyan Georgiev开发的Deep Brush项目,引入了一种具备上下文感知能力的数字画笔。该工具能在墙壁、织物和皮肤等不平整表面上无缝绘制,不再将文本、颜料或物体视为扁平的独立图层,而是自动使其弯曲并贴合场景的自然几何结构与物理规律。这一自动化流程消除了原本需要耗费大量时间和高阶手动技能的操作。
Deep Brush能自动匹配图像照明环境,确保阴影逻辑合理。例如,画作可像在现有物体后方弯曲一样,呈现纹身消失在衣领下方的视觉效果。用户可选择平面、倾斜和扭曲等模式,使绘制内容与物体的物理几何形状最佳对齐。
Hands-On:摒弃提示词的直观交互
相较于编写复杂的提示词,Hands-On项目通过新的动态用户界面,允许创作者直接用手操作场景中的物体。首席研究设计师Celso Gomes介绍,这是一个简短的两步过程:程序首先分析图像,识别场景中的物体及其特征(如香水瓶的形状、材质、颜色及照片风格等);随后,AI列出可调整的组件小部件,用户可通过覆盖在物体上的动态界面调整各组件,直至达到理想效果。
该工具支持在执行更改前一次性应用多项编辑,避免了专业人士每次生成都需等待的时间成本。其背后融合了多种AI模型,将UI设计与AI图像知识结合,打造出一种全新的编辑体验。
Scene Sweep:一致性的多镜头视频编辑
Scene Sweep是一款令人印象深刻的AI视频工具。用户上传原始影片并选择特定角色后,输入提示词即可调整相关内容(如改变发型或夹克)。AI将在每个镜头中识别该角色,并在整个时间线上一致地应用更改,且支持多次编辑。
研究工程师Hyeonho Jeong表示,这款编辑器并非用于改变作品的叙事结构,而是旨在帮助编辑人员充分利用现有素材,避免昂贵的重拍成本。
未来方向:科学与艺术的融合
这三个项目的共同主线是利用AI进行精确编辑。尽管生成式AI常因不可控而产生“幻觉”,但过去一年的技术进步已显著提升了创作者的控制力。负责图像和设计研究的高级首席科学家Hailin Jin指出,目标是创建能理解用户意图的技术,简化重复性工作,让用户专注于创造性部分。
目前,Deep Brush和Hands-On两个项目将于本周在重新推出的Adobe Labs网站上首次公开发布,为早期访问者提供精选的研究预览。负责视频和音频研究的高级首席科学家Gautham Mysore表示,Adobe的目标是构建新的技术方法论,探索融合科学与艺术的新路径。