「肖像打光」(Portrait Light)是 Google 专为新 Pixel 手机 9 月推出的 AI 人工智慧打光功能,让摄影师能在拍摄后更改光源方向和亮度。Google 已发表部落格贴文,介绍如何开发技术的方法与始末。
Pixel 4、Pixel 4a、Pixel 4a(5G)和 Pixel 5 的 Pixel 摄影机,「肖像打光」功能会在预设模式下自动套用到图像及包含人等夜拍照片。Google 表示,人像模式照片,「肖像打光」功能可提供更吸引人的补光模式,以搭配套用的浅景深效果,带来「摄影棚品质」的拍摄成效。
Google 表示打光属于个人选择,因此开发人员希望由摄影师手动重新定位和调整 Google 相片套用的光源方向与亮度,以符合个人喜好。儘管「肖像打光」是在 Pixel 4 和 5 手机首次亮相的功能,但较旧型 Pixel 手机也能透过更新取得功能(最旧 Pixel 2 也能支援)。
「肖像打光」功能可重新定位光源模拟至特定场景
为了让 AI 模型了解光源方向的改变会对人脸亮度造成什幺影响,Google 需要数百万张不同方向光源场景下拍摄的人像照。「透过自动选择初始照明方向和强度补充照片现有光源,『肖像打光』得以模拟新增到场景的可重新定位光源。」技术开发人员解释。「我们透过新型机器学习模型的运用做到这点,并使用 Light Stage 运算照明系统拍到的各类型照片资料集训练。」
Google 开发的两种模型分别是自动平行光配置和拍摄后合成重新打光。第一个模型首先透过检视一既定人像作业,然后演算法会在场景放置合成的平行光,这与摄影师在真实世界如何配置离机光源一致。第二种模型会以对既定光源方向和人像看起来很逼真和自然的方式新增合成光。
为了教导自家 AI 如何适当补光两个模型,Google 充分利用自家 Light Stage 运算照明系统。透过将拍摄主体安置于 Light Stage,再藉由 64 个不同位置的相机多次拍摄模型,并与 Light Stage 中 331 个个别程式 LED 光源组合在一起,如此一来,开发人员便能模拟 AI 必须了解的不同光源条件。Google 表示将「肖像打光」视为自家许多计画的第一步,这些计画尝试透过 AI 与机器学习使行动摄影机拍摄后打光控制功能更强大。
Google Used a 64-Camera, 331-Light Array to Train Its Portrait Lighting AI