索尼申请AI游戏渲染专利:提前预测下一帧以减少延迟
据科技媒体TechSpot报道,索尼近期申请了一项与AI游戏渲染相关的专利。该专利描述了一种可在GPU完成渲染前预测下一帧画面的技术方案,旨在减少游戏卡顿,同时规避帧生成技术可能带来的额外延迟。
专利文件显示,这一技术不同于传统帧生成方案——后者通常需要等待两帧画面完成渲染后再生成中间帧,而索尼的方案可直接利用已生成的画面预测下一帧,无需等待两帧即可完成插值,从而帮助游戏维持更稳定的帧输出节奏。
在具体实现上,索尼采用了联合训练的编解码器,将渲染完成的画面转换为嵌入表示,形成紧凑的数值化表达,解码器则利用这些提示生成预测帧。系统运行时与图形渲染管线并行工作:硬件渲染下一帧时,AI处理上一帧,并将预测结果发送至显示缓冲区,因此在下一帧完成渲染之前,预测画面就有可能先行显示。
此外,该系统还可结合运动矢量和玩家近期的手柄操作历史,使角色操作轨迹成为下一帧动作预测的参考依据。训练过程中,系统使用连续的视频帧,神经网络以随机初始化的权重起步,输入一帧画面并尝试预测下一帧,之后将预测结果与实际画面进行比较,计算衡量预测误差的损失值。
需要指出的是,这项技术能否在实际游戏中发挥作用,仍取决于AI能否迅速生成准确画面,从而在渲染速度下降时填补帧输出间隙。
- 2026-10-18 23:16 | IT之家:索尼新专利曝光:AI 可在 GPU 渲染完成前预测下一帧画面,减少游戏卡顿阅读原文
IT之家 10 月 18 日消息,据科技媒体 TechSpot 今天报道,索尼最近申请一项专利,描绘以下场景:让 AI 在 GPU 完成渲染前预测下一帧画面,减少游戏画面卡顿,同时避免帧生成技术带来的额外延迟。IT之家从原报道获悉,这项技术能够解决帧生成的缺点,让显示画面不再等待两帧画面完成渲染,才能生成插入其中的中间帧。而是直接利用已经生成的画面预测下一帧,无需等待两帧画面就能插值,帮助游戏维持更稳定的帧输出节奏。同时,索尼使用了联合训练的编解码器,将渲染完成的画面转换为嵌入表示,对图像进行紧凑的数值化表达,让解码器利用这些提示生成预测帧。游戏运行时,该系统会与图形渲染管线并行工作。硬件渲染...