在 Windows 11(WDDM 3.0)之前,DirectX 12 提供了应用程序和驱动程序级接口(API 和 DDI),以支持多个视频应用程序的 GPU 加速,包括视频解码、视频处理和运动估计。
从 Windows 11 开始,D3D12 向现有视频 API/DDI 系列添加了视频编码功能。 此功能提供一组一致的编码 API/DDI,这些 API/DDI 与现有的 D3D12 框架一致,并允许开发人员使用 GPU 加速的视频引擎执行视频编码。
视频编码框架提供对视频编码器硬件加速功能的访问权限。 它可用于不同的方案,例如物联网(IoT)、云、媒体 API、机器学习(ML)和游戏流式处理。
Windows 11 版本 24H2(WDDM 3.2)中添加了对 AV1 编码的支持。 有关详细信息,请参阅 D3D12 AV1 视频编码。
从 Windows 11 开始,支持的编解码器为 H.264 和 HEVC,尽管 D3D12 视频编码框架为新的编解码器(如 AV1)提供了开放扩展性。
框架接口的编解码器特定方面将委托给编解码器特定结构及其对联合类型的访问权限。 例如,D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_0082_0 结构包含一个联合,其中包含指向编解码器特定 D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_H264_0082_0 的指针,以及包含编解码器特定配置信息的 D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_HEVC_0082_0 结构。(包含视频编解码器的配置信息 :如
typedef struct D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_0082_0 {
UINT DataSize;
union {
D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_H264_0082_0 *pH264Config;
D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_HEVC_0082_0 *pHEVCConfig;
D3D12DDI_VIDEO_ENCODER_AV1_CODEC_CONFIGURATION_0095 *pAV1Config;
};
} D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_0082_0;
DataSize:所引用数据的大小(以字节为单位)。
pH264Config:指向包含 H.264 编解码器配置信息的 D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_H264_0082_0 结构的指针。
pHEVCConfig:指向包含 HEVC 编解码器配置信息的 D3D12DDI_VIDEO_ENCODER_CODEC_CONFIGURATION_HEVC_0082_0 结构的指针。
pAV1Config:指向包含 AV1 编解码器配置信息的 D3D12DDI_VIDEO_ENCODER_AV1_CODEC_CONFIGURATION_0095 结构的指针。
为了在扩展性上保留二进制接口兼容性,联合类型始终包含指向编解码器特定结构的指针。 根据主机体系结构的指针大小,联合类型具有固定大小。 此决定还阻止包含联合类型成员或含有匿名成员的结构在扩展接口时更改其类型大小。 某些联合仅包含指向枚举类型的指针;为了保持一致,这些枚举类型也作为指针引用,在这种情况下,新编解码器需要一些比枚举更复杂的类型,以便表示这些概念。
扩展了与视频相关的现有框架,以允许驱动程序报告视频编码支持和功能。
D3D 运行时会调用驱动程序的 PFND3D12DDI_VIDEO_GETCAPS 回调来查询视频编码支持。