本文档尝试用VideoToolbox进行H.265（HEVC）硬件编码，视频源为iPhone后置摄像头。去年做完硬解H.264，没做编码，技能上感觉有些缺失。

看完熊皮皮的文章后，个人理解的一点小笔记前记：AVCaptureSession作为一个管理员，管理着input和output;由于笔者对视频音频的理解实在是白得不能再白的小白了，因此这里在音视频上不做解释，如果想了解可以查看原文1,input对象：AVCaptureDeviceInput主要与AVCaptureDevice绑定；AVCaptureDevice有摄像头和麦克风等；如何获取：AVCap

本文档为iOSVideoToolbox硬编H.265（HEVC）H.264（AVC）：1概述续篇，主要描述：CMSampleBufferRef读取实际数据序列参数集（SequenceParameterSet,SPS）图像序列参数（PictureParameterSet,PPS）等内容。小广告：欢迎加入iOSAndroid直播、全景播放技术讨论群：4594860161、视频实际内容数据持久化1.1、

前言相关文章：使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC使用AudioToolbox播放AACHLS点播实现（H.264

音视频学习从零到整--(3)音视频学习从零到整--(4)音视频学习从零到整--(6)音视频学习从零到整--(7)音视频学习从零到整--(8)音视频学习从零到整--(9)音视频学习从零到整--(10)一.了解VideoToolBox

前言相关文章：使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC使用AudioToolbox播放AACHLS点播实现（H.264

视频编码相关知识概念帧：每帧代表一张静态的图像GOP：GOP就是一组连续额画面，每个画面都是一帧，一个GOP就是很多帧的集合，GOPcache长度越长，画面质量越好码率：画面进行压缩后每秒显示的数据量帧率：每秒显示图片的数(人眼所看画面在16帧以上，就会认为是连贯的)分辨率：图片的长度*宽度，图片的尺寸压缩前每秒数据：帧率*分辨率压缩比：压缩前的每秒钟数据/码率(压缩比越高，画面质量越差)视频封装

VideoToolBoxiOS8.0推出同期block也推出出来了VideoToolBox工作流程VideoToolBox基于CoreFoundation库函数，c语言创建session——>设置编码相关参数

前言相关文章：使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC使用AudioToolbox播放AACHLS点播实现（H.264

欢迎关注文集-直播Live：直播APP的性能优化-礼物篇使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC使用AudioToolbox

2.基本概念解码：将压缩数据还原为未压缩数据，关于利用VideoToolbox硬解H.264可以参考这篇文章；编码：将原始数据

一、iOS11支持iOS11支持硬解流程硬解流程二、具体处理formatdesc视频文件的“格式描述”（CMFormatDescriptionRef）可通过以下两种方法创建：CMVideoFormatDescriptionCreateCMVideoFormatDescriptionCreateFromHEVCParameterSetsCMVideoFormatDescriptionCreateFr

视频编解码：VideoToolbox关于H264H.264是目前很流行的编码层视频压缩格式，目前项目中的协议层有rtmp与http，但是视频的编码层都是使用的H.264。

在视频编码方面，iOS8以下使用AVAssetWriter进行编码：先把数据写入本地临时文件appendPixelBuffer，再读取文件数据fread.iOS8及以上采用了VideoToolBox的硬编码

一般我们使用看到的使用VideoToolBox处理的都是H.264压缩格式的视频，这里我介绍一个使用VideoToolBox解码MJPEG视频编码格式的视频的方法，我们同样使用ffmpeg读取一个MJPEG

引言从iOS8开始，苹果将VideoToolbox.framework开放了出来，使开发者可以使用iOS设备内置的硬件设备来进行视频的编码和解码工作。

前言使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC使用AudioToolbox播放AAC在前面我们介绍了从麦克风采集声音并用

本文记录基于VideoToolbox的H264视频流硬件解码获取RGB888像素数据的方法。

本文档描述VideoToolbox实现同步编码的办法。VideoToolbox在头文件描述了编码方式为异步，实际开发中也确实为异步。

音视频学习从零到整--(3)音视频学习从零到整--(4)音视频学习从零到整--(6)音视频学习从零到整--(7)音视频学习从零到整--(8)音视频学习从零到整--(9)音视频学习从零到整--(10)一.了解VideoToolBox

（同样，所有这些错误，并更可以在里面VideoToolbox在ProjectNavigator中找到。本身）。您将获得无论是在VTD中解码回调，或当您创建VTD会话，如果你做了错误，这些错误代码之一。

一般情况而言一个项目仅需要一个编码器,不过有时特殊需求可能需要两个编码器同时工作.本例中实现了编码器类.仅通过指定不同编码器的枚举值就可以快速生成需要的编码器,且支持两个编码器一起工作.实现原理:iOS中利用VideoToolBox

于是需要对视频数据进行压缩，视频数据的压缩也叫做编码，H264是一种视频编码格式，iOS8.0及以上苹果开放了VideoToolbox框架来实现H264硬编码，开发者可以利用VideoToolbox框架很方便地实现视频的硬编码

使用VideoToolbox硬编&硬解VideoToolbox简介VideoToolbox是一个低级的框架，可直接访问硬件的编解码器。

VideoToolBox硬解码H264对于H264和VideoToolBox还不熟悉的童鞋一定下先看下H264基础简介iOS-VideoToolbox硬编码H264我们先看下demo效果demo效果整体的流程是

前言VideoToolBox是iOS8之后，苹果开发的用于硬解码编码H264/H265(iOS11以后支持)的API。对于H264还不了解的童鞋一定要先看下这边的H264的简介。

直接使用硬件加速的视频编码和解码功能Overview(概述)VideoToolbox是一个提供直接访问硬件的编码和解码的底层框架，它提供了视频压缩和解压服务，并为储存在CoreVideo像素缓冲区中的光栅图像格式之间的转换提供服务

目前iOS端播放器在视频播放上大多采用VideoToolBox硬解码+OpenGLES渲染的方案，但如果只是为了渲染而没有其他的后处理过程，推荐使用iOS8.0推出的AVSampleBufferDisplayLayer

而在将原始视频编码过程中，有两种方案：一种是利用第三方库FFmpeg进行编码，一种是利用iOS自身的AVAssetWriter或VideoToolBox.framework的VTCo

关于ijkplayer基于FFmpegn3.1的Android/iOS视频播放器，支持MediaCodec,VideoToolbox，支持RTMP/HTTP/HTTPS视频流播放，支持本地视频播放。

关于ijkplayer基于FFmpegn3.1的Android/iOS视频播放器，支持MediaCodec,VideoToolbox，支持RTMP/HTTP/HTTPS视频流播放，支持本地视频播放。

/FunLin/FFmpeg-x2641、新建工程，将编译好的两个目录拖入工程FFmpeg-iOS和x264-iOS2、添加libz.tbd、libbz2.tbd、libiconv.tbd，并添加框架VideoToolbox.framework

当然硬件解码使用的当然就是苹果大名鼎鼎的VideoToolBox框架，众所周知，苹果在iOS8开始才可以在iOS系统中调用该框架中的API。VideoToolBoxH.264解

为什么要进行编码因为未经过编码(压缩)的视频,具有极大的数据量,不利于存储,传输,实时应用.视频编码的原理空间冗(rong)余:同一幅图像的相邻像素点具有连贯性时间冗余:一组连续的画面之间存在着关联性结构冗余:某些场景存在着明显的图像分布模式,有规律可循.比如:方格地板,蜂窝视觉冗余:人眼对图像细节的分辨率有限,对亮度比对色度更敏感.知识冗余:许多图像的理解和某些知识有关联.比如人类面部的固定结构

问题从vlc源码包里可以发现有个modules/codec/videotoolbox.m,可以看出确实有videotoolbox相关源码，但是是否只支持Mac版本还是iOS版本也支持，是否硬编解码都支持呢

最近在学习IOS用videotoolbox框架来编码，遇到了一些问题，总结一下。

最近要使用Ios端H264解码功能，参考了webrtc中使用videoToolBox的硬解部分，在真机调试的时候，从后台切换到前台后，出现画面卡死不能恢复的情况，本以为渲染出问题，查看日志后发现为解码失败

所以更新的速度会慢一些吧.目前写到了RTP分包了,打算春节期间把C语言和TCP传输再好好看一下吧.后面还会把ffmpeg+opengl补完的.本文学习自链接,大家可以去看一下.苹果提供了一个硬编码的框架VideoToolBox

video-videoToolbox：http://www.cnblogs.com/sunminmin/p/4976418.htmlaudio-AudioToolbox：http://blog.csdn.net

===========================================使用VideoToolbox硬编码H.264前言H.264是目前很流行的编码层视频压缩格式，目前项目中的协议层有rtmp

（同样，所有这些错误，并更可以在里面VideoToolbox在ProjectNavigator中找到。本身）。  

IOS还提供现成的VideoToolBox框架，可以对摄像头和流媒体数据结构进行处理，但VideoToolBox框架只兼容8.0以上版本，8.0以下就需要用x264的库软编了。

前言关于ijkplayer基于FFmpegn3.1的Android/iOS视频播放器，支持MediaCodec,VideoToolbox，支持RTMP/HTTP/HTTPS视频流播放，支持本地视频播放。

苹果在iOS8.0系统之前，没有开放系统的硬件编码解码功能，不过MacOS系统一直有，被称为VideoToolBox

前言使用VideoToolbox硬编码H.264使用VideoToolbox硬解码H.264使用AudioToolbox编码AAC在上一篇中，介绍了如何从麦克风采集声音并用AudioToolbox编码成

在熟悉H.264的过程中，为更好的了解H.264，尝试用VideoToolbox硬编码与硬解码H.264的原始码流。

本文记录读写VideoToolboxVTDecompressionOutputCallbackRecord解码回调函数中的CVImageBufferRef中的YUV或RGB数据的处理方法。CVImageBufferRef是CVPixelBufferRef的别称，两者操作一致，原因如下。//CVPixelBuffer.htypedefCVImageBufferRefCVPixelBufferRef;

iOS系统中H264硬解及显示说明苹果在iOS8.0系统之前，没有开放系统的硬件编码解码功能，不过MacOS系统一直有，被称为VideoToolBox的框架来处理硬件的编码和解码，终于在iOS8.0后，

IOS还提供现成的VideoToolBox框架，可以对摄像头和流媒体数据结构进行处理，但VideoToolBox框架只兼容8.0以上版本，8.0以下就需要用x264的库软编了。

IOS还提供现成的VideoToolBox框架，可以对摄像头和流媒体数据结构进行处理，但VideoToolBox框架只兼容8.0以上版本，8.0以下就需要用x264的库软编了。