短视频编辑的素材通常来自相册或者拍摄，苹果的PhotosKit提供了管理相册资源的接口，而AVFoundation中的Capture模块则负责相机拍摄的部分。
我们首先通过实现一个简单的拍照和录制视频（不支持暂停继续）的功能来认识拍摄模块的使用方式，需要使用的核心类如下：
上图是包含了最基础的照片拍摄和视频录制写入URLPath基本功能的流程。但是使用AVCaptureMovieFileOutput作为输出不能控制录制的暂停和继续。
要控制录制写入过程并实现分段录制，我们需要引入AVFoundaton中Assets模块的另一个类AVAssetWriter与AVCaptureVideoDataOutput和AVCaptureAudioDataOutput配合使用。
注意：
下面是读取一个视频轨道数据的示例：
AVAssetWriter使用示例：
NSURL*outputURL=...;//通过一个空文件的ur来创建写入器AVAssetWriter*assetWriter=[[AVAssetWriteralloc]initWithURL:outputURLfileType:AVFileTypeQuickTimeMovieerror:nil];//配置outsettingsNSDictionary*writerOutputSettings=AVVideoCodecKey:AVVideoCodecH264,AVVideoWidthKey:,AVVideoHeightKey:,AVVideoCompressionPropertiesKey:AVVideoMaxKeyFrameIntervalKey:,AVVideoAverageBitRateKey:,AVVideoProfileLevelKey:AVVideoProfileLevelH264Main31}};//使用视频格式文件作为输入AVAssetWriterInput*writerInput=[[AVAssetWriterInputalloc]initWithMediaType:AVMediaTypeVideooutputSettings:writerOutputSettings];[assetWriteraddInput:writerInput];//开始写入[assetWriterstartWriting];AVAssetWriter可用于实时操作和离线操作两种情况，对于每个场景有不同的方法将样本buffer添加到写入对象的输入中：
实时：处理实时资源时，例如从AVCaptureVideoDataOutput写入录制的样本时，AVAssetWriterInput应该设置expectsMediaDataInRealTime属性为YES来确保isReadyForMoreMediaData值被正确设置，不过在写入开始后，无法再修改此属性。
离线：当从离线资源读取媒体资源时，比如从AVAssetReader读取样本buffer，在附加样本前仍然需要观察写入的readyForMoreMediaData属性的状态，不过可以使用requestMediaDataWhenReadyOnQueue：usingBlock:方法控制数据的提供。传到这个方法中的代码会随写入器输入准备附加更多的样本而不断被调用，添加样本时开发者需要检索数据并从资源中找到下一个样本进行添加。
AVAssetReaderOutput和AVAssetWriterInput都可以配置outputSettings，outputSettings正是控制解、编码视频的核心。
AVVideoSettings
读取时，outputSetting传入nil，得到的将是未解码的数据。
AVAssetReader可以看做解码器，与AVAssetReaderOutput配套使用，决定以什么样的配置解码成buffer数据；AVAssetWriter可以看做编码器，与AVAssetWriterInput配套使用，决定将数据以什么配置编码成视频，CMSampleBuffer为编码的数据，视频经AVAssetReader后输出CMSampleBuffer，经AVAssetWriter可以重新将CMSampleBuffer编码成视频。
下面是AVAssetReader和AVAssetWriter成对使用用作视频转码示例：
下面是通过AVAssetWiter将AVCaptureVideoDataOutput的代理方法中的CMSampleBuffer写入文件的核心代码。
-(void)captureOutput:(AVCaptureOutput*)captureOutputdidOutputSampleBuffer:(CMSampleBufferRef)sampleBufferfromConnection:(AVCaptureConnection*)connection{[_writerstartWriting];[_writerstartSessionAtSourceTime:startTime];if(captureOutput==self.videoDataOutput){//视频输入是否准备接受更多的媒体数据if(_videoInput.readyForMoreMediaData==YES){//拼接视频数据[_videoInputappendSampleBuffer:sampleBuffer];}}else{//音频输入是否准备接受更多的媒体数据if(_audioInput.readyForMoreMediaData){//拼接音频数据[_audioInputappendSampleBuffer:sampleBuffer];}}}至此我们可以实现视频录制的暂停与继续，基本上已经介绍了大多数app相机模块实现的主要功能架构，如下：
苹果每年都会对设备的相机功能进行优化或扩展，除了简单的拍照和录像，我们还可以使用Capture模块得到更多数据。
AVFoundation中的人脸检测AVMetadataFaceObject功能在iOS6.0就开始支持，iOS13.0增加了对身体的检测，包含人体AVMetadataHumanBodyObject、猫身体AVMetadataCatBodyObject、狗身体AVMetadataDogBodyObject。他们都继承自AVMetadataObject，除了各自增加了诸如faceID、bodyID这样的属性外，他们的属性主要来自AVMetadataObject，其中bounds是检测到的目标的轮廓，当然，人脸检测补充了沿着z轴旋转的人脸角度rollAngle和是沿着y轴旋转的人脸角度yawAngle。
如果我们想要检测人脸的关键点数据，可以使用Vision框架中的VNDetectFaceRectanglesRequest和ARKit框架中的ARFaceTrackingConfiguration，都可以吊起相机获取人脸关键点的数据。
livephoto是iOS10.0推出的功能，系统相机app中选择“照片”项右上角的live标志控制是否开启拍摄livephoto功能。开启livephoto功能会拍摄下用户点击拍摄按钮前后各0-1.5秒（官网说的是1.5秒）的视频，取中间的一帧作为静态图片和一个3秒内的视频一起保存下来，在相册中长按照片可以播放其中的视频。
使用livephoto拍摄API，需要使用AVCapturePhotoOutput的isLivePhotoCaptureSupported属性判断是否支持该功能，将photoOutput的livePhotoCaptureEnabled属性设为YES，然后创建一个视频保存的路径为photoSettings的livePhotoMovieFileURL属性赋值，其他跟静态照片拍摄一样。
注意livephoto只能运行在AVCaptureSessionPresetPhoto预设模式下，且不能和AVCaptureMovieFileOutput共存。
livephoto的拍摄有自己的两个回调方法：
//已经完成整段视频的录制，还没写入沙盒-(void)captureOutput:(AVCapturePhotoOutput*)captureOutputdidFinishRecordingLivePhotoMovieForEventualFileAtURL:(NSURL*)outputFileURLresolvedSettings:(AVCaptureResolvedPhotoSettings*)resolvedSettings;//视频已经写入沙盒-(void)captureOutput:(AVCapturePhotoOutput*)captureOutputdidFinishProcessingLivePhotoToMovieFileAtURL:(NSURL*)outputFileURLduration:(CMTime)durationphotoDisplayTime:(CMTime)photoDisplayTimeresolvedSettings:(AVCaptureResolvedPhotoSettings*)resolvedSettingserror:(NSError*)error;注意：保存LivePhoto必须和图片使用同一个PHAssetCreationRequest对象，才能将两者关联起来，要展示实况照片，需要使用PHLivePhotoView，它默认添加了长按播放实况照片的手势。
景深是指摄像头拍照时获取到图片中的物体在现实世界的远近数据，苹果在iOS11.0在具有双摄像头的设备中推出了带有景深数据的人像模式，最初后置摄像头的景深数据是使用跳眼法通过两个摄像头的数据根据相似三角形原理计算得来，前置摄像头通过红外线探测，后来苹果引入了LiDAR模组，通过光线探测测距能够得到精确的景深数据，它对AR模块也有很大帮助。
用来描述景深数据的是AVDepthData类，其包含的核心属性如下：
depthDataType:景深数据的数据类型，kCVPixelFormatType_DisparityX表示的是视差数据，kCVPixelFormatType_DepthX表示的是深度数据，可以转换。depthDataMap:景深的数据缓冲区，可以转成UIImageisDepthDataFiltered:是否启动插值depthDataAccuracy:景深数据的准确度注意：通过UIImge创建的imag不会包含景深数据，需要使用photosKit框架读取。
在AVFoundation的Capture模块，景深数据录制分为静态景深录制和实时景深录制。
self.dataOutputSynchronizer=[[AVCaptureDataOutputSynchronizeralloc]initWithDataOutputs.videoOutput,self.depthOutput]];[self.dataOutputSynchronizersetDelegate:selfqueue:self.cameraProcessingQueue];然后我们就可以在代理方法中得到AVCaptureSynchronizedDataCollection实例
在添加了实时景深输出后，相机的架构变成了这样：
AVFoundation的Capture模块为我们提供了自定义相机的拍照、录像、实况照片、景深人像模式、人脸身体检测、机器码识别等等，此外诸如多相机拍摄、图像分割（头发、牙齿、眼镜、皮肤）。。。不再深入介绍。
前面已经介绍了如何使用自定义相机拍摄和保存实况照片，而大多app从相册中直接获取去使用交给UIImage的往往是一张静态图片，要转为视频进行编辑，我们需要使用PhotosKit提供的API。
至此，无论是从相机拍摄还是相册获取，我们都能结合AVFoundation框架得到我们想要的视频文件来作为视频编辑的主素材，可以正式开始我们的编辑了。
上一篇《短视频编辑中的AVFoundation框架（一）框架概述与基础》我们对AVFoundation有了初步的认识，本篇正式开始短视频编辑的第一步：添加和处理素材。