他的最新文章
他的热门文章
您举报文章：
举报原因：
原文地址：
原因补充：
(最多只允许输入30个字) 上传我的文档
 下载
 收藏
粉丝量：66
本人资料一部分是自己原创，一部分来源于网络，若您发现侵犯您个人权利的，请留言联系我，我立马删除。
 下载此文档
如何利用摄像头进行视频采集
下载积分：350
内容提示：如何利用摄像头进行视频采集
文档格式：PDF|
浏览次数：85|
上传日期： 16:16:39|
文档星级：
全文阅读已结束，如果下载本文需要使用
 350 积分
下载此文档
该用户还上传了这些文档
如何利用摄像头进行视频采集
关注微信公众号502 Bad Gateway
502 Bad Gateway【如何快速的开发一个完整的iOS直播app】(采集篇) - 简书
【如何快速的开发一个完整的iOS直播app】(采集篇)
在看这篇之前，如果您还不了解直播原理，请查看这篇文章
开发一款直播app，首先需要采集主播的视频和音频，然后传入流媒体服务器，本篇主要讲解如何采集主播的视频和音频，当前可以切换前置后置摄像头和焦点光标,但是美颜功能还没做，可以看见素颜的你，后续还会有直播的其他功能文章陆续发布。
如果喜欢我的文章，可以关注我微博:
为了采集效果图，我也是豁出去了，请忽略人物，关注技术。
忽略本人.png
基本知识介绍
AVFoundation: 音视频数据采集需要用AVFoundation框架.
AVCaptureDevice：硬件设备，包括麦克风、摄像头，通过该对象可以设置物理设备的一些属性（例如相机聚焦、白平衡等）
AVCaptureDeviceInput：硬件输入对象，可以根据AVCaptureDevice创建对应的AVCaptureDeviceInput对象，用于管理硬件输入数据。
AVCaptureOutput：硬件输出对象，用于接收各类输出数据，通常使用对应的子类AVCaptureAudioDataOutput（声音数据输出对象）、AVCaptureVideoDataOutput（视频数据输出对象）
AVCaptionConnection:当把一个输入和输出添加到AVCaptureSession之后，AVCaptureSession就会在输入、输出设备之间建立连接,而且通过AVCaptureOutput可以获取这个连接对象。
AVCaptureVideoPreviewLayer:相机拍摄预览图层，能实时查看拍照或视频录制效果，创建该对象需要指定对应的AVCaptureSession对象，因为AVCaptureSession包含视频输入数据，有视频数据才能展示。
AVCaptureSession:
协调输入与输出之间传输数据
系统作用：可以操作硬件设备
工作原理：让App与系统之间产生一个捕获会话，相当于App与硬件设备有联系了， 我们只需要把硬件输入对象和输出对象添加到会话中，会话就会自动把硬件输入对象和输出产生连接，这样硬件输入与输出设备就能传输音视频数据。
现实生活场景：租客（输入钱），中介（会话），房东（输出房），租客和房东都在中介登记，中介就会让租客与房东之间产生联系，以后租客就能直接和房东联系了。
捕获音视频步骤:
1.创建AVCaptureSession对象
2.获取AVCaptureDevicel录像设备（摄像头），录音设备（麦克风），注意不具备输入数据功能,只是用来调节硬件设备的配置。
3.根据音频/视频硬件设备(AVCaptureDevice)创建音频/视频硬件输入数据对象(AVCaptureDeviceInput)，专门管理数据输入。
4.创建视频输出数据管理对象（AVCaptureVideoDataOutput），并且设置样品缓存代理(setSampleBufferDelegate)就可以通过它拿到采集到的视频数据
5.创建音频输出数据管理对象（AVCaptureAudioDataOutput），并且设置样品缓存代理(setSampleBufferDelegate)就可以通过它拿到采集到的音频数据
6.将数据输入对象AVCaptureDeviceInput、数据输出对象AVCaptureOutput添加到媒体会话管理对象AVCaptureSession中,就会自动让音频输入与输出和视频输入与输出产生连接.
7.创建视频预览图层AVCaptureVideoPreviewLayer并指定媒体会话，添加图层到显示容器layer中
8.启动AVCaptureSession，只有开启，才会开始输入到输出数据流传输。
// 捕获音视频
- (void)setupCaputureVideo
// 1.创建捕获会话,必须要强引用，否则会被释放
AVCaptureSession *captureSession = [[AVCaptureSession alloc] init];
_captureSession = captureS
// 2.获取摄像头设备，默认是后置摄像头
AVCaptureDevice *videoDevice = [self getVideoDevice:AVCaptureDevicePositionFront];
// 3.获取声音设备
AVCaptureDevice *audioDevice = [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeAudio];
// 4.创建对应视频设备输入对象
AVCaptureDeviceInput *videoDeviceInput = [AVCaptureDeviceInput deviceInputWithDevice:videoDevice error:nil];
_currentVideoDeviceInput = videoDeviceI
// 5.创建对应音频设备输入对象
AVCaptureDeviceInput *audioDeviceInput = [AVCaptureDeviceInput deviceInputWithDevice:audioDevice error:nil];
// 6.添加到会话中
// 注意“最好要判断是否能添加输入，会话不能添加空的
// 6.1 添加视频
if ([captureSession canAddInput:videoDeviceInput]) {
[captureSession addInput:videoDeviceInput];
// 6.2 添加音频
if ([captureSession canAddInput:audioDeviceInput]) {
[captureSession addInput:audioDeviceInput];
// 7.获取视频数据输出设备
AVCaptureVideoDataOutput *videoOutput = [[AVCaptureVideoDataOutput alloc] init];
// 7.1 设置代理，捕获视频样品数据
// 注意：队列必须是串行队列，才能获取到数据，而且不能为空
dispatch_queue_t videoQueue = dispatch_queue_create("Video Capture Queue", DISPATCH_QUEUE_SERIAL);
[videoOutput setSampleBufferDelegate:self queue:videoQueue];
if ([captureSession canAddOutput:videoOutput]) {
[captureSession addOutput:videoOutput];
// 8.获取音频数据输出设备
AVCaptureAudioDataOutput *audioOutput = [[AVCaptureAudioDataOutput alloc] init];
// 8.2 设置代理，捕获视频样品数据
// 注意：队列必须是串行队列，才能获取到数据，而且不能为空
dispatch_queue_t audioQueue = dispatch_queue_create("Audio Capture Queue", DISPATCH_QUEUE_SERIAL);
[audioOutput setSampleBufferDelegate:self queue:audioQueue];
if ([captureSession canAddOutput:audioOutput]) {
[captureSession addOutput:audioOutput];
// 9.获取视频输入与输出连接，用于分辨音视频数据
_videoConnection = [videoOutput connectionWithMediaType:AVMediaTypeVideo];
// 10.添加视频预览图层
AVCaptureVideoPreviewLayer *previedLayer = [AVCaptureVideoPreviewLayer layerWithSession:captureSession];
previedLayer.frame = [UIScreen mainScreen].
[self.view.layer insertSublayer:previedLayer atIndex:0];
_previedLayer = previedL
// 11.启动会话
[captureSession startRunning];
// 指定摄像头方向获取摄像头
- (AVCaptureDevice *)getVideoDevice:(AVCaptureDevicePosition)position
NSArray *devices = [AVCaptureDevice devicesWithMediaType:AVMediaTypeVideo];
for (AVCaptureDevice *device in devices) {
if (device.position == position) {
#pragma mark - AVCaptureVideoDataOutputSampleBufferDelegate
// 获取输入设备数据，有可能是音频有可能是视频
- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection
if (_videoConnection == connection) {
NSLog(@"采集到视频数据");
NSLog(@"采集到音频数据");
视频采集额外功能一（切换摄像头）
切换摄像头步骤
1.获取当前视频设备输入对象
2.判断当前视频设备是前置还是后置
3.确定切换摄像头的方向
4.根据摄像头方向获取对应的摄像头设备
5.创建对应的摄像头输入对象
6.从会话中移除之前的视频输入对象
7.添加新的视频输入对象到会话中
// 切换摄像头
- (IBAction)toggleCapture:(id)sender {
// 获取当前设备方向
AVCaptureDevicePosition curPosition = _currentVideoDeviceInput.device.
// 获取需要改变的方向
AVCaptureDevicePosition togglePosition = curPosition == AVCaptureDevicePositionFront?AVCaptureDevicePositionBack:AVCaptureDevicePositionF
// 获取改变的摄像头设备
AVCaptureDevice *toggleDevice = [self getVideoDevice:togglePosition];
// 获取改变的摄像头输入设备
AVCaptureDeviceInput *toggleDeviceInput = [AVCaptureDeviceInput deviceInputWithDevice:toggleDevice error:nil];
// 移除之前摄像头输入设备
[_captureSession removeInput:_currentVideoDeviceInput];
// 添加新的摄像头输入设备
[_captureSession addInput:toggleDeviceInput];
// 记录当前摄像头输入设备
_currentVideoDeviceInput = toggleDeviceI
视频采集额外功能二（聚焦光标）
聚焦光标步骤
1.监听屏幕的点击
2.获取点击的点位置，转换为摄像头上的点，必须通过视频预览图层（AVCaptureVideoPreviewLayer）转
3.设置聚焦光标图片的位置，并做动画
4.设置摄像头设备聚焦模式和曝光模式(注意：这里设置一定要锁定配置lockForConfiguration,否则报错)
// 点击屏幕，出现聚焦视图
- (void)touchesBegan:(NSSet&UITouch *& *)touches withEvent:(UIEvent *)event
// 获取点击位置
UITouch *touch = [touches anyObject];
CGPoint point = [touch locationInView:self.view];
// 把当前位置转换为摄像头点上的位置
CGPoint cameraPoint = [_previedLayer captureDevicePointOfInterestForPoint:point];
// 设置聚焦点光标位置
[self setFocusCursorWithPoint:point];
// 设置聚焦
[self focusWithMode:AVCaptureFocusModeAutoFocus exposureMode:AVCaptureExposureModeAutoExpose atPoint:cameraPoint];
设置聚焦光标位置
@param point 光标位置
-(void)setFocusCursorWithPoint:(CGPoint)point{
self.focusCursorImageView.center=
self.focusCursorImageView.transform=CGAffineTransformMakeScale(1.5, 1.5);
self.focusCursorImageView.alpha=1.0;
[UIView animateWithDuration:1.0 animations:^{
self.focusCursorImageView.transform=CGAffineTransformI
} completion:^(BOOL finished) {
self.focusCursorImageView.alpha=0;
-(void)focusWithMode:(AVCaptureFocusMode)focusMode exposureMode:(AVCaptureExposureMode)exposureMode atPoint:(CGPoint)point{
AVCaptureDevice *captureDevice = _currentVideoDeviceInput.
// 锁定配置
[captureDevice lockForConfiguration:nil];
// 设置聚焦
if ([captureDevice isFocusModeSupported:AVCaptureFocusModeAutoFocus]) {
[captureDevice setFocusMode:AVCaptureFocusModeAutoFocus];
if ([captureDevice isFocusPointOfInterestSupported]) {
[captureDevice setFocusPointOfInterest:point];
// 设置曝光
if ([captureDevice isExposureModeSupported:AVCaptureExposureModeAutoExpose]) {
[captureDevice setExposureMode:AVCaptureExposureModeAutoExpose];
if ([captureDevice isExposurePointOfInterestSupported]) {
[captureDevice setExposurePointOfInterest:point];
// 解锁配置
[captureDevice unlockForConfiguration];
后续还会更新更多有关直播的资料，希望做到教会每一个朋友从零开始做一款直播app，并且Demo也会慢慢完善.
由于FFMPEG库比较大，大概100M。
本来想自己上传所有代码了，上传了1个小时，还没成功，就放弃了。
提供另外一种方案，需要你们自己导入IJKPlayer库
具体步骤：
下载Demo后，打开YZLiveApp.xcworkspace问题
打开YZLiveApp.xcworkspace问题
pod install就能解决
下载jkplayer库，
把jkplayer直接拖入到与Classes同一级目录下，直接运行程序，就能成功了
拖入ijkplayer到与Classes同一级目录下.png
注意不需要打开工程，把jkplayer拖入到工程中，而是直接把jkplayer库拷贝到与Classes同一级目录下就可以了。
错误示范:不要向下面这样操作
别整些没用的，喜欢刨根问底！实用性永远第一位?
最终诉求？ 拍摄、保存、播放、上传。就这四个步骤，当然首先拍摄就有许许多多的优化小功能，切换摄像头、单击跳帧焦距、双击远近距离切换、上移取消拍摄。 保存功能就只有一个保存到本地沙盒的功能。 播放自然就涉及到原生或是三方库来播放的问题，用什么第三方库来播放。 上传就有几种情况...
原文链接http://www.cnblogs.com/kenshincui/p/4186022.html 音频在iOS中音频播放从形式上可以分为音效播放和音乐播放。前者主要指的是一些短音频播放，通常作为点缀音频，对于这类音频不需要进行进度、循环等控制。后者指的是一些较长的音...
iOS开发中经常要用到生成二维码与扫描二维码的功能，iOS7开始，系统支持原生的扫描二维码，iOS7 扫描二维码可以，但从相册照片读取二维码苹果不支持，必须是iOS8+。在 iOS7 以前，在iOS中实现二维码和条形码扫描，我们所知的有，两大开源组件ZBar与ZXing，这...
#直播总结 ##1.概述 关于直播的技术文章不少，成体系的不多。我们将用这篇文章，更系统化地介绍当下大热的视频直播各环节的关键技术，帮助视频直播创业者们更全面、深入地了解视频直播技术，更好地技术选型。 ###1.1 一个完整的直播APP原理 `直播原理` : 把主播录制的视...
要管理从相机或麦克风等设备进行捕获，您将组合对象以表示输入和输出，并使用一个实例AVCaptureSession来协调它们之间的数据流。最小的需要： AVCaptureDevice表示输入设备的实例，例如相机或麦克风 AVCaptureInput从输入设备配置端口的具体子类...
“ 解忧编辑们好： 要上大学了，这些天为了志愿没少发愁。其实也怨自己分数少，高考发挥失常，比平时少了将近四十分，只能走二本，但不想复读。 对比之后初步确定几个学校，打算出省…当时没考虑地域问题。但我确实是从小到大算是没离开过家。妈妈对我的自立能力质疑很深，在她眼里感觉我好像...
一夜风吹雨 枝桠晃不停 凉风窗隙过 此夜寒人心
十年前来到这个江南小城，陌生的城市，只有老蔡一人属于我，栖身于十平米的宿舍，和老蔡过着想象中的二人世界。 这里是老蔡毕业后选择的小城，缘于这里有稳定的工作和看上去不错的收入，对于一个大学毕业的学生来说，一份想要的稳定，足以吸引人留下，安定。 而我离开自己熟悉的地方，背井离乡...
最佳药引：干货和湿货，都有它们的法门
01 写作其实是件非常私人的事，下笔的过程就是搭建自己世界的过程。你是这个空间里唯一的设计师，里面所有的门庭雕花，一草一木都是按照你的意志来建设。 写作又是一件极其难的事，特别是想吸引人来读你的文章。...
又到年底了，大家都在自嘲，新一年的目標就是把這一年年初制定的上一年的計劃給落實了。有人還搞出個升級版來——f(2017) = f(2016) + f(2015) 記得有次跟 @呆Kim 聊天，說「今年還學了不少東西，但怎麼還是這麼慌呢？」這貨說「那是因爲你學的東西都沒有變現...手机做摄像头监控看家方法
互联网 & 04-18 15:50:26 & 作者：佚名 &
目前每家每户都有许多废弃的手机不在使用，旧手机改造成摄像头监控家里情况从而使旧手机得到二次利用，那么，怎么用手机做摄像头进行监控看家呢？对此，本文就为大家进行解答
一、使用背景介绍：
当今手机作为更新换代很快的电子产品，每家每户都有许多废弃的手机不在使用，旧手机改造成摄像头监控家里情况从而使旧手机得到二次利用，旧手机要做为摄像头看家必须按照对应app软件，因为目前手机厂家系统没有自带远程摄像头监控功能。
二、技术原理分析：
1.其中一部旧手机A放在家中墙上或其它位置作为摄像头用。
2.用户正在使用的手机B作为摄像头浏览端查看家里情况。
3.用户要想查看家里情况手机A必须必须链接家里wifi，同时手机B也链接网络。
4.做为摄像头手机B实时监听手机A发送监控请求，如果手机A发送监控请求。
5.做摄像头旧手机B接受到手机A发送请求，开启监控并发送视频流帧。
6.手机B视频帧数据通过中转服务器到达浏览端用户手机A完成视频监控功能。
三、网络拓扑图：
四、手机做摄像头优点：
1.低成本：家中只要有不再使用的旧android手机就可以做为摄像头实现废物利用。
2.安装简单：将手机通过支架固定在墙上或其它地方就完成安装。
3.拆卸方便：不用时直接拿掉就可以。
4.不用布线：手机通过wifi无线连接，所以安装时不像传统摄像头安装时布置网线。
5.观察方便：用户随身携带手机不受空间时间限制只要能上网就可以浏览家中情况。
五、相关软件介绍：
1.手机监控看家app一般都是分为：采集端和浏览端两个app应用。
2.先安装浏览端app软件在手机A：下载浏览端-&注册账号-&输入手机号-&获得验证码-&输入验证码-&填写密码-&提交账号-&如果注册成功-&登录系统。
3.再安装采集端app软件在手机B：下载采集端-&用相同账号密码登录。
4.软件授权：如果您的手机带&安全中心&,&i管家&等安全软件一定要给采集端授权（特别注意否则无法浏览视频）。
5.如果需长时间监视家里情况，可以给采集端手机外接充电器或充电宝防止手机没电(根据你手机电池的安全性决定)。
六、注意事项：
1.两部手机必须都能上网。
2.如果您的手机带&安全中心&,&i管家&等安全软件一定要给app授权。
3.采集端app界面要始终在屏幕上方正常显示，不可退出或隐藏（特别注意否则无法浏览视频）。
4.手机强烈建议通过wifi连接网络如果通过蜂窝流量上网会占用大量流量。
5.建议将采集端手机B不用app全部卸载，不要带微信或支付宝等重要软件，因为采集端手机只作为摄像头应用脱离人员管理。
6.如果需长时间监视家中情况，可以给采集端手机外接通电器或充电宝防止手机没电(这个自己决定)。
七、浏览端使用手册：
1.下载安装&千里行看家浏览端&安装在你的手机A中.(可以在&应用宝&,&百度手机助手&找到)。
2.下载安装&千里行看家采集端&安装旧手机B中.(可以在浏览端-&技术帮助中找到下载地址)。
3.下载安装&千里行看家浏览端&第一次需注册账号输入手机号，密码，验证码完成注册。
4.注册成功后输入&手机号，密码&登录。
5.录成功后进入主界面，点击&监视&进入摄像头列表。
6.进入采集端列表界面后会显示已经安装的手机数及型号名称，如果你没有在旧手机B中安装&千里行看家采集端&列表会显现空并提示你在另一部手机中安装。蓝色：图标表示采集端app运行正常，用户可以正常浏览视频。紫色：图标表示采集端app在后台运行，在Android4.4版本以后不能浏览。灰色：为手机B关机或采集端app退出。
7.点击对应采集端进入视频监控界面。连接采集端手机需要一定时间，长时间连接不上可以关闭浏览界面重新点击浏览。
8.夜间家中无人没有开灯可以开启手机补光灯，前提是你的手机B中带有补光灯。
八、采集端使用手册：
1.下载安装采集端，点击进入会提示你&千里行看家采集端&请求拍照权限，是否允许？点击&允许&。
2.第一次使用需要输入和浏览端一样的&手机号,密码&点击提交登录。
3.登录进入主界面后全部设置完毕，就可以将此手机固定在家中墙或镜子上做为摄像头使用。说明：当网络状态是正常的情况主界面中间&齿轮&是转动的否则是停止的。
大家感兴趣的内容
12345678910
最近更新的内容}