首页 > 编程知识 正文

手机现场直播怎样做到,免费网络直播系统

时间:2023-05-04 11:00:44 阅读:172622 作者:3516

要开发一个完整的手机直播系统,首先需要收集播音员的视频和音频功能,并将其引入到流媒体服务器中。 本篇介绍播音员的视频和语音功能的收集方法。 目前,您可以在前置摄像头和焦点光标之间切换。 现场APP有独立的美颜SDK,可以看到不同的你。 之后,演唱会的其他功能文章也将陆续发表。

首先,说明在手机直播系统中捕获音视频的步骤:

创建AVCaptureSession对象获取AVCaptureDevicel录制设备(照相机)、录制设备(麦克风),但不具备数据输入功能,仅用于调整硬件设备的布局。 3 .基于音频/视频硬件设备(AVCaptureDevice )创建音频/视频硬件输入数据对象(AVCaptureDeviceInput )以专门管理数据输入。 4 .创建视频输出数据管理对象(AVCaptureVideoDataOutput )并设置示例缓存代理(setSampleBufferDelegate )。 可以获得收集的视频数据)5.音频输出数据管理对象)创建AVCaptureAudioDataOutput和示例缓存代理(setSampleBufferDelegate ) 可以获得通过其收集的音频数据6 .将数据输入对象的AVCaptureDeviceInput、数据输出对象的AVCaptureOutput添加到媒体会话管理对象的AVCaptureSession中,获得音频数据7 .创建视频预览图层AVCaptureVideoPreviewLayer,指定媒体会话,然后将图层添加到显示容器layer中。 必须启动并打开AVCaptureSession,才能开始向输入输出数据流传输。 //捕获音频视频--(void ) setupcaputurevideo(/1 .必须创建捕获会话并强烈引用。 否则,avcapture session * capture session=[ avcapturesesionalloc ]将被释放_captureSession=captureSession; //2 .获取照相机装置,默认为背面照相机avcapture device * video device=[ selfgetvideodevice 3360 avcapturedevicepositionfront ]; //3 .声音设备avcapture device * audio device=[ avcapturedevicedefaultdevicewithmediatype 3360 avmediatypeaudio ]; //4 .创建对应的视频设备输入对象avcapturedeviceinput * videodeviceinput=[ avcapturedeviceinputdeviceinputwithdevice 3360 videode //5 .与音频设备对应的输入对象avcapturedeviceinput * audiodeviceinput=[ avcapturedeviceinputdeviceinputwithdevice 3360 audiodevicevice 不能向会话添加空//6.1视频if (capturesessioncanaddinput 3360视频视频输入)。 ) (capturesessionaddinput ) ) ) capturesesionaddin } //6.2音频if (capturesessioncanaddinput : audiodeviceinput ) ) [ caparese //7 .视频数据输出设备avcapturevideodataoutput * video output=[ avcapturevideodataoutputalloc ] init; //7.1设置代理,捕获视频示例数据//注意:要获取数据,队列必须是串行队列。 空的dispatch _ queue _ tvideo queue=dispatch _ queue _ create (videocapturequeueue ) (不能为videoutputsetsamplebuffeue ) 捕获单元sessioncanaddoutput :视频输出) [捕获单元sessionaddoutput 3360视频输出]; //8 .音频数据输出设备avcaptureaudiodataoutput * audio output=[ avcaptureaudiodataoutputalloc ] init; //8.2安装代理,捕获视频样本数据//注意:队列是

是串行队列,才能获取到数据,而且不能为空 dispatch_queue_t audioQueue = dispatch_queue_create("Audio Capture Queue", DISPATCH_QUEUE_SERIAL); [audioOutput setSampleBufferDelegate:self queue:audioQueue]; if ([captureSession canAddOutput:audioOutput]) { [captureSession addOutput:audioOutput]; } // 9.获取视频输入与输出连接,用于分辨音视频数据 _videoConnection = [videoOutput connectionWithMediaType:AVMediaTypeVideo]; // 10.添加视频预览图层 AVCaptureVideoPreviewLayer *previedLayer = [AVCaptureVideoPreviewLayer layerWithSession:captureSession]; previedLayer.frame = [UIScreen mainScreen].bounds; [self.view.layer insertSublayer:previedLayer atIndex:0]; _previedLayer = previedLayer; // 11.启动会话 [captureSession startRunning];}// 指定摄像头方向获取摄像头- (AVCaptureDevice *)getVideoDevice:(AVCaptureDevicePosition)position{ NSArray *devices = [AVCaptureDevice devicesWithMediaType:AVMediaTypeVideo]; for (AVCaptureDevice *device in devices) { if (device.position == position) { return device; } } return nil;}#pragma 快乐的大地 - AVCaptureVideoDataOutputSampleBufferDelegate// 获取输入设备数据,有可能是音频有可能是视频- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection{ if (_videoConnection == connection) { NSLog(@"采集到视频数据"); } else { NSLog(@"采集到音频数据"); }}

其次:讲解一下在手机直播系统中视频采集额外功能一(切换摄像头)
切换摄像头步骤
1.获取当前视频设备输入对象
2.判断当前视频设备是前置还是后置
3.确定切换摄像头的方向
4.根据摄像头方向获取对应的摄像头设备
5.创建对应的摄像头输入对象
6.从会话中移除之前的视频输入对象
7.添加新的视频输入对象到会话中。

// 切换摄像头- (IBAction)toggleCapture:(id)sender { // 获取当前设备方向 AVCaptureDevicePosition curPosition = _currentVideoDeviceInput.device.position; // 获取需要改变的方向 AVCaptureDevicePosition togglePosition = curPosition == AVCaptureDevicePositionFront?AVCaptureDevicePositionBack:AVCaptureDevicePositionFront; // 获取改变的摄像头设备 AVCaptureDevice *toggleDevice = [self getVideoDevice:togglePosition]; // 获取改变的摄像头输入设备 AVCaptureDeviceInput *toggleDeviceInput = [AVCaptureDeviceInput deviceInputWithDevice:toggleDevice error:nil]; // 移除之前摄像头输入设备 [_captureSession removeInput:_currentVideoDeviceInput]; // 添加新的摄像头输入设备 [_captureSession addInput:toggleDeviceInput]; // 记录当前摄像头输入设备 _currentVideoDeviceInput = toggleDeviceInput;}视频采集额外功能二(聚焦光标),聚焦光标步骤1.监听屏幕的点击2.获取点击的点位置,转换为摄像头上的点,必须通过视频预览图层(AVCaptureVideoPreviewLayer)转3.设置聚焦光标图片的位置,并做动画4.设置摄像头设备聚焦模式和曝光模式(注意:这里设置一定要锁定配置lockForConfiguration,否则报错)// 点击屏幕,出现聚焦视图- (void)touchesBegan:(NSSet<UITouch *> *)touches withEvent:(UIEvent *)event{ // 获取点击位置 UITouch *touch = [touches anyObject]; CGPoint point = [touch locationInView:self.view]; // 把当前位置转换为摄像头点上的位置 CGPoint cameraPoint = [_previedLayer captureDevicePointOfInterestForPoint:point]; // 设置聚焦点光标位置 [self setFocusCursorWithPoint:point]; // 设置聚焦 [self focusWithMode:AVCaptureFocusModeAutoFocus exposureMode:AVCaptureExposureModeAutoExpose atPoint:cameraPoint];}/** * 设置聚焦光标位置 * * @param point 光标位置 */-(void)setFocusCursorWithPoint:(CGPoint)point{ self.focusCursorImageView.center=point;self.focusCursorImageView.transform=CGAffineTransformMakeScale(1.5, 1.5); self.focusCursorImageView.alpha=1.0; [UIView animateWithDuration:1.0 animations:^{ self.focusCursorImageView.transform=CGAffineTransformIdentity; } completion:^(BOOL finished) { self.focusCursorImageView.alpha=0; }];}/** * 设置聚焦 */-(void)focusWithMode:(AVCaptureFocusMode)focusMode exposureMode:(AVCaptureExposureMode)exposureMode atPoint:(CGPoint)point{ AVCaptureDevice *captureDevice = _currentVideoDeviceInput.device; // 锁定配置 [captureDevice lockForConfiguration:nil]; // 设置聚焦 if ([captureDevice isFocusModeSupported:AVCaptureFocusModeAutoFocus]) { [captureDevice setFocusMode:AVCaptureFocusModeAutoFocus]; } if ([captureDevice isFocusPointOfInterestSupported]) { [captureDevice setFocusPointOfInterest:point]; } // 设置曝光 if ([captureDevice isExposureModeSupported:AVCaptureExposureModeAutoExpose]) { [captureDevice setExposureMode:AVCaptureExposureModeAutoExpose]; } if ([captureDevice isExposurePointOfInterestSupported]) { [captureDevice setExposurePointOfInterest:point]; } // 解锁配置 [captureDevice unlockForConfiguration];}

最后:讲解一下手机直播系统运用的AVFoundation基本知识介绍。
AVFoundation: 音视频数据采集需要用AVFoundation框架。
AVCaptureDevice:硬件设备,包括麦克风、摄像头,通过该对象可以设置物理设备的一些属性(例如相机聚焦、白平衡等)
AVCaptureDeviceInput:硬件输入对象,可以根据AVCaptureDevice创建对应的AVCaptureDeviceInput对象,用于管理硬件输入数据。
AVCaptureOutput:硬件输出对象,用于接收各类输出数据,通常使用对应的子类AVCaptureAudioDataOutput(声音数据输出对象)、AVCaptureVideoDataOutput(视频数据输出对象)
AVCaptionConnection:当把一个输入和输出添加到AVCaptureSession之后,AVCaptureSession就会在输入、输出设备之间建立连接,而且通过AVCaptureOutput可以获取这个连接对象。
AVCaptureVideoPreviewLayer:相机拍摄预览图层,能实时查看拍照或视频录制效果,创建该对象需要指定对应的AVCaptureSession对象,因为AVCaptureSession包含视频输入数据,有视频数据才能展示。
AVCaptureSession: 协调输入与输出之间传输数据
系统作用:可以操作硬件设备
工作原理:让直播APP与系统之间产生一个捕获会话,相当于直播App与硬件设备有联系了, 我们只需要把硬件输入对象和输出对象添加到会话中,会话就会自动把硬件输入对象和输出产生连接,这样硬件输入与输出设备就能传输音视频数据。
以上就是手机直播系统直接调动介绍,简单介绍了AVFoundation的具体功能在直播APP当中的重要作用

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。