当前位置：首页 > 编程日记 > 正文

【如何快速的开发一个完整的iOS直播app】(美颜篇)

编程日记 2024-08-01 17:00:00

前言

在看这篇之前，如果您还不了解直播原理，请查看这篇文章如何快速的开发一个完整的iOS直播app(原理篇)

开发一款直播app，美颜功能是很重要的，如果没有美颜功能，可能分分钟钟掉粉千万，本篇主要讲解直播中美颜功能的实现原理，并且实现美颜功能。

如果喜欢我的文章，可以关注我微博:袁峥Seemygo

利用GPUImage处理直播过程中美颜的流程

采集视频 => 获取每一帧图片 => 滤镜处理 => GPUImageView展示

美颜原理.png

美颜基本概念

GPU：（Graphic Processor Unit图形处理单元）手机或者电脑用于图像处理和渲染的硬件

GPU工作原理：采集数据-> 存入主内存(RAM) -> CPU(计算处理) -> 存入显存(VRAM) -> GPU(完成图像渲染) -> 帧缓冲区 -> 显示器

GPU工作原理.jpg

OpenGL ES：（Open Graphics Library For Embedded(嵌入的) Systems 开源嵌入式系统图形处理框架），一套图形与硬件接口，用于把处理好的图片显示到屏幕上。

GPUImage:是一个基于OpenGL ES 2.0图像和视频处理的开源iOS框架，提供各种各样的图像处理滤镜，并且支持照相机和摄像机的实时滤镜，内置120多种滤镜效果，并且能够自定义图像滤镜。

滤镜处理的原理:就是把静态图片或者视频的每一帧进行图形变换再显示出来。它的本质就是像素点的坐标和颜色变化

GPUImage处理画面原理

GPUImage采用链式方式来处理画面,通过addTarget:方法为链条添加每个环节的对象，处理完一个target,就会把上一个环节处理好的图像数据传递下一个target去处理，称为GPUImage处理链。
- 比如：墨镜原理，从外界传来光线，会经过墨镜过滤，在传给我们的眼睛，就能感受到大白天也是乌黑一片，哈哈。
- 一般的target可分为两类
  - 中间环节的target, 一般是各种filter, 是GPUImageFilter或者是子类.
  - 最终环节的target, GPUImageView：用于显示到屏幕上, 或者GPUImageMovieWriter：写成视频文件。
GPUImage处理主要分为3个环节
- source(视频、图片源) -> filter（滤镜） -> final target (处理后视频、图片)
- GPUImaged的Source:都继承GPUImageOutput的子类，作为GPUImage的数据源,就好比外界的光线，作为眼睛的输出源
  - GPUImageVideoCamera：用于实时拍摄视频
  - GPUImageStillCamera：用于实时拍摄照片
  - GPUImagePicture：用于处理已经拍摄好的图片，比如png,jpg图片
  - GPUImageMovie：用于处理已经拍摄好的视频,比如mp4文件
- GPUImage的filter:GPUimageFilter类或者子类，这个类继承自GPUImageOutput,并且遵守GPUImageInput协议，这样既能流进，又能流出，就好比我们的墨镜，光线通过墨镜的处理，最终进入我们眼睛
- GPUImage的final target:GPUImageView,GPUImageMovieWriter就好比我们眼睛，最终输入目标。

GPUImage处理原理.png

美颜原理

磨皮(GPUImageBilateralFilter)：本质就是让像素点模糊，可以使用高斯模糊，但是可能导致边缘会不清晰，用双边滤波(Bilateral Filter) ，有针对性的模糊像素点，能保证边缘不被模糊。
美白(GPUImageBrightnessFilter)：本质就是提高亮度。

美颜效果

关注效果，忽悠本人

GPUImage原生美颜效果

GPUImage原生.gif

利用美颜滤镜实现效果

美颜滤镜处理.gif

GPUImage实战

GPUImage原生美颜

步骤一：使用Cocoapods导入GPUImage
步骤二：创建视频源GPUImageVideoCamera
步骤三：创建最终目的源：GPUImageView
步骤四：创建滤镜组(GPUImageFilterGroup)，需要组合亮度(GPUImageBrightnessFilter)和双边滤波(GPUImageBilateralFilter)这两个滤镜达到美颜效果.
步骤五：设置滤镜组链
步骤六：设置GPUImage处理链，从数据源 => 滤镜 => 最终界面效果
步骤七：开始采集视频

注意点：

SessionPreset最好使用AVCaptureSessionPresetHigh，会自动识别，如果用太高分辨率，当前设备不支持会直接报错
GPUImageVideoCamera必须要强引用，否则会被销毁，不能持续采集视频.
必须调用startCameraCapture，底层才会把采集到的视频源，渲染到GPUImageView中，就能显示了。
GPUImageBilateralFilter的distanceNormalizationFactor值越小，磨皮效果越好,distanceNormalizationFactor取值范围: 大于1。

- (void)viewDidLoad {[super viewDidLoad];// 创建视频源// SessionPreset:屏幕分辨率，AVCaptureSessionPresetHigh会自适应高分辨率// cameraPosition:摄像头方向GPUImageVideoCamera *videoCamera = [[GPUImageVideoCamera alloc] initWithSessionPreset:AVCaptureSessionPresetHigh cameraPosition:AVCaptureDevicePositionFront];videoCamera.outputImageOrientation = UIInterfaceOrientationPortrait;_videoCamera = videoCamera;// 创建最终预览ViewGPUImageView *captureVideoPreview = [[GPUImageView alloc] initWithFrame:self.view.bounds];[self.view insertSubview:captureVideoPreview atIndex:0];// 创建滤镜：磨皮，美白，组合滤镜GPUImageFilterGroup *groupFilter = [[GPUImageFilterGroup alloc] init];// 磨皮滤镜GPUImageBilateralFilter *bilateralFilter = [[GPUImageBilateralFilter alloc] init];[groupFilter addTarget:bilateralFilter];_bilateralFilter = bilateralFilter;// 美白滤镜GPUImageBrightnessFilter *brightnessFilter = [[GPUImageBrightnessFilter alloc] init];[groupFilter addTarget:brightnessFilter];_brightnessFilter = brightnessFilter;// 设置滤镜组链[bilateralFilter addTarget:brightnessFilter];[groupFilter setInitialFilters:@[bilateralFilter]];groupFilter.terminalFilter = brightnessFilter;// 设置GPUImage响应链，从数据源 => 滤镜 => 最终界面效果[videoCamera addTarget:groupFilter];[groupFilter addTarget:captureVideoPreview];// 必须调用startCameraCapture，底层才会把采集到的视频源，渲染到GPUImageView中，就能显示了。// 开始采集视频[videoCamera startCameraCapture];
}- (IBAction)brightnessFilter:(UISlider *)sender {_brightnessFilter.brightness = sender.value;
}- (IBAction)bilateralFilter:(UISlider *)sender {// 值越小，磨皮效果越好CGFloat maxValue = 10;[_bilateralFilter setDistanceNormalizationFactor:(maxValue - sender.value)];
}

利用美颜滤镜实现

步骤一：使用Cocoapods导入GPUImage
步骤二：导入GPUImageBeautifyFilter文件夹
步骤三：创建视频源GPUImageVideoCamera
步骤四：创建最终目的源：GPUImageView
步骤五：创建最终美颜滤镜：GPUImageBeautifyFilter
步骤六：设置GPUImage处理链，从数据源 => 滤镜 => 最终界面效果

注意：

切换美颜效果原理：移除之前所有处理链，重新设置处理链

- (void)viewDidLoad {[super viewDidLoad];// Do any additional setup after loading the view.// 创建视频源// SessionPreset:屏幕分辨率，AVCaptureSessionPresetHigh会自适应高分辨率// cameraPosition:摄像头方向GPUImageVideoCamera *videoCamera = [[GPUImageVideoCamera alloc] initWithSessionPreset:AVCaptureSessionPresetHigh cameraPosition:AVCaptureDevicePositionFront];videoCamera.outputImageOrientation = UIInterfaceOrientationPortrait;_videoCamera = videoCamera;// 创建最终预览ViewGPUImageView *captureVideoPreview = [[GPUImageView alloc] initWithFrame:self.view.bounds];[self.view insertSubview:captureVideoPreview atIndex:0];_captureVideoPreview = captureVideoPreview;// 设置处理链[_videoCamera addTarget:_captureVideoPreview];// 必须调用startCameraCapture，底层才会把采集到的视频源，渲染到GPUImageView中，就能显示了。// 开始采集视频[videoCamera startCameraCapture];}- (IBAction)openBeautifyFilter:(UISwitch *)sender {// 切换美颜效果原理：移除之前所有处理链，重新设置处理链if (sender.on) {// 移除之前所有处理链[_videoCamera removeAllTargets];// 创建美颜滤镜GPUImageBeautifyFilter *beautifyFilter = [[GPUImageBeautifyFilter alloc] init];// 设置GPUImage处理链，从数据源 => 滤镜 => 最终界面效果[_videoCamera addTarget:beautifyFilter];[beautifyFilter addTarget:_captureVideoPreview];} else {// 移除之前所有处理链[_videoCamera removeAllTargets];[_videoCamera addTarget:_captureVideoPreview];}}

GPUImage扩展

GPUImage所有滤镜介绍
美颜滤镜
美图秀秀滤镜大汇总

源码下载

源码
注意：第一次打开需要 pod install

结束语

后续还会讲解GPUImage原理openGL ES，视频编码，推流，聊天室，礼物系统等更多功能，敬请关注！！！

作者：袁峥
链接：https://www.jianshu.com/p/4646894245ba
來源：简书
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

https://www.dkcj.cn/info/12377.html

Linux内核分析——第五章系统调用

第五章系统调用 5.1 与内核通信 1、系统调用在用户空间进程和硬件设备之间添加了一个中间层，该层主要作用有三个： （1）为用户空间提供了一种硬件的抽象接口 （2）系统调用保证了系统的稳定和安全 &#xff08…

编程日记2024/08/01 16:50:00

http://www.lydsy.com/JudgeOnline/problem.php?id3110 整体二分区间修改树状数组维护 #include<cstdio> #define FOR(i,s,t) for(register int is;i<t;i) inline int max(int a,int b){return a>b?a:b;} inline int min(int a,int b){return a<b?a:b;} type…

编程日记2024/08/01 16:40:00

css 选择器伪元素_CSS伪元素-解释选择器之前和之后

css 选择器伪元素选择器之前 (Before Selector) The CSS ::before selector can be used to insert content before the content of the selected element or elements. It is used by attaching ::before to the element it is to be used on.CSS ::before选择器可用于在选定…

编程日记2024/08/01 16:30:00

各种面试题啊1

技术基础 1.为什么说Objective-C是一门动态的语言？ 什么叫动态静态静态、动态是相对的，这里动态语言指的是不需要在编译时确定所有的东西，在运行时还可以动态的添加变量、方法和类 Objective-C 可以通过Runtime 这个运行时机制&#xff0c…

编程日记2024/08/01 16:20:00

PEP8 Python

写在前面对于代码而言，相比于写，它更多是读的。 pep8 一、代码编排缩进，4个空格的缩进，编辑器都可以完成此功能；每行最大长度79，换行可以使用反斜杠，换行点要在操作符的后边。类和top-level函…

编程日记2024/08/01 16:10:00

粒子滤波应用_如何使用NativeScript开发粒子物联网应用

粒子滤波应用If youre developing any type of IoT product, inevitably youll need some type of mobile app. While there are easy ways, theyre not for production use.如果您要开发任何类型的物联网产品，则不可避免地需要某种类型的移动应用程序。尽管有简单…

编程日记2024/08/01 16:00:00

wkwebView基本使用方法

WKWebView有两个delegate,WKUIDelegate 和 WKNavigationDelegate。WKNavigationDelegate主要处理一些跳转、加载处理操作，WKUIDelegate主要处理JS脚本，确认框，警告框等。因此WKNavigationDelegate更加常用。比较常用的方法： #p…

编程日记2024/08/01 15:50:00

引用类型(一)：Object类型

对象表示方式 1、第一种方式：使用new操作符后跟Object构造函数 var person new Object();<br/> person.name Nicholas;<br/> person.age 29; 2、对象字面量表示法 var person {name:Nicholas,age:29 } *:在age属性的值29的后面不能添加逗号&#xf…

编程日记2024/08/01 15:40:00

（第四周）要开工了

忙碌的一周又过去了，这周的时间很紧，但是把时间分配的比较均匀，考研复习和各门功课都投入了一定的精力，所以不像前三周一样把大多数时间都花费在了软件工程上。也因为结对项目刚开始，我们刚刚进行任务分工以及查找资料…

编程日记2024/08/01 15:30:00

统计数字,空白符,制表符_为什么您应该在HTML中使用制表符空间而不是多个非空白空间（nbsp）...

统计数字,空白符,制表符There are a number of ways to insert spaces in HTML. The easiest way is by simply adding spaces or multiple character entities before and after the target text. Of course, that isnt the DRYest method.有多种方法可以在HTML中插入空格。…

编程日记2024/08/01 15:20:00

Python20-Day02

1、数据数据为什么要分不同的类型数据是用来表示状态的，不同的状态就应该用不同类型的数据表示； 数据类型数字（整形，长整形，浮点型，复数），字符串，列表，元组…

编程日记2024/08/01 15:10:00

Android网络框架-OkHttp3.0总结

一、概述 OkHttp是Square公司开发的一款服务于android的一个网络框架，主要包含： 一般的get请求一般的post请求基于Http的文件上传文件下载加载图片支持请求回调，直接返回对象、对象集合支持session的保持github地址：https://githu…

编程日记2024/08/01 15:00:00

第一天写，希望能坚持下去。

该想的都想完了，不该想的似乎也已经尘埃落定了。有些事情，终究不是靠努力或者不努力获得的。顺其自然才是正理。以前很多次想过要努力，学习一些东西，总是不能成，原因很多： 1.心中烦恼，不想学…

编程日记2024/08/01 14:50:00

mac gource_如何使用Gource显示项目的时间表

mac gourceThe first time I heard about Gource was in 2013. At the time I watched this cool video showing Ruby on Rails source code evolution:我第一次听说Gource是在2013年。当时，我观看了这段很酷的视频，展示了Ruby on Rails源代码的演变&a…

编程日记2024/08/01 14:40:00

insert语句让我学会的两个MySQL函数

我们要保存数据到数据库，插入数据是必须的，但是在业务中可能会出于某种业务要求，要在数据库中设计唯一索引；这时如果不小心插入一条业务上已经存在同样key的数据时，就会出现异常。大部分的需求要求我们出现唯一键冲突…

编程日记2024/08/01 14:30:00

对PInvoke函数函数调用导致堆栈不对称。原因可能是托管的 PInvoke 签名与非托管的目标签名不匹配。...

C#引入外部非托管类库时，有时候会出现“对PInvoke函数调用导致堆栈不对称。原因可能是托管的 PInvoke 签名与非托管的目标签名不匹配”的报错。通常在DllImport标签内加入属性CallingConventionCallingConvention.Cdecl即可解决该问题。如： [Dll…

编程日记2024/08/01 14:20:00

【问题】c/c++函数内部动态分配的内存，函数执行完毕会释放吗？

编程日记2024/08/01 14:10:00

Python字符串方法用示例解释

字符串查找方法 (String Find Method) There are two options for finding a substring within a string in Python, find() and rfind().在Python中的字符串中有两个选项可以找到子字符串： find()和rfind() 。 Each will return the position that the substring …

编程日记2024/08/01 14:00:00

关于命名空间namespace

虽然任意合法的PHP代码都可以包含在命名空间中，但只有以下类型的代码受命名空间的影响，它们是：类（包括抽象类和traits）、接口、函数和常量。在声明命名空间之前唯一合法的代码是用于定义源文件编码方式的 declare 语句…

编程日记2024/08/01 13:50:00

一梳理从 HDFS 到 MR。

MapReduce 不仅仅是一个工具，更是一个框架。我们必须拿问题解决方案去适配框架的 map 和 reduce 过程很多情况下，需要关注 MapReduce 作业所需要的系统资源，尤其是集群内部网络资源的使用情况。这是MapReduce 框架在设计上的取舍，…

编程日记2024/08/01 13:40:00

huffman树和huffman编码

不知道为什么，我写的代码都是又臭又长。直接上代码： #include <iostream> #include <cstdarg> using namespace std; class Node{ public:int weight;int parent, lChildren, rChildren;Node(int weight, int parent, int lChildren, int …

编程日记2024/08/01 13:30:00

react 监听组合键_投资组合中需要的5个React项目

react 监听组合键Youve put in the work and now you have a solid understanding of the React library.您已经完成工作，现在对React库有了扎实的了解。 On top of that, you have a good grasp of JavaScript and are putting its most helpful features to use …

编程日记2024/08/01 13:20:00

Unity 单元测试(PLUnitTest工具)

代码测试的由来上几个星期上面分配给我一个装备系统,我经过了几个星期的战斗写完90%的代码. 后来策划告诉我需求有一定的改动,我就随着策划的意思修改了代码. 但是测试(Xu)告诉我装备系统很多功能都用不上了. Xu: 我有300多项测试用例,现在有很多项都无法运行了. 你修改了部分…

编程日记2024/08/01 13:10:00

Best Time to Buy and Sell Stock II

题目： Say you have an array for which the i th element is the price of a given stock on day i. Design an algorithm to find the maximum profit. You may complete as many transactions as you like (ie, buy one and sell one share of the stock multipl…

编程日记2024/08/01 13:00:00

求给定集合的幂集

数据结构中说这个问题可以用类似8皇后的状态树解法。把求解过程看成是一棵二叉树，空集作为root，然后遍历给定集合中的元素，左子树表示取该元素，右子树表示舍该元素。然后，root的左右元素分别重复上述过程。就形成…

编程日记2024/08/01 12:50:00

angular 命令行项目_Angular命令行界面介绍

angular 命令行项目Angular is closely associated with its command-line interface (CLI). The CLI streamlines generation of the Angular file system. It deals with most of the configuration behind the scenes so developers can start coding. The CLI also has a l…

编程日记2024/08/01 12:40:00

前言