免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 114303 | 回复: 14

【好书推荐+有奖讨论】围观美女图像工程师如何玩转抖音、天天P图的美颜算法! [复制链接]

论坛徽章:
0
发表于 2020-07-28 10:00 |显示全部楼层
本次活动获得《人脸识别与美颜算法实战:基于Python、机器学习与深度学习》奖励的用户是:

@东风玖哥
@aloki
@fenyun689
@renxiao2003


请以上4位用户,请于10月30日前以站内的形式联系管理员飘絮絮絮丶,








话题背景:

计算机视觉是人工智能最重要的部分,尤其是人脸图像处理领域涌现了商汤、旷视、云丛、抖音等多家独角兽企业,2014年,中国人脸识别行业市场规模为49亿元;2018年,中国人脸识别行业市场规模为131亿元,年均复合增长率为37%,充分显示出了人脸图像处理技术的巨大的商用价值,大量的人脸相关应用不断呈现。机械工业出版社的《人脸识别与美颜算法实战:基于Python、机器学习与深度学习》一书,精选60余个人脸算法,涵盖抖音、天天P图、美颜相机、淘宝等热点APP的美图算法 ,目前是市场空白。本书作者是以为资深的美女图像工程师,且看她是如何解读人脸图像美颜问题。


话题讨论:

(1)各类美颜算法的基础技术是什么,是图像、是视频、还是AI?

(2)如何通过算法实现抖音视频中抖动、闪白、霓虹、时光倒流、视频反复、慢动作?

(3)国际上通用的视频美颜或美图类先进技术有哪些?国内和国际上的通用技术有区别吗?


活动时间:2020年7月28日-2020年8月28日

本期奖品:最佳积极参与经验分享奖5名,奖励价值99元的《人脸识别与美颜算法实战:基于Python、机器学习与深度学习》图书1本。


人脸识别与美颜算法实战:基于Python、机器学习与深度学习
方圆圆  著
书号:978-7-111-65045-4
印张:14.5(共232页)
书脊:12mm
定价:99.00元
成品尺寸:186*240
用纸:80克胶
上架建议:计算机/人工智能


人脸识别与美颜算法实战-立体封.jpg

内容简介:

    本书是一本新手入门人工智能图像处理技术的基础图书,其主旨是带领读者从零开始学习人脸识别与美颜算法的相关知识。书中介绍了Python图像处理的相关知识以及机器学习和深度学习理论及其在人脸识别与美颜领域中的应用。书中秉承知识点结合案例的方式讲解,穿插了60多个行业案例和代码进行实战,以降低读者的学习难度。
    本书共9章,前5章着重介绍了基本的Python编程和视频图像处理技术,包括基于Anaconda和PyCharm的环境搭建、各种数据处理的相关包(NumPy、Matplotlib等),还复现了抖音中各种视频特效的算法设计;后4章介绍了机器学习和深度学习在人脸图像处理领域中的算法与实战案例,包括基于分类器和卷积神经网络的经典应用、算法模型设计,以及目前主流的视频媒体中人脸美颜、虚拟试妆等算法的设计和复现。
    本书内容丰富,实例典型,实用性强,尤其适合熟悉Python但不熟悉框架而又想要了解和学习机器学习及深度学习在人脸图像处理应用中的初学者阅读,同时也适合有一定基础的程序员作为工具书和参考书使用。



图书试读: 序言 前言 目录.pdf (932 KB, 下载次数: 43)

论坛徽章:
0
发表于 2020-07-28 10:04 |显示全部楼层
美女作者哦,欢迎小伙伴们积极参加活动

论坛徽章:
140
2022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:5719周年集字徽章-庆
日期:2019-08-27 13:28:5615-16赛季CBA联赛之福建
日期:2019-09-10 11:43:2519周年集字徽章-周
日期:2019-12-12 10:54:0715-16赛季CBA联赛之福建
日期:2020-10-13 10:45:3220周年集字徽章-20	
日期:2020-10-28 13:53:0220周年集字徽章-庆
日期:2020-10-28 14:07:10
发表于 2020-07-28 15:48 来自手机 |显示全部楼层
美女作者都在用mac os

论坛徽章:
294
射手座
日期:2013-08-23 12:04:38射手座
日期:2013-08-23 16:18:12未羊
日期:2013-08-30 14:33:15水瓶座
日期:2013-09-02 16:44:31摩羯座
日期:2013-09-25 09:33:52双子座
日期:2013-09-26 12:21:10金牛座
日期:2013-10-14 09:08:49申猴
日期:2013-10-16 13:09:43子鼠
日期:2013-10-17 23:23:19射手座
日期:2013-10-18 13:00:27金牛座
日期:2013-10-18 15:47:57午马
日期:2013-10-18 21:43:38
发表于 2020-07-29 09:46 |显示全部楼层
飘絮絮絮丶 发表于 2020-07-28 10:04
美女作者哦,欢迎小伙伴们积极参加活动

是不是美颜出来的?

论坛徽章:
0
发表于 2020-07-29 09:48 |显示全部楼层
hellioncu 发表于 2020-07-29 09:46
是不是美颜出来的?

当然不是!快来参与活动

论坛徽章:
40
水瓶座
日期:2013-08-15 11:26:422015年辞旧岁徽章
日期:2015-03-03 16:54:152015年亚洲杯之乌兹别克斯坦
日期:2015-03-27 14:01:172015年亚洲杯之约旦
日期:2015-03-31 15:06:442015亚冠之首尔
日期:2015-06-16 23:24:37IT运维版块每日发帖之星
日期:2015-07-01 22:20:002015亚冠之德黑兰石油
日期:2015-07-08 09:32:07IT运维版块每日发帖之星
日期:2015-08-29 06:20:00IT运维版块每日发帖之星
日期:2015-08-29 06:20:00IT运维版块每日发帖之星
日期:2015-10-10 06:20:00IT运维版块每日发帖之星
日期:2015-10-11 06:20:00IT运维版块每日发帖之星
日期:2015-11-10 06:20:00
发表于 2020-07-31 12:00 |显示全部楼层
这个活动可以有 最近的确在做人脸相关的业务 只能说深入进去才知道 人脸识别没有期望的效果好 各种AI对抗,百度的AI也都分辨不出来,详情稍后更新哈

论坛徽章:
0
发表于 2020-08-03 09:29 |显示全部楼层
forgaoqiang 发表于 2020-07-31 12:00
这个活动可以有 最近的确在做人脸相关的业务 只能说深入进去才知道 人脸识别没有期望的效果好 各种AI对抗, ...

期待更新~

论坛徽章:
8
15-16赛季CBA联赛之青岛
日期:2017-05-25 14:27:3415-16赛季CBA联赛之深圳
日期:2017-07-19 09:39:23CU十四周年纪念徽章
日期:2017-08-29 16:08:0115-16赛季CBA联赛之佛山
日期:2017-08-30 19:12:5515-16赛季CBA联赛之山西
日期:2017-12-20 13:50:5519周年集字徽章-19
日期:2019-09-12 16:11:0719周年集字徽章-庆
日期:2019-09-12 16:13:3215-16赛季CBA联赛之北控
日期:2020-04-26 16:30:57
发表于 2020-08-06 16:40 |显示全部楼层
(一)各类美颜算法的基础技术是什么,是图像、是视频、还是AI?
“美颜”是一个深度学习+图像处理+图形学的技术。“美颜”牵涉到这些技术包括:人脸检测、人脸关键点定位、瘦脸、磨皮、美白等。其中,人脸检测、人脸关键点定位是用深度学习技术来做的;而瘦脸、磨皮和美白就牵涉到计算机图形学里的技术,使用OpenGL,Metal来对检测到的人脸进行渲染。

(二)如何通过算法实现抖音视频中抖动、闪白、霓虹、时光倒流、视频反复、慢动作?

这些都是需要利用FFmpeg来处理视频的,我只讨论自己最熟悉的关键帧处理:
(1)时光倒流是对视频帧进行重新排列得到的,在视频剪辑中被称为倒带效果。设置第20~60帧之间进行时光倒流的效果,也就是从第60帧开始重复播放第60~20帧,只要>读取视频,将第20~60帧的图像按照编号0~39保存下来,然后按照图片名39至0将图片合并成一个新的视频。
(2)视频反复则是设置第20~30帧之间视频反复的效果,也就是从第30帧开始重复播放到第30到20帧,然后再播放到第20-30帧。实现原理是读取视频,将第20~30帧的图像按照编号0~19保存下来,并保存成视频video1;然后对第0~19进行视频倒带操作,保存成视频video2;接下来按照video1、video2、video1、video2的顺序循环将视频合并到一起

(三)国际上通用的视频美颜或美图类先进技术有哪些?国内和国际上的通用技术有区别吗?
1、人脸检测技术大概有这么两种:一种是使用通用的目标检测网络来训练人脸检测模型,如faster-rcnn(一种目标检测网),ssd (Single Shot MultiBox Detector),yolo (You Only Look Once) 等等;另一种是使用专门的人脸检测网络,如cascadeCNN(Convolutional Neural Network Cascade for FaceDetection,级联结构的卷积神经网络,一种目标检测网络),MTCNN(Multi-task Cascaded Convolutional Neural Network,多任务级联卷积神经网络)等等。
2、人脸关键点定位技术也可分为深度学习前的时期和深度学习时期:传统的人脸关键点技术,有ASM(Active Shape Model,主动形状模型),AAM (Active Appearance Model,主动外观模型),CPR(Cascaded Pose Regression,级联姿势回归)等等;目前落地到产品上的人脸关键点定位,基本都是基于深度学习和卷积神经网络的。
3、瘦脸的原理是在shader(纹理)中通过对像素位置进行偏移来实现对脸部区域的放大缩小:由变形前坐标,根据变形映射关系,得到变形后坐标。
4、磨皮的目的是淡化细节,主要可以使用高斯滤波或者双边滤波
5、美白则是操作这个图片上的所有像素点,获得像素点的R、G、B、A的值然后获取到的值进行一定数目的增量。

评分

参与人数 1可用积分 +10 收起 理由
飘絮絮絮丶 + 10 很给力!

查看全部评分

论坛徽章:
8
15-16赛季CBA联赛之青岛
日期:2017-05-25 14:27:3415-16赛季CBA联赛之深圳
日期:2017-07-19 09:39:23CU十四周年纪念徽章
日期:2017-08-29 16:08:0115-16赛季CBA联赛之佛山
日期:2017-08-30 19:12:5515-16赛季CBA联赛之山西
日期:2017-12-20 13:50:5519周年集字徽章-19
日期:2019-09-12 16:11:0719周年集字徽章-庆
日期:2019-09-12 16:13:3215-16赛季CBA联赛之北控
日期:2020-04-26 16:30:57
发表于 2020-08-06 16:41 |显示全部楼层
(一)各类美颜算法的基础技术是什么,是图像、是视频、还是AI?
“美颜”是一个深度学习+图像处理+图形学的技术。“美颜”牵涉到这些技术包括:人脸检测、人脸关键点定位、瘦脸、磨皮、美白等。其中,人脸检测、人脸关键点定位是用深度学习技术来做的;而瘦脸、磨皮和美白就牵涉到计算机图形学里的技术,使用OpenGL,Metal来对检测到的人脸进行渲染。

(二)如何通过算法实现抖音视频中抖动、闪白、霓虹、时光倒流、视频反复、慢动作?

这些都是需要利用FFmpeg来处理视频的,我只讨论自己最熟悉的关键帧处理:
(1)时光倒流是对视频帧进行重新排列得到的,在视频剪辑中被称为倒带效果。设置第20~60帧之间进行时光倒流的效果,也就是从第60帧开始重复播放第60~20帧,只要>读取视频,将第20~60帧的图像按照编号0~39保存下来,然后按照图片名39至0将图片合并成一个新的视频。
(2)视频反复则是设置第20~30帧之间视频反复的效果,也就是从第30帧开始重复播放到第30到20帧,然后再播放到第20-30帧。实现原理是读取视频,将第20~30帧的图像按照编号0~19保存下来,并保存成视频video1;然后对第0~19进行视频倒带操作,保存成视频video2;接下来按照video1、video2、video1、video2的顺序循环将视频合并到一起

(三)国际上通用的视频美颜或美图类先进技术有哪些?国内和国际上的通用技术有区别吗?
1、人脸检测技术大概有这么两种:一种是使用通用的目标检测网络来训练人脸检测模型,如faster-rcnn(一种目标检测网),ssd (Single Shot MultiBox Detector),yolo (You Only Look Once) 等等;另一种是使用专门的人脸检测网络,如cascadeCNN(Convolutional Neural Network Cascade for FaceDetection,级联结构的卷积神经网络,一种目标检测网络),MTCNN(Multi-task Cascaded Convolutional Neural Network,多任务级联卷积神经网络)等等。
2、人脸关键点定位技术也可分为深度学习前的时期和深度学习时期:传统的人脸关键点技术,有ASM(Active Shape Model,主动形状模型),AAM (Active Appearance Model,主动外观模型),CPR(Cascaded Pose Regression,级联姿势回归)等等;目前落地到产品上的人脸关键点定位,基本都是基于深度学习和卷积神经网络的。
3、瘦脸的原理是在shader(纹理)中通过对像素位置进行偏移来实现对脸部区域的放大缩小:由变形前坐标,根据变形映射关系,得到变形后坐标。
4、磨皮的目的是淡化细节,主要可以使用高斯滤波或者双边滤波
5、美白则是操作这个图片上的所有像素点,获得像素点的R、G、B、A的值然后获取到的值进行一定数目的增量。

论坛徽章:
8
2017金鸡报晓
日期:2017-01-10 15:13:2915-16赛季CBA联赛之天津
日期:2019-06-20 14:25:4015-16赛季CBA联赛之天津
日期:2019-08-20 23:06:5319周年集字徽章-庆
日期:2019-08-27 13:24:4219周年集字徽章-19
日期:2019-09-06 18:55:5019周年集字徽章-年
日期:2019-09-06 18:55:5019周年集字徽章-周
日期:2019-09-20 17:18:2220周年集字徽章-CU
日期:2020-11-11 13:06:03
发表于 2020-08-09 23:12 |显示全部楼层
(1)各类美颜算法的基础技术是什么,是图像、是视频、还是AI?
只有先识别到人脸,才能够进行美颜。在动态美颜中,人脸识别的核心技术是“深度学习”,具体地就是在后台构建一个神经网络,然后利用海量的图片数据进行学习训练,最终生成一种能够自适应各种图片的算法。利用这种算法,就可以对任何一帧动态画面进行人脸识别。

(2)如何通过算法实现抖音视频中抖动、闪白、霓虹、时光倒流、视频反复、慢动作?
从相机采集到每一帧的画面都会由云端后台进行人脸识别,再标示出关键点的位置,结合图像处理技术,得到抖动、闪白、霓虹、时光倒流、视频反复、慢动作后的画面变成视频图像。

(3)国际上通用的视频美颜或美图类先进技术有哪些?国内和国际上的通用技术有区别吗?
就目前来说,直播美颜用的主流技术是OpenGL ES。它的好处首先是直接在GPU上运行的,所以性能高、功耗小,用在直播上比较划算。第二,它是跨平台的,iOS和安卓都支持,美颜效果能够直接在这两个平台上达到跨平台的效果。另外OpenGL ES有一个优势,就是有大量现成的开源库。比如像GPUImage,谷歌的grafika,还有基于安卓的一些具有实践意义的库,都是很常用的。网上也有一些比较热心的开发者把自己的美颜的算法直接开源,包括一整套解决方案,从采集到处理到美颜处理,到最后输出一个源编码,都有相关的解决方案。
美颜算法固然重要,但美更是一件很主观的事。算法写得非常优美和高效并不能保证美颜效果是最好的,所以用标准的算法处理后,还需要设计师依据自己的经验去进行调整。这就要求进行大量的测试,用技术手段结合人工去优化,才能保证最佳的美颜效果。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP