python进阶——网课不愁系列ai换脸技术(代码片段)

渣渣ye 渣渣ye     2022-12-02     729

关键词:

俗话说的好:网络一线牵,珍惜这段缘!
网络的水很深,年轻人你把握不住,众所周知照片是可以P的,但是“视频”是“P”不了的(狗头保命)

谁能想到AI换脸竟然如此便捷,在Python上小小拟合就可以完成实时视频换脸

请允许我小声介绍一下dlib库:

Dlib是一个现代化的C ++工具箱,其中包含用于在C ++中创建复杂软件以解决实际问题的机器学习算法和工具。它广泛应用于工业界和学术界,包括机器人,嵌入式设备,移动电话和大型高性能计算环境。Dlib的开源许可证 允许您在任何应用程序中免费使用它。

Dlib有很长的时间,包含很多模块,近几年作者主要关注在机器学习、深度学习、图像处理等模块的开发。

先看看效果图: 

毫无违和感(就当作毫无违和感吧,人丑不普信别骂~🐕)

上代码:

# -*- coding: utf-8 -*-

import cv2
import dlib
import numpy as np

detector = dlib.get_frontal_face_detector()  # dlib的正向人脸检测器
predictor = dlib.shape_predictor(r'shape_predictor_68_face_landmarks.dat')  # dlib的人脸形状检测器


def get_image_size(image):
    """
    获取图片大小(高度,宽度)
    :param image: image
    :return: (高度,宽度)
    """
    image_size = (image.shape[0], image.shape[1])
    return image_size


def get_face_landmarks(image, face_detector, shape_predictor):
    """
    获取人脸标志,68个特征点
    :param image: image
    :param face_detector: dlib.get_frontal_face_detector
    :param shape_predictor: dlib.shape_predictor
    :return: np.array([[],[]]), 68个特征点
    """
    dets = face_detector(image, 1)

    shape = shape_predictor(image, dets[0])
    face_landmarks = np.array([[p.x, p.y] for p in shape.parts()])
    return face_landmarks


def get_face_mask(image_size, face_landmarks):
    """
    获取人脸掩模
    :param image_size: 图片大小
    :param face_landmarks: 68个特征点
    :return: image_mask, 掩模图片
    """
    mask = np.zeros(image_size, dtype=np.uint8)
    points = np.concatenate([face_landmarks[0:16], face_landmarks[26:17:-1]])
    cv2.fillPoly(img=mask, pts=[points], color=255)
    return mask


def get_affine_image(image1, image2, face_landmarks1, face_landmarks2):
    """
    获取图片1仿射变换后的图片
    :param image1: 图片1, 要进行仿射变换的图片
    :param image2: 图片2, 只要用来获取图片大小,生成与之大小相同的仿射变换图片
    :param face_landmarks1: 图片1的人脸特征点
    :param face_landmarks2: 图片2的人脸特征点
    :return: 仿射变换后的图片
    """
    three_points_index = [18, 8, 25]
    M = cv2.getAffineTransform(face_landmarks1[three_points_index].astype(np.float32),
                               face_landmarks2[three_points_index].astype(np.float32))
    dsize = (image2.shape[1], image2.shape[0])
    affine_image = cv2.warpAffine(image1, M, dsize)
    return affine_image.astype(np.uint8)


def get_mask_center_point(image_mask):
    """
    获取掩模的中心点坐标
    :param image_mask: 掩模图片
    :return: 掩模中心
    """
    image_mask_index = np.argwhere(image_mask > 0)
    miny, minx = np.min(image_mask_index, axis=0)
    maxy, maxx = np.max(image_mask_index, axis=0)
    center_point = ((maxx + minx) // 2, (maxy + miny) // 2)
    return center_point


def get_mask_union(mask1, mask2):
    """
    获取两个掩模掩盖部分的并集
    :param mask1: mask_image, 掩模1
    :param mask2: mask_image, 掩模2
    :return: 两个掩模掩盖部分的并集
    """
    mask = np.min([mask1, mask2], axis=0)  # 掩盖部分并集
    mask = ((cv2.blur(mask, (5, 5)) == 255) * 255).astype(np.uint8)  # 缩小掩模大小
    mask = cv2.blur(mask, (3, 3)).astype(np.uint8)  # 模糊掩模
    return mask


def skin_color_adjustment(im1, im2, mask=None):
    """
    肤色调整
    :param im1: 图片1
    :param im2: 图片2
    :param mask: 人脸 mask. 如果存在,使用人脸部分均值来求肤色变换系数;否则,使用高斯模糊来求肤色变换系数
    :return: 根据图片2的颜色调整的图片1
    """
    if mask is None:
        im1_ksize = 55
        im2_ksize = 55
        im1_factor = cv2.GaussianBlur(im1, (im1_ksize, im1_ksize), 0).astype(np.float)
        im2_factor = cv2.GaussianBlur(im2, (im2_ksize, im2_ksize), 0).astype(np.float)
    else:
        im1_face_image = cv2.bitwise_and(im1, im1, mask=mask)
        im2_face_image = cv2.bitwise_and(im2, im2, mask=mask)
        im1_factor = np.mean(im1_face_image, axis=(0, 1))
        im2_factor = np.mean(im2_face_image, axis=(0, 1))

    im1 = np.clip((im1.astype(np.float) * im2_factor / np.clip(im1_factor, 1e-6, None)), 0, 255).astype(np.uint8)
    return im1


def main():
    im1 = cv2.imread('1.png')  # face_image
    im1 = cv2.resize(im1, (600, im1.shape[0] * 600 // im1.shape[1]))
    landmarks1 = get_face_landmarks(im1, detector, predictor)  # 68_face_landmarks
    if landmarks1 is None:
        print(':检测不到人脸'.format(image_face_path))
        exit(1)
    im1_size = get_image_size(im1)  # 脸图大小
    im1_mask = get_face_mask(im1_size, landmarks1)  # 脸图人脸掩模

    cam = cv2.VideoCapture(0)
    while True:
        ret_val, im2 = cam.read()  # camera_image
        landmarks2 = get_face_landmarks(im2, detector, predictor)  # 68_face_landmarks
        if landmarks2 is not None:
            im2_size = get_image_size(im2)  # 摄像头图片大小
            im2_mask = get_face_mask(im2_size, landmarks2)  # 摄像头图片人脸掩模

            affine_im1 = get_affine_image(im1, im2, landmarks1, landmarks2)  # im1(脸图)仿射变换后的图片
            affine_im1_mask = get_affine_image(im1_mask, im2, landmarks1, landmarks2)  # im1(脸图)仿射变换后的图片的人脸掩模

            union_mask = get_mask_union(im2_mask, affine_im1_mask)  # 掩模合并

            affine_im1 = skin_color_adjustment(affine_im1, im2, mask=union_mask)  # 肤色调整
            point = get_mask_center_point(affine_im1_mask)  # im1(脸图)仿射变换后的图片的人脸掩模的中心点
            seamless_im = cv2.seamlessClone(affine_im1, im2, mask=union_mask, p=point, flags=cv2.NORMAL_CLONE)  # 进行泊松融合

            cv2.imshow('seamless_im', seamless_im)
        else:
            cv2.imshow('seamless_im', im2)
        if cv2.waitKey(1) == 27:  # 按Esc退出
            break
    cv2.destroyAllWindows()


if __name__ == '__main__':
    main()

要是dlib库有问题可在连接中下载:python人脸识别环境下的两个dlib适配包,一个配合python3.7,一个配合python3.8-机器学习文档类资源-CSDN下载

(已设置免费) 

全部代码资源:

Python基于dlib的AI换脸全代码-机器学习文档类资源-CSDN下载

(已设置免费) 

python系列教程198——任意数目的参数(代码片段)

声明:在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套python教程不是由我所写,所以不... 查看详情

怎么在手机将视频ai换脸

...用Deepfake。本文介绍使用DeepFaceLab这款开源产品,它基于python和tensorflow。说明,基于本文掌握的内容不得用于非法违法目的以及违背道德的行为,否则本人概不负责。开始前,需要在https://github.com/ip 查看详情

换脸软件app哪个好用

ai换脸秀app比较好用。可以帮助大家用自己的脸来制作表情包、海报大片、电影电视角色等等,只需要你的正脸照就可以想制作任何你所想尝试的造型,支持一键上传录音,成为视频背景配音,让你的视频更有趣。换脸的定义Al... 查看详情

大家好!请问比较专业的ai换脸软件电脑的有什么推荐?

...版集成GUI图形界面缺点:需要一定的编程基础,需要安装python并用Python编译下载各种库文件,搭配环境较复杂3.Openfaceswap系统:Win10优点:基于Faceswap定制的图形图像界面版本,集成所需要的库文件和环境,可下载faceswap覆盖子文... 查看详情

ai换脸骗过app,林俊杰和我们都怕

AI换脸有多简单,骗过App人脸识别系统的成本有多低,才让这种现象如何猖獗?1.林俊杰把B站和UP主告了,就因为UP主用AI换脸技术制作了大量林俊杰的鬼畜视频。2.AI换脸有多简单,骗过App人脸识别系统的成本... 查看详情

python系列教程193——参数传递

​声明:在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套python教程不是由我所写,所以... 查看详情

python爬虫eval混淆,爬虫进阶实战系列(代码片段)

...视猫实战场景⛳️实战编码⛳️前置知识历经10篇左右的Python字体反爬系列文章,我们又进入了一个新的主题,常见混淆加密原理与实践。本篇博客从eval混淆开始,逐层为大家拆解JS逆向中混淆相关知识。eval函数可以将JS字符串... 查看详情

iast技术进阶系列:悬镜安全技术解剖关键语言支持

 今年6月,中国信息通信研究院(以下简称“中国信通院”)正式发布《交互式应用程序安全测试工具能力要求》行业标准(以下简称“IAST标准”),并于首届DevSecOps敏捷安全大会(DSO2021)首次公开标准解读。目前,中国信通... 查看详情

python爬虫eval混淆,爬虫进阶实战系列(代码片段)

...视猫实战场景⛳️实战编码⛳️前置知识历经10篇左右的Python字体反爬系列文章,我们又进入了一个新的主题,常见混淆加密原理与实践。本篇博客从eval混淆开始,逐层为大家拆解JS逆向中混淆相关知识。eval函数可以... 查看详情

从vehicle-reid到ai换脸,应有尽有,解你所惑

最近在做视频搜索的技术调研,已经初步有了一些成果输出,算法准确性还可以接受,基本达到了调研的预期。现将该技术调研过程中涉及到的内容总结一篇文章分享出来,内容比较多,初看起来可能关系不大,但是如果接触面... 查看详情

进阶学python:python面向对象系列之魔法方法!(代码片段)

本篇主要介绍面向对象编程中类的魔法属性,这些魔法属性均有其特殊的功能,即执行某些操作时,会自动触发这些魔法方法的执行,了解这些魔法方法可以更好的了解面向对象编程的实现原理;在学习魔法... 查看详情

又是骗补贴的?清华虚拟学生华智冰翻车:ai换脸铸就人工智能

10月19日消息,前段时间清华大学虚拟学生华智冰名声大噪,向网友们展示了国内先进人工智能技术的实力。然而上个月底,这位虚拟学生却出现了大问题。前段时间华智冰一段弹唱《男孩》的视频走红网络,在引... 查看详情

清华虚拟学生被质疑真人ai换脸?公司第三次回应:面部置换并非仅仅ai换脸

10月19日下午消息,近日,清华虚拟学生华智冰弹唱视频再次被质疑是真人拍摄。对此,小冰公司第三次通过其官方微博发布声明称:华智冰演唱视频中的肢体视频模板来自小冰团队成员鱼子酱酱视频,是从开... 查看详情

opengauss数据库源码解析系列文章——ai技术(代码片段)

上一篇介绍了第七章执行器解析中“7.6向量化引擎”及“7.7小结”的相关内容,本篇我们开启第八章AI技术中“8.1概述”及“8.2自调优”的相关精彩内容介绍。AI技术最早可以追溯到20世纪50年代,甚至比数据库系统的发展... 查看详情

python系列教程115(代码片段)

...#xff1a;在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套p 查看详情

python系列教程118(代码片段)

...#xff1a;在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套p 查看详情

python系列教程122(代码片段)

...#xff1a;在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套p 查看详情

python系列教程89(代码片段)

...#xff1a;在人工智能技术教学期间,不少学生向我提一些python相关的问题,所以为了让同学们掌握更多扩展知识更好地理解AI技术,我让助理负责分享这套python系列教程,希望能帮到大家!由于这套p 查看详情