XFaceKit

 找回密码
 立即注册
搜索
热搜: 遮罩
查看: 4195|回复: 11

XFaceKit 最新版下载链接[240830]

[复制链接]

24

主题

10

回帖

228

积分

管理员

积分
228
发表于 2024-6-5 10:43:39 | 显示全部楼层 |阅读模式
XFaceKit在VtubeKit的基础上全新改版升级,神经网络框架从tensorflow全部转换为pytorch。
模型也采用了新的格式和架构,新的fsm模型同时支持训练和直播。
-------------------------------------------------------------------------------

百度网盘下载链接(XFaceKit整合包):


https://pan.baidu.com/s/1e0ujJrUnyxhQ-9M44DpcUQ?pwd=uome
XFaceKit.png    Live界面.png Train界面.png



【系统要求】
只适用于Nvidia显卡的Windows系统
【版本包含程序】
Live-直播程序,Lab-素材处理程序,Train-模型训练程序

       直播换脸工具(Live):
(1)帧率和速度: XFaceKit比deepfacelive的在高分辨率下运行速度更快,解决了Deepfacelive在高分辨率(大于1280*720P)时候帧率太低的问题。1920*1080p都可接近实时帧率
(2)调整脸型:可以通过拖动调整脸型。
(3)内置高精度分割模型实时分割人脸遮罩,遮罩没训练好的模型同样可以准确的处理遮挡物体。
(4)输入图像增加了实时截屏  
(5)增加换声功能  
(6)模型支持新的fsm文件格式,同时兼容deepfacelive的dfm格式模型。
(7)新增了换脸后超分修复功能,增加清晰度  
(8)增加了人脸身份筛选,可以选择换脸的人脸对象
(9)可以把输出直接传送到OBS虚拟摄像头

3.        素材处理(Lab):
(1) 可以多源采集(视频文件、截屏、图片集、摄像头采集),一键自动切脸,同时完成标记和分割遮罩写入。
(2)多种批量文件重命名、素材移动筛选工具筛选(排序后手动删除、AI筛选模糊人脸、AI筛选胡须照片)
(3)素材浏览器中可批量浏览遮罩特征点  
(4)素材分析:自动分析生成素材角度分布图,浏览每个角度范围内的素材
(5)采用神经辐射场和3d变形模型结合对素材进行角度和表情增补
(6)升级的遮罩编辑器,可以自动生成可编辑多边形轨迹,提取五官区域,可以改变选取素材文件夹。
(7)素材超分辨率高清化处理、同时保留遮罩和特征点数据
(8)应用神经网络对模糊和低质量人脸筛选,比纯采用像素方差计算的传统方法准确率大幅度提升。

4.        模型训练(Train):
(1) 新的基于pytorch框架的模型结构和格,效率更高  
(2)模型格式存储方式改变为单文件格式,换脸模型为fsm格式,遮罩分割模型为seg格式。 模型架构有多种架构可供选择。
(3)训练模型和直播模型通用,可以不用再单独导出直播模型。
(4) 训练换脸模型将不需要训练遮罩了,同时节约了模型计算量、显存、和硬盘存储空间   
(5)模型预览都采取五列,高分辨也能多列预览,最后一列直接是融合后的预览更接近现实效果,不只是换脸后的图
(6)增加了src和dst共享素材。
(7)增加了遮挡物随即增强功能,可以随即添加遮挡增强素材多样性  
(8)导出每个人脸的loss值,可以同时导出src和dst每张素材的loss值,导出csv文件,帮你筛选哪些图现在训练效果还不好。













训练预览图.png

0

主题

1

回帖

6

积分

新手上路

积分
6
发表于 2024-6-5 11:09:00 | 显示全部楼层
强,支持群主

0

主题

2

回帖

25

积分

新手上路

积分
25
发表于 2024-6-5 11:35:36 | 显示全部楼层
666非常奈斯

0

主题

1

回帖

54

积分

注册会员

积分
54
发表于 2024-6-5 12:10:05 来自手机 | 显示全部楼层
孟德是也 发表于 2024-6-5 11:35
666非常奈斯

我来狙击曹贼
1000005610.gif

0

主题

1

回帖

4

积分

新手上路

积分
4
发表于 2024-6-5 12:41:29 | 显示全部楼层
正准备学习这个

1

主题

2

回帖

27

积分

新手上路

积分
27
发表于 2024-6-5 17:23:52 | 显示全部楼层

这里没有有夫之妇

0

主题

2

回帖

51

积分

注册会员

积分
51
发表于 2024-6-5 18:46:13 | 显示全部楼层
非常棒!!!

0

主题

4

回帖

32

积分

新手上路

积分
32
发表于 2024-6-6 12:47:51 | 显示全部楼层
66666666666666666666666666

0

主题

1

回帖

16

积分

新手上路

积分
16
发表于 2024-6-8 13:28:16 | 显示全部楼层
非常棒 非常棒

0

主题

4

回帖

12

积分

新手上路

积分
12
发表于 2024-7-10 10:05:16 | 显示全部楼层
问题来了,这个是免费还是付费,收费怎么个收法,能说明下吗
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|沪ICP备14036317号-7|XFaceKit

GMT+8, 2024-10-18 19:22 , Processed in 0.088813 second(s), 25 queries .

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表