本帖最后由 pubzoner 于 2024-5-25 22:03 编辑
(1)Vtubekit是XFaceKit的前身版本。从2024年06月的新版改名为XFaceKit。
(2)Vtubekit是对开源的Deepfacelab和Deepfacelive的代码整合和功能添加。Vtubekit还是和原版一样,采用tensorflow作为神经网络引擎。 然后加入了图形界面、媒体源多源采集(摄像头、视频文件、图片、系统截屏),增加了脸型调整,实时人脸遮罩分割等功能。 还有训练器和素材处理其增添了多项便捷功能。底层采用的还是Deepfacelab和Deepfacelive的原始代码。
(3)XFaceKit开始对系统基础进行重写,改用pytorch作为系统各个模块的神经网络框架(如模糊人脸筛选模型、脸型调整算法、换脸模型架构、遮罩模型、人脸特征点提取等)。模型的架构和文件格式也有新的变化。
另外在换脸的流程pipeline细节也和dfl有所不同。XFacekit相比vtubekit在功能性、运行速度、效率上都有所较大提升。
|