硅基数字人形象克隆
实施步骤介绍
- 真人模特选择:根据业务的具体需要,客户选择好数字人真人模特,可以是客户的营销、服务或者相关的主管领导的形象。
- 绿幕视频录制:在数字人真人模特选好之后,根据业务需要及录制指导,录制2到5分钟的绿幕视频,并把录好的视频给到硅基。
- 数字人模型训练:基于上面录好的绿幕视频,硅基基于训练平台加以专业的服务完成对模型训练,并发给客户进行确认。
- 数字人模型绑定:上面训练好的数字人模型可以用于视频制作、直播或交互,根据客户的需要硅基把形象绑到相应的应用。
具体过程介绍如下
- 基础必读
定制数字人需要拍摄一段3-5分钟的真人出镜口播视频,经过AI训练后可以得到一比一还原的数字人形象。
具体出镜姿势、口播内容,可以根据最终的使用场景来确定,如后期用来制作财经知识视频,即可选择正装出镜,口播财经内容,这样整体情景比较一致。
定制好的数字人口型可以根据文字、录音内容自动匹配。
- 拍摄前(根据自己需要决定拍绿幕还是实景)
- 绿幕布景
绿幕布景:绿幕拍摄后期可以自定义更换其它背景,拍摄时绿幕需要铺满整个画面,尽量不要有褶皱、阴影,否则会影响抠图效果,请务必得到满意布景后再开始拍摄。
发型佩饰:避免佩戴会晃动的耳坠,耳坠晃动会影响口型学习,可佩戴固定耳钉。避免碎发太多,容易导致绿幕扣不干净,如果是实景拍摄则不受影响。
衣服颜色:使用绿幕背景拍摄视频时,请不要穿搭绿幕相近色(如黄色、绿色)的衣服,以免影响抠图效果。
- 实景布景
实景布景:实景拍摄后期无法更换其它背景,拍摄时无特殊要求,请务必得到满意布景后再开始拍摄。
灯光:均匀打光的光源,推荐使用"三点式打光",如果想要下巴区域无阴影,推荐使用反光板、泡沫板(俗称"米菠萝”)来补光。
- 相机拍摄参数设置(推荐)
- 视频分辨率尽量4K(3840*2160),最低1080P(1920*1080)
- 视频尺寸为9:16或16:9,请根据自己的使用场景选择横屏或竖屏拍摄
- 视频帧率:30帧或60帧
- 镜头焦段:推荐50mm镜头(等效全画幅相机焦距)左右,想要脸瘦一点用85mm
- 镜头光圈:
如拍摄实景且想要虚化背景,建议根据实际情况调整光圈,保证人物主体清晰且背景虚化
- 如使用手机拍摄,请选择最高画质(1080P以上)进行拍摄,苹果手机请选择“兼容性最佳”格式拍摄
拍摄时(视频时长控制在5分钟以内)
- 拍摄步骤
- 先保持静默10秒左右,闭口不要漏牙齿;
- 正常口播3-4分钟,可以有自然的手势动作,但动作不要靠近脖子、嘴巴、面部区域;具体出镜姿势、口播内容,可以根据最终的使用场景来确定,如后期用来制作财经知识视频,即可选择正装出镜,口播财经内容,这样整体情景比较一致。
- 实景拍摄到此即可,最终导出一段完整的视频即可;
- 绿幕拍摄需要在口播之后,人物需要走出画面并将桌椅等前景道具搬离画面,仅保留绿幕继续拍摄10秒左右空镜头。
- 注意事项
- 眼神:注视镜头且录制连贯,有提词设备为佳
- 收音:保持环境安静,无背景音及他人说话,有收音设备为佳说话时需吐字清晰,不能纯念数字1234
- 手势动作:不要出现在面部、嘴巴、脖子周边附近
- 拍摄后(美颜处理)
- 视频拍摄完成后直接导出一整条视频,不要剪辑,否则训练出来的数字人模型会跳帧!
- 素材建议导出4k 25/30p,最低1080P
- 由于相机直出素材动态范围更大,细节保留更多,建议完成调色美颜后,再进行数字人训练
- 定制数字人仅口型区域由AI生成,其他的头部动作(比如眨眼)、身体动作(比如手势)、美颜效果等都是保留录制时的样子,即根据所拍视频就可以预览数字人效果。