主要变更点:
基于 Effect SDK V1991 开发,更新点如下:
引擎升级:升级为V1991,关联依赖组件对应升级,编译工具链升级
新增算法道具和能力支持:
新增【特效-虚拟背景】、【背景虚化】、【绿幕背景】道具
新增【背景分割】算法能力
新增支持手势道具交互
**素材道具更新,对齐移动端:【**美颜美型】道具效果对齐移动端V480,具体素材以交付中心申请为准,不可直接复用Android端素材
Demo 首页UI改版,对齐移动端
Demo新增【扫一扫】,支持扫码体验素材商城贴纸
Demo适配鸿蒙PC设备
SDK鉴权申请流程接入交付中心
主要变更点:
基于 Effect SDK V1991 开发,更新点如下:
引擎升级:升级为V1991,关联依赖组件对应升级,编译工具链升级
算法模型升级:
【骨骼检测模型】升级,tt_skeleton_fast模型升级V7.1;tt_skeleton升级至V9.2
【绿幕算法】支持对比度、亮度、透明度接口
道具优化:
【美颜美型pro】微整形道具包调整为reshape_v8
修复V471引入的睫毛首帧强度更新问题
修复V473引入的V脸、下巴长短叠加场景下的效果一致性问题
Demo建设: Mac端Demo支持体验升级后的绿幕抠图算法
主要变更点:
基于 Effect SDK V1991 开发,更新点如下:
引擎升级:升级为V1991,关联依赖组件对应升级,编译工具链升级
引擎支持微整形道具指定人脸生效,后续版本将提供道具升级,支持多人场景下单人脸美化效果设置,敬请期待
引擎对脸部、眼部mesh升级,大角度(如侧脸)美妆效果提升,后续版本将提供道具升级
引擎对象索引优化
引擎支持js异步加载
引擎优化特定角度下人脸关键点识别的准确度和稳定性
算法模型升级:
【骨骼检测模型】升级,tt_skeleton_fast模型升级V7.1;tt_skeleton升级至V9.2
【绿幕算法】支持对比度、亮度、透明度接口
道具优化:
【美颜美型pro】微整形道具包调整为reshape_v8
修复V471引入的睫毛选色问题
修复V473引入的V脸、下巴长短叠加场景下的效果一致性问题
Demo建设:
SDK优化和问题修复
composer素材设置方式更新,新版/旧版UI的素材设置逻辑对齐
对接文档补充人头分割算法、视线检测算法的相关说明
修复美体在相机方向旋转时无效果的问题,SDK默认定义为图片竖向时支持相机竖向/水平0/180度
主要变更点:
跟随CV SDK 4.7.3 移动端素材道具更新,新增美颜美型/pro道具
美颜美型:美颜-丰盈、祛颈纹、全身磨皮;微整形-面部-提拉、V脸;眼睛-圆眼、瞳孔大小、眼睑下至、内眼角、外眼角;鼻子-鼻综合、鼻梁、鼻尖、山根、鼻翼;眉毛-位置、粗细;嘴巴-丰唇;美体-直角肩、宽肩;美妆-修容-立体
美颜美型pro:美颜-丰盈、祛颈纹、全身磨皮;微整形-面部-提拉;嘴巴-丰上唇、丰下唇;美体-直角肩、宽肩;美妆-修容-水光、减龄;眼影-自然
绿幕抠图算法升级,Win端Demo支持体验
支持自动取色,可对当前画面进行自动主色提取和抠除
支持选色抠图,可使用预设的绿、蓝、红或用户自定义的颜色进行抠除
支持安全区域,安全区域开启后,区域内颜色将保留
支持参数设置,通过相似度、细节、边缘平滑、去泛绿、阴影增强参数设置,精细化调整抠除效果
其他优化和问题修复
修复图片模式选择图片后取消,然后设置摄像头无效的问题
修复摄像头切换,原来设备仍然占用的问题
历史定制分支合入
主要变更点:
基于 Effect SDK V1680 开发,更新点如下:
对齐抖音(版本号30.4.0)新增美颜美型/pro道具
美颜美型:美颜-全身磨皮*(对齐直播伴侣)*;微整形-面部- V脸、眼睛-瞳孔大小、眼睑下至、内眼角、外眼角、鼻子-鼻综合、鼻梁、鼻尖、山根、鼻翼、眉毛-位置、粗细、嘴巴-丰唇;美体-直角肩、宽肩;美妆-修容-立体
美颜美型pro:美颜-全身磨皮(对齐直播伴侣);微整形-嘴巴-丰上唇;美体-直角肩、宽肩;美妆-修容-水光、减龄、眼影-自然
针对直播和拍摄场景,增加美颜美型/pro道具
美颜美型:美颜-丰盈、祛颈纹;微整形-面部-提拉、眼睛-圆眼
美颜美型pro:美颜-丰盈、祛颈纹;微整形-面部-提拉、嘴巴-丰下唇
更新美颜美型/pro道具,微整形统一至V8 3.0版本
美颜美型:美颜-美白;微整形-面部-额头(发际线更名)
美颜美型pro:微整形-面部-额头(发际线更名)、下巴长短;眼睛-眼高、眼宽、位置、眼距、内眼角、外眼角、眼尾上扬、鼻子-山根、眉毛-粗细、位置、倾斜、眉峰、间距、长短;美妆-修容-自然、V脸(小V脸更名)
绿幕抠图算法升级
支持自动取色,可对当前画面进行自动主色提取和抠除
支持选色抠图,可使用预设的绿、蓝、红或用户自定义的颜色进行抠除
支持安全区域,安全区域开启后,区域内颜色将保留
支持参数设置,通过相似度、细节、边缘平滑、去泛绿、阴影增强参数设置,精细化调整抠除效果
Demo体验效果优化
恢复支持美颜美型-套装
恢复在贴纸、风格妆、新颖贴纸显示默认妆造
特效功能均支持设置-图片模式,可逐帧检测人脸
SDK优化和问题修复
素材商城内触发交互道具新增宏修复保证可用性
支持黑科技检测接口,可判断当前机型是否可用黑科技算法
支持resetComposeNodes接口
Android端线上崩溃修复
骨骼检测算法初始化修复
距离检测算法JNIcontext参数优化
美瞳日志输出优化
主要变更点:
美颜美型素材版本对齐CV移动端V4.7.2
美颜新增【红润】
微整形素材更新至V8,对齐移动端
新增支持美体,包括【一键美体、瘦身、长腿、瘦腿、瘦腰、丰胸、美胯、天鹅颈、瘦手臂】
滤镜新增38个
风格妆素材版本对齐CV移动端V4.7.2,新增10个,合计36个
贴纸素材版本对齐CV移动端V4.7.2
2D贴纸Demo新增21个,合计展示23个,支持但未展示18个
复杂贴纸Demo新增展示8个
3D风格贴纸Demo支持但未展示3个
新颖贴纸支持但未展示1个
算法能力封装
Demo可通过【首页-算法】进行体验:人脸检测(106点)、人脸比对、3D人脸、手势检测、骨骼检测、3D肢体
支持但未展示:人脸检测(280点)、宠物脸
支持在线鉴权,鉴权获取请联系技术支持
主要变更点:
基于 Effect SDK V1680 开发,更新点如下:
支持火山官网线上购买和AI特效平台套餐开通:
通过AI特效平台跳转进行套餐购买
套餐开通详见AI特效平台操作手册
支持通过AI特效平台实现素材管理和下发:
Demo新增【组合套餐】展示,CV线上可购买的套餐点击即可体验:
Demo【组合套餐】、【特效】展示逻辑调整(仅国内版本),更贴近抖音交互:
【组合套餐】侧边栏提供设置、镜头翻转、画质、滤镜、贴纸和对比功能;抽屉提供美颜、微整形、美体、美妆和相册导入功能(具体展示因套餐小项区别会有所不同)
【特效】侧边栏提供设置、镜头翻转、对比功能;抽屉提供原子能力和相册导入功能(具体展示因原子能力区别会有所不同)
【特效-美颜美型/美颜美型pro-画质】现拆分为独立原子能力展示
【特效-美颜美型/美颜美型pro-扫一扫】现拆分为独立模块能力展示
【特效-美颜美型pro-黑科技】下【原肤】更名为【匀肤】
Demo【扫一扫】功能支持更多贴纸体验,快速验证手机/PC场景:
支持切换分辨率比例,扫码完成后点击设置,可选择16:9、4:3的竖屏比例或9:16的横屏比例对贴纸效果进行预览;不同比例下提供了对应的分辨率选项(请注意,为了确保预览显示正确,切换横竖屏后请按照提示旋转手机屏幕。显示效果的正确性取决于贴纸本身)
支持在线获取贴纸所需的模型,大幅减少因缺少模型造成的预览问题
支持点击触发按钮来体验需要开拍/触发的部分贴纸
Demo【特效】支持1080p模式:默认为720P模式,用户可按需切换
其他优化和问题修复:
JNI引用处理修复
【虚拟背景】的背景图拉伸问题修复
【美颜美型-微整形】的crash问题修复
iOS编译链路集成/testflight统一升级至xcode16
iOS Sample podfile去掉多余源
滤镜素材名称改为英文,便于海外客户接入
主要变更点:
跟随CV SDK 4.7.1 移动端素材道具更新,对齐抖音线上版本
跟随CV SDK 4.7.1 移动端算法模型更新
其他优化和问题修复:
支持windows端长路径读取
风格妆(漫画少女)crash修复
主要变更点:
基于 Effect SDK V1680 开发,更新点如下:
素材道具更新,对齐抖音线上版本:
美颜美型对齐抖音直播,更新素材如下:磨皮、美白、清晰、美型(除双眼皮)、美体(除瘦腿);新增一键美体(支持用户快捷体验美体效果);删除瘦脸下的瘦脸小项(更新男神、女神、自然,和抖音一致)
美颜美型pro对齐抖音主拍,更新素材如下:美白新增小麦色、美黑,新增支持冷暖调节;美型(除下列小项:下巴长短、 眼高、眼宽、眼睛位置、眼睛间距、内眼角、外眼角、眼尾上扬、双眼皮、鼻子提升、鼻子山根、眉毛;升级至V8 3.0版本);新增小脸、短脸(现在可以选择脸部整体缩小或脸长调节);磨皮、锐化、清晰维持不变(效果比抖音更好,故保留);删除瘦脸下的瘦脸小项(更新男神、女神、自然,和抖音一致)
新增和更新抖音滤镜38个;
新增和更新抖音风格妆9个;
眼影、睫毛效果优化,改善闭眼情况的贴合度;
套装、各小项默认值优化调整,适配新道具;
算法模型更新:
人脸检测和106点模型升级至V2.1版本,优化跟踪稳定性;
人脸240/280点模型升级至V15版本,对齐抖音版本;
皮肤分割模型升级至V5.1版本,对齐抖音、剪映版本;
背景分割模型升级至V15版本,对齐剪映版本;
隐私合规处理调整:针对隐私合规相关的初始化方案、隐私政策进行调整
虚拟背景支持视频上传:提供新接口,demo可体验
其他优化和问题修复:
适配Android 15 16KB page size特性
背景音mute接口修复
瘦脸道具多人脸识别修复
不支持并行渲染的低端机修复美颜无效问题
Libarian加载so流程优化
支持iOS模拟器
绿幕抠图回塞问题修复;支持输入纹理接口
支持arr远程引用
RTC demo优化
主要变更点:
美颜美型功能小项进一步对齐移动端
美颜新增支持锐化
微整形、美妆、滤镜、画质小项在demo展示
暂不支持美体、黑科技
支持贴纸数量增加到22款
Demo UI/交互对齐移动端
支持预览相机画面和导入图片/视频处理两种模式
支持点击拍摄、长按录制并保存至本地相册
主要变更点:
引擎升级:底层全面升级为Amazing Engine
道具包适配新引擎、效果优化:对齐移动端最新效果,效果图详见移动端更新日志
支持海外license授权获取
支持鼠标拖拽的消息通信:支持拖拽类的贴纸交互
其他优化:
道具包glReadpixel内存泄露修复;
多effectManager的回调修复;
修复瘦脸(beta女神、beta男神、自然脸)对多人无效的问题
主要变更点:
引擎升级:底层全面升级为Amazing Engine,因此demo不再区分Standard、Lite版本;若有客户需求,SDK可裁包定制
道具包适配新引擎:
美颜美型和美颜美型pro道具包更新为新引擎版本(美颜美型-美颜、微整形、黑科技中的部分小项平衡性能表现未升级);
贴纸、小游戏、新颖贴纸道具包全面更新为新引擎版本
部分不兼容新引擎的道具包临时下架(贴纸-贴纸妆、风格妆-3D、AR;试穿试戴、虚拟头像、直播礼物的部分小项)
效果优化:
美颜美型的美妆素材(美白新增红润;口红色号全面升级;腮红、眉毛更新;修容新增深邃、英俊(pro)),效果更新,妆造更美;
美颜美型pro的微整形部分升级至8.0版本,效果更自然、稳定(瘦脸、小脸、窄脸、小头、V脸);
美颜美型和美颜美型pro的美妆增加妆容分割,遮挡场景不穿帮;
美体升级至2.0版本,效果对齐抖音直播和剪映(瘦腿除外)
算法模型升级:3D肢体模型(avatar3D)升级
其他优化:
道具包glReadpixel内存泄露修复;
多effectManager的回调修复;
demo层图像转换工具示例代码优化;
iOS SDK命名规范性修复;
Android SDK aar依赖优化;
贴纸在特定分辨率下尺寸错误/图片压缩问题修复;
修复瘦脸(beta女神、beta男神、自然脸)对多人无效的问题;
iOS 视频保存API修改;
线上崩溃问题修复
主要变更点:
支持美颜美型-磨皮、美白、清晰,暂不支持锐化、美白小项白皙和粉白
支持美颜美型-微整形、美体、美妆、滤镜、画质,暂不支持黑科技
支持26款风格妆
支持14款贴纸
主要变更点:
新增防抖算法:对齐内部剪映PC端防抖算法能力,经过算法处理后有效改善视频抖动,尤其在手持拍摄上下楼梯及走路拍摄的场景下优化显著。
优化美颜美形美妆部分场景:优化美颜美形特效,在大图多人场景下,美颜美形可选择图片模式,提高美颜美形美妆的识别率。
支持像塑专业版描边、bling等功能:支持像塑专业版V1.4.0中的描边和Bling效果。仅Standard版本有该功能。
其他优化:优化部分特殊场景下如长期多次跑压测出现的少量内存泄露问题;黑科技三项更名(仅Standard版本);开放控制音频接口,现在带有bgm的贴纸切到后台会静音。
主要变更点:
升级effect版本至1400,与PC端V4.6.0对齐
升级人脸算法,更适合车载硬件场景
Linux版本新增儿童检测算法,检测后排儿童,优化耗时;新增C3分类算法;新增背景分割算法,新增画质打分算法、新增车端脱敏算法
其余功能及特效均与PC4.6.0版本对齐
主要变更点:
新增AR背部挂载:试穿试戴新增背部挂载模块,采用人体关键点及3D肢体驱动技术,驱动背部3D模型挂载在真实人体上,实现栩栩如生的翅膀效果。此效果支持定制哦,欢迎联络定制
在线鉴权优化:优化移动端在线鉴权部分,交付中心新增选择服务器选项,交付更合规,为国内出海客户提供更灵活合规的鉴权流程
其他技术需求:兼容安卓14;修复从特效获取人脸动作信息部分字段问题;修复动态库iOS13兼容问题等
主要变更点:
升级特效SDK版本:使用以下新功能建议升级SDK
美颜美型Pro-美体更新天鹅颈、瘦手臂:对齐移动端Pro美体效果,提升效果美观度和识别稳定性。
新增4个直播礼物效果:新增爱心/点赞等动作触发礼物,增强互动,其他礼物需求支持定制评估
新增绿幕背景特效:在绿幕场景下,可支持上传图片一键替换绿幕背景,基于绿幕抠图算法,使用更加便捷
新增3个运镜特效:支持运镜特效素材,使用更加便捷,适合直播、短视频等舞蹈场景。仅支持Windows端使用
技术优化:规范算法名称;封装不同格式接口;增加消息回调接口等
主要变更点:
升级特效SDK版本:使用以下新功能建议升级SDK
新增美化黑科技:美颜美型Pro-黑科技,新增匀肤、丰盈、流畅脸,面向有高阶美化需求的客户,提供极致的美肤/美型效果;移除祛斑祛痘效果,新匀肤包含祛斑祛痘效果
更新2个美体效果:美颜美型Pro-美体,更新瘦手臂和天鹅颈效果,提升效果美观度和识别稳定性
新增4个直播礼物效果:新增爱心/点赞等动作触发礼物,增强互动,仅支持Standard版本使用,其它礼物需求支持定制评估
新增绿幕背景特效:在绿幕场景下,可支持上传图片一键替换绿幕背景,基于绿幕抠图算法,使用更加便捷,仅支持Standard版本使用
新增3个运镜特效:支持运镜特效素材,使用更加便捷,适合直播/短视频等舞蹈场景,仅支持Standard版本使用
技术优化:在线鉴权支持配置唯一ID类别,新增支持硬件设备SN号作为唯一ID;增加日志输出,包括道具下发失败/模型缺失/加密错误/素材加载完成等;规范算法名称,部分模型名称有变化,详见接入文档
主要变更点:
| 组合套装 | 美白 | 微整形 | 美体 | |
|---|---|---|---|---|
美颜美型 | 新增套装(默认、幼态、圆脸专用、长脸专用、方脸专用),适应不同脸型,方便一键体验 | 新增白皙(偏冷白)、粉白(偏粉嫩)效果,可根据偏好选择 |
|
|
美颜美型Pro | / |
|
|
3. 风格妆效果上新:同时新增5个3D效果,模拟真实妆容材质和真实光照效果,呈现立体真实的妆效
风格妆包括滤镜+美颜美妆,不包含美型效果,建议搭配微整形功能一起使用
4. 新增直播礼物:效果多元、玩法多样、互动性强等特点,支持灵活定制(欢迎沟通相关需求,定制专属礼物效果 😊)
5. 虚拟头像支持人脸保护:新增支持人脸保护的特效资源包,丢失人脸后模糊或遮挡画面,避免人脸露出,适合陌生人社交场景
6. 上新6个贴纸效果:超大头(贴纸-2D);学姐妆、港风女主(贴纸-贴纸妆);岩砂画、复古鸭舌帽、压不到我吧(新颖贴纸-复杂);同时下架部分古早贴纸
7. 更新人脸算法:提升大角度等边缘场景下,人脸点位的识别效果,性能保持不变,需要替换算法模型;支持人脸检测单独鉴权
8. 绿幕抠图算法:增加绿色保留模式,开放参数接口,适合绿幕前有绿色物体的场景
主要变更点:
新增粉白效果:美颜美型&美颜美型Pro-美颜-美白,新增粉白效果,偏粉嫩,可根据偏好选择自然(原美白)/白皙/粉白效果
风格妆效果上新:新增5个3D效果,模拟真实妆容材质和真实光照效果,呈现立体真实的妆效,需要Standard版本支持
新增直播礼物:礼物作为一种高价值的特效,是观众和主播间重要的情感纽带,礼物特效具有效果多元、玩法多样、互动性强等特点,支持灵活定制(欢迎沟通相关需求,定制专属礼物效果 😊)
新增瘦脸beta效果:美颜美型Pro新增「beta男神」「beta自然脸」,与美颜美型瘦脸中对应效果一致,人脸遮挡或消失后再出现时,形变效果能够快速恢复,打造无痕自然的美型效果,需要Standard版本支持
虚拟头像支持人脸保护:新增支持人脸保护的特效资源包,丢失人脸后模糊或遮挡画面,避免人脸露出,适合陌生人社交场景,需要Standard版本支持
升级人脸算法:提升远距离/大角度等边缘场景下,人脸点位的识别效果,性能保持不变,需要替换算法模型
新增显著性分割算法:主体抠图/通用物体分割算法,能识别图像中的主体,将图像中的主体和主体之外的背景分割开来的能力,目前广泛应用于互动娱乐场景中的物体、人像、场景分割,也常用在电商场景中的商品主体分割等场景,推荐非实时/后处理使用
新增智能调色算法:色彩调校能力,一键帮助用户解决暗光、画面灰、不通透等一系列色彩问题,轻松获得高质感画面效果
新增视频去频闪算法:后处理/非实时算法,解决在光源欠佳、慢动作、延时摄影等拍摄场景中的画面闪烁问题,让视频呈现的光线环境更加统一
其他: 表情驱动算法优化渲染效果;IOS支持导入视频将处理后效果保存至手机相册;支持Target API 31,部分画质算法需要手动配置白名单或升级SDK版本;Android增加接口,支持从assets读取模型,减少copy到sdcard的过程;AR染发/AR莲花效果下架
主要变更点(技术优化):
优化log输出,提升问题解决效率
优化实现层代码逻辑,降低接入成本
主要变更点:
升级特效SDK版本:使用新功能建议升级SDK
新增美白效果:美颜美型&美颜美型Pro-美颜-美白,新增白皙效果,偏冷白,可根据偏好选择白皙效果或原来的自然美白效果
更新大眼效果:美颜美型-微整形-大眼,放大瞳孔比例,提供单独的资源包,建议与原来大眼效果2选1,美颜美型Pro暂无此效果
小头移动到微整形模块:美颜美型&美颜美型Pro,小头功能从美体模块移动到微整形模块,搭配瘦脸/大眼等效果使用更方便,美体不再包含小头效果,新小头效果更明显、且不依赖人体检测
新增瘦脸beta效果:美颜美型Pro尝试新瘦脸beta,效果与美颜美型-瘦脸-女神一致,人脸遮挡或消失后再出现时,形变效果能够快速恢复,打造无痕自然的美型效果,需要Standard版本支持
更新丰胸/美胯效果:美颜美型Pro-美体,更新丰胸和美胯效果,提升自然美观度,以及视频场景稳定性;需要Standard版本支持,美颜美型-美体保持原来效果
新增物体检测算法:圈定通用物体边框,算法支持检测跟踪,可用于贴纸挂载,实现趣味玩法
新增表情驱动算法:可以输出ARKit体系下52维表情系数和人脸姿态,提升表情驱动的准确性,建议有渲染能力和模型制作能力的客户使用;目前作为纯算法输出,并未应用在虚拟头像特效中
上新6个贴纸效果:超大头(贴纸-2D);学姐妆、港风女主(贴纸-贴纸妆);岩砂画、复古鸭舌帽、压不到我吧(新颖贴纸-复杂);同时下架17个古早贴纸
绿幕抠图算法增加绿色保留模式:默认算法效果为了减弱绿幕反射到前景人/物上的绿色,会做去绿处理,导致包含绿色元素的物体产生色偏,新增的绿色保留功能会让前景绿色更接近肉眼所见,但相应不能去除绿幕反光;因此前景无绿色人/物时建议使用默认算法效果,有绿色时可使用绿色保留,主要适合电商带货卖绿色物体场景
其他优化:人脸106和280点算法更新,效果不变,性能略有提升;支持人脸检测单独鉴权,仅输出人脸个数信息
主要变更点:
风格妆包括滤镜+美颜美妆,不包含美型效果,建议搭配微整形功能一起使用
4. 背景分割算法更新: 提升人物边缘分割精细度,优化手指边缘分割效果;减少主体人物背后的路人分割,更适合视频会议/线上课堂/直播开播等场景应用;基于此算法的虚拟背景和背景虚化也有相应的效果提升
5. 新增绿幕抠图算法:精准分割绿幕或较大绿色背景,区分前景人/物和绿幕背景,适合电商直播/视频录制等场景应用
6. 贴纸&新颖贴纸上新:贴纸模块新增3D风格类别和效果;新颖贴纸模块分为风格化/3D/复杂类别,其中风格化为新类别,展示性别转换/表情编辑/人像变美等能力,多为抖音爆款效果
7. 新增2种背景虚化:新增虚化程度加强版、可调节版2种效果,适应多种场景需求
8. C2分类暂时下线:因兼容问题,此版本暂时下线C2场景分类算法
主要变更点:
新增3种瘦脸效果(美颜美型Pro暂不支持):美颜美型-微整形-瘦脸,新增男神/女神/自然脸,可根据偏好进行选取
新增3D肢体算法:可用于驱动虚拟形象以及人物,进行人体贴纸挂载,实现更多新颖效果
新增运镜算法: 画质模块新增运镜,包含波动/心跳/呼吸/POV 四种模式,通过镜头的推拉摇移,激发创作兴趣,推荐在直播/短视频等舞蹈场景使用
新增美颜美型组合套装:美颜美型模块,新增5组美颜+微整形组合效果,适应不同脸型,方便一键体验
智感高清展示优化:可叠加默认美颜、支持1080P展示、支持上传图片/视频体验效果,开放更多参数可供调节
优化画质模块对比方式:超分/智感高清/自适应锐化模块,点击对比按钮,可左右拉动滑杆调节对比线位置,肉眼对比效果更明显
新增2种背景虚化:新增虚化程度加强版、可调节版2种效果,适应多种场景需求
支持日韩语体验: 系统语言切换为日/韩语,demo支持日/韩语展示,便于海外用户体验效果和功能
其他优化:
优化车端脱敏算法效果,提升近距离检出效果,减少物体误识别
减少安装包体积,Standard版本与442相比,单端减少200MB以上,算法模型采用资源下发的方式,进度条提示实时进度,请耐心等待下载完成
主要变更点:
新增清晰效果:美颜美型、美颜美型Pro模块,美颜小项新增清晰功能,解锁清晰质感效果,增强画面层次感
新增10个风格妆:风格妆-2D效果上新,多样美妆,可盐可甜
新增脏镜头检测算法:画质模块新增算法,检测镜头是否被汗、油、灰尘等弄脏,造成拍摄质量降低,适用于相机拍摄/直播等场景
新增画质打分算法:画质模块新增算法,对图像的人脸区域质量、全图美观度、清晰度进行打分,适用于相机拍摄/图集图像/审核/推荐等场景
优化超分算法:效果保持一致,性能优化10-30%,安卓新增支持华为/MTK机型,适用于视频编辑/播放等场景
新增趣味小游戏:特效模块新增小游戏模块,包含22款互动小游戏,可通过面部动作/表情/手势操作,进行表演/竞技/挑战,玩法简单,上手容易,适用于互娱应用/展会活动等场景,仅在Standard版本展示
接入方式优化:支持更简便的接入方式,快速集成SDK跑通特效效果,对渲染不太熟悉的客户更友好
主要变更点:
新增3D人脸重建算法:基于3D人脸关键点,利用单张或多张图像重建3D人脸模型,可用于3D形变和美妆等特效玩法
美化特效增加1080P分辨率展示:美颜美型、美颜美型Pro、风格妆模块支持切换分辨率,新增支持1080P展示,效果更清晰和细腻
新增车端脱敏算法(安卓端):行车场景中,对车外视频进行人脸和车牌识别,输出检测框,支持客户进行后续打码脱敏等操作,满足数据保护要求,建议在安卓中高端机型导入视频体验效果
升级背景分割算法:提升背景分割准确度、精细度和边缘稳定性
升级场景分类算法:提供207类场景的识别功能,包括食物类、动物类、植物类、陆地地貌类、水域类、天空类标签等
调整鉴权方式:鉴权到期时间调整为次日中午12点,将鉴权到期对客户的影响降至最低;在线授权方式增加对包名的校验,支持设备ID+APP包名双重验证
主要变更点:
升级特效SDK版本:使用新功能建议升级SDK
更新滤镜效果:新增23个滤镜效果,共64个效果,分5个类别展示,人像/美食/风景/复古/风格化,去掉6个滤镜旧效果(泡沫/旧日/胶片/暖阳/静谧/西雅图)
增加3D美妆风格妆:风格妆-3D模块新增4个新妆容,智雅仿妆/爱凌妆/漫画少女/东南亚纯欲,更适合亚洲人妆容
新增祛斑祛痘效果:美颜美型和美颜美型Pro模块,分别增加一种祛斑祛痘美化效果
新增SLAM平面检测算法:水平面跟踪算法(比如桌面、地面),可用于有水平面场景的空间定位,支持特效跟随手部移动,可展示世界坐标系和特征点
更新绿幕抠图算法:升级效果,减少误识别,人像/物体边缘细节更清晰
更新2个画质算法:夜景增强升级为拍摄智感高清,综合提升整体画质,适合预览和视频模式;新增插帧算法,可用于帧率提升或平滑慢放
健身模块开放参数调节:可调节不同动作的参数,让动作计数更加严格或宽松
支持本地参数记忆:美颜美型、美颜美型Pro、风格妆支持记忆调节的参数,重新进入对应模块可直接读取
技术优化:特效和AR模块支持Metal渲染环境,客户可以使用Metal渲染指令来处理经过SDK的纹理;合并美颜美型和美颜美型Pro模块的画质调节小项素材,优化性能,中端机叠加小项的性能提升1-2fps
主要变更点:
主要变更点:
修复432版本美颜美型-磨皮遮脸稳定性问题
支持海外素材商城扫码预览
主要变更点:
主要变更点:
1、美化效果更新
【美颜美型】更新磨皮&美白效果,提升效果/清晰度,可准确识别脸部区域进行磨皮处理,同时提升背景清晰度;更新11个微整形效果,包括瘦脸、大眼、小脸、瘦鼻、嘴形、下巴等高频使用小项,提升效果,新增部分双向调节功能
【美颜美型Pro】更新磨皮&美白效果,提升精致度/立体感/清晰度,可准确识别脸部/脖子/手等皮肤区域进行磨皮处理,同时提升背景清晰度
新增画质调节功能:【美颜美型】【美颜美型Pro】模块新增画质调节小项,包括色温、色调、饱和度、亮度、对比度、高亮、阴影、光感、颗粒、褪色、暗角,可叠加美颜/微整形/美体/美妆/滤镜体验(*Lite版本仅作展示,需接入Standard版本使用)
2、新增生成类特效
3、新增3D风格妆
4、新增拍照夜景增强算法
5、支持扫码预览Creator工具制作素材
6、技术优化
主要变更点:
lite版本支持口红分割
修复rtc切换分辨率贴纸丢失问题
修复移动端在线授权
英文版本隐藏卧蚕功能
主要变更点:
1、SDK版本升级,新功能需要升级SDK才能使用
2、【贴纸】&【新颖贴纸】:新增23款贴纸
3、【贴纸】- 美妆类别 :英文版本独有
4、【美颜美型】:调整2个微整形效果
发际线:调整形变方向,强度参数越大,发际线变低、额头变小
小脸:变为调节面部长短
5、【试穿试戴】:新增5个能力
6、【健身助手】:新增角度调节和5个新动作
开始健身前,加入调整手机摆放角度的步骤,识别更准确
支持5个新动作的识别
7、算法和工程优化
升级宠物脸模型,增加宠物狗耳朵关键点、加强关键点稳定性
升级足部识别模型,增加侧面角度姿态准确性
升级地面分割模型,降低在低端机上的算法耗时
升级戒指试戴模型,优化特定姿态的准确性和稳定性
新增头发模型,支持头发挑染功能
新增项链试戴模型,支持项链试戴功能
新增瞳距检测和耳朵拟合能力,支持眼镜和耳环试戴功能
新增native调用接口,解决安卓调用native崩溃问题
主要变更点:
1、素材下发:APK/IPA体积减少400MB以上
贴纸 Animoji 新颖贴纸 AR大模块中的素材将会从云端下发(仅对demo下发),第一次使用相关贴纸时请保证设备联网
同时下载的素材数量不超过5个,否则部分下载会中断
素材状态:
| 未下载 | 下载中 | 完成下载 | 选中展示 |
|---|---|---|---|
![]() | ![]() | ![]() | ![]() |
| 右下角有箭头,未下载状态 | 右下角loading,下载中 | 右下角无标识,完成下载 | 完成下载后,点击素材,白框选中可展示效果 |
2、新增算法和特效(图片仅用于效果展示)
3、贴纸商城扫码体验优化
贴纸商城链接:https://effectmall.volcengine.com/mall/cv/effect
支持扫码体验滤镜,体验中可以调节强度,欢迎体验风格多样的海量滤镜效果
商城支持按照SDK版本筛选道具,匹配新版SDK可支持功能,优化扫码体验(注:支持筛选SDK匹配功能的SDK版本:421、423;旧版本SDK可扫码体验,但不支持筛选匹配功能)
4、素材更新、功能重命名
美颜美型:微整形-大眼素材更新,新素材在戴口罩时可生效,效果与原素材一致
重命名:基础算法中 人体分割 => 背景分割,特效中 背景分割 => 虚拟背景,效果不变
5、技术需求:在线鉴权下发、包大小优化
SDK支持在线鉴权,兼容离线鉴权,支持更灵活的授权方式;demo首次打开需要联网下载证书
裁剪部分SDK功能,SDK体积缩小1MB
●页面重构,调整首页和功能展示,优化使用体验;调整功能名称显示区域,支持多语言展示
●拆分独立模块,降低客户接入门槛
●功能在v4.0.3.3版本基础上,增加风格妆
●页面重构,调整首页和功能展示,优化使用体验;调整功能名称显示区域,支持多语言展示
●拆分独立模块,降低客户接入门槛
●新增轻颜磨皮素材
●新增单双眼皮、只有淡妆、宝宝特效三款贴纸
●去掉许愿瓶贴纸
●优化了超分
●增加了自适应锐化
●增加眼睛、脸型、嘴巴的捏脸素材
●增加人脸生成模块
●基于全身形象进行捏脸(增加男生全身形象)
●更新iOS证书签名
●回归iOS静态库版本和动态库版本
●更新iOS证书签名
●回归iOS静态库版本和动态库版本
●EffectSDK 860 版本merge 4030
●背景分割新增接口支持背景替换
●增加贴纸妆,不可调强度妆容
●增加风格妆,可调强度妆容
● 移动端-历史遗留问题修复
● 新增触屏交互的接口,增加贴纸进行展示
● 新增headSegment玩法,增加贴纸进行展示
● 通用版移除3D试鞋贴纸
● 技术侧
-Demo双语注释增加
-新增log返回接口,帮助客户在用户侧收集有效信息等
● 增加了avatar人脸生成功能
● 增加了人脸驱动功能和捏脸功能
● Avatar三期特供版本,提供 iOS端功能
● Android 端更新素材,解决部分图片崩溃问题
● 版本合并effect 790(可支持avatar能力)
● 新版本增加人脸240鉴权功能
● ar扫一扫功能,实现扫描底图后,出现动画效果
●增加 animoji 算法(RD自测)
●基于 4010 新增 animoji 贴纸、ar 扫一扫贴纸
●算法鉴权拆分功能完善(RD自测)
●人体分割算法,采用大模型
●bug 修复,视频模式下部分视频方向不对
●增加人脸 mask 算法
●算法 subfunction 拆分(自测)
●增加贴纸加载回调
●增加天空分割算法
●增加贴纸,沙画
●车辆算法优化更新
●人脸算法眨眼逻辑优化(自测)
●历史 bug 修复:ios 视频加载卡顿,算法特效同时开启时不同步,口红第一帧闪出
●相机初始化时打开人脸检测模式,处理小米机型上预览偏黑的问题
●更新视线估计库,修复内存泄漏
●手势检测,demo 中新增两个手势(spiderman,avengers),sdk 未更改
●更改素材解密逻辑
●android 移除项目内 aar
●ios 发版包移除内存泄漏检测
●ios 增加错误 log
●安全编译移除 vmp
●demo 代码合并
●ios 增加视频处理
●特效版:功能优化,常驻默认、对比按钮
●特效版:扩大美形程度
●算法版:增加视线检测、专注度功能
●算法版:增加视频分类、c1、c2 分类算法
●算法版:人脸属性移除肤色
●算法版:人脸增加眼距结果(自测)
●更新了双端的安全编译方式,去掉了vmp feature,解决iOS 32位崩溃问题
●美体面板开启更多项;
●微整形增加双眼皮/卧蚕;
●试鞋功能
●Effectsdk 升级到720
●特效版去掉三款贴纸,新增8款贴纸
● iOS 端新增Avatar 模块(此版本为仅avatar版本,支持iOS13.0以上系统)
● 安全编译
● 抠头
● ios冲突问题(RD自测保证)
● 去logo
● 性能优化;
● 安全编译;
● 素材加密更新;
● 大小脸优化;
● 3D贴纸tab去除3D眼镜贴纸;
● 优化微整形算法抖动问题;
● 升级人脸sdk模型,连带升级底层库;
● 增加3d眼镜贴纸
● 增加小游戏贴纸
● ios冲突问题
● 增加点击屏幕触发贴纸
● 去除view放大逻辑
● 去掉bytedance logo
● 增加7个animoji素材
● 增加avata功能
● 增加测光逻辑
● 增加直播特效
● 优化美体,支持强度调节
● 支持口红分割
● 贴纸更换
● 支持特效中输出算法结果
● Merge 600,更新人脸、人体、头发分割算法
● 增加距离估计
● 增加疑惑表情分类
● 增加 android 视频输入
● 支持根据系统版本自动切换camera2/camera1(RD 自测)
● 更新鉴权库,解决 ios 冲突(RD 自测)
● 手势检测增加举手识别
● 更新 animoji 素材
● 增加 ar 扫一扫
● 增加图片处理模式
● 增加 4 款美颜
● 增加 3 款美形
● 增加 20 余款滤镜
● 增加光线检测功能
● 修复已知问题
● 去除无用素材
● 增加 animoji 功能
● 优化 demo UI 逻辑
● 将demo分拆成特效版和算法版
● 更改美妆资源包,支持调节强度
● 更改美颜资源包,提升效果
● 添加宠物脸检测接口和功能
● 添加美体接口和功能
● 添加微整形接口和功能
● 添加人脸聚类接口和功能
● 手势识别改进召回及分类
● 人体关节点优化半身检测召回
● 人脸检测距离优化,跟踪丢失优化
● 人体分割3-5m beta版
● 新增人脸聚类功能
● 升级特效接口,增加可叠加的特效接口
● 增加高级美妆、升级美颜素材
● 底层算法优化更新
● 更新特效处理接口
● 优化TV版手势分类
● TV版适配
● 发布arm64-v8a版
● 底层算法优化更新
● 人脸识别增加一个接口
● 提升人体关键点在电视场景下的稳定性
● 增加人脸识别模块
● 支持creator扫码展示素材功能
● license 验证调用接口移除version参数
● 增加人体分割、头发分割
● 增加对YUV数据格式的支持
● 增加美妆、贴纸功能
● license 验证方式更新
● 增加骨骼检测、人脸280关键点、手势检测、 人脸属性功能
● 重构了底层逻辑,更新了调用接口,兼容v1.x.0的美颜,大眼,瘦脸,人脸检测功能
● 添加22款滤镜
● 更新了人脸检测模型
● 完善 Android demo 功能展示
● 美颜滤镜新增 buffer 输入接口支持
● 人脸添加更多输入图片格式支持
● 增加骨骼支持
● 支持商业授权码
● 增加一种大眼瘦脸模式,支持大眼、瘦脸单独设置
● 增加人脸检测、美颜、滤镜几个模块的类型定义和接口使用说明。
● 增加 iOS/Android 使用 samples。