【AI设计部】插件
一、概述:
对接数据通系统,获得数字分身能力。可以结合营销分润体系实现储存空间、视频时长、数字分身数量、声音克隆数量、文案创作次数等指标权益套餐的销售。
该功能需要配合插件数据通系统对接插件一起使用,需要充值接口数量才能进行使用~
商城后台-附件配置-全局设置-音频视频附件设置需要添加 m4a,wav,mp3

路径:应用--AI类--AI设计部
支持小程序和公众号
二、商城端
1、基础设置
(1)基础设置
- 插件开关:开启插件才能使用AI设计部功能
- 算力抵扣:
有开启算力插件的情况下,对应的功能可以设置需要使用多少算力抵扣使用 - 权益是否可转让:开启后可将会员权益转让
- 默认存储空间大小:默认云存储空间有 XX GB
- 视频创作图片:后台上传图片,前端视频创作会显示对应的图片,没有自定义则显示默认(下方图一图二效果)
- AI工具和其他工具插件:勾选相关的功能,在AI设计部页面则会显示对应入口,点击可以跳转到对应页面(下方图三效果)
- 媒体处理:安装【媒体处理】插件(免费),并配置腾讯云媒体处理,否则前端数字分身视频会过大,导致无法完成创作
用户上传数字分身后再提交给数据通系统解决因为前端因数字分身视频过大导致的创作失败问题~

媒体处理插件页面

前端页面效果
图1 图2 图3



(2)阿里云配置(使用声音克隆CV版需要配置到,配置了才可以使用)
密钥信息配置参考:https://help.aliyun.com/zh/model-studio/get-api-key?spm=a2c4g.11186623.0.0.1b6d4b043IDjPn
阿里云百炼网址:https://bailian.console.aliyun.com/?tab=model#/api-key
注意需要先进行实名认证才可以开通免费额度


按照配置参考获取AccessKeyId填写在商城后台

(3)相关协议
数字分身协议内容:设置前端创建数字分身时的弹窗内容
声音克隆协议内容:设置前端创建声音克隆时的弹窗内容

2、商品管理
展示已创建 AI设计部权益套餐自营商品,商品设置权益数量,购买商品后可以获得相关权益

商品挂件:新增AI设计部权益

3、订单管理
购买权益商品后会在这里产生一条订单记录

4、会员权益
展示商城会员所有的权益信息,可对会员进行查看权益明细,权益有效期、充值权益操作

权益充值:

5、数字分身
展示前端会员创建的数字分身,可进行查看视频,查看使用记录 删除操作

6、声音克隆
展示前端会员创建的声音克隆,可进行查看音频,回调状态及失败原因查看使用记录 删除操作


7、声音克隆CV版
展示会员创建声音克隆CV版记录

8、录音文案
1)展示已添加的文案
2)文案用于会员录制声音克隆时读的内容
3)文案内容在30-50个字之间,确保用户能在20秒内流畅的朗读完文案内容

9、视频创作
展示所有视频创作的的的视频,可进行查看视频,回调状态,失败原因,查看详细,删除操作

注意:使用AI自动成片方式,需要到数据通系统对接插件-基础设置--选择好AI视频生成模板

10、相关角色
展示已添加的角色名称,可进行添加新角色配置范文(范文用于使用AI设计部时的关键词使用)

11、字数范围
定义一个字数范围,用于前端选择可生成的视频时间

添加范围:

12、背景音乐分类
自定义添加分类

13、背景音乐
可上传音频文件到平台,音乐可用于生成视频的背景音乐

添加背景音乐:

14、图像生成
1.数据通系统对接插件-基础设置:
(1)新增AI图像生成模型(AI设计部插件开启时才显示),可以选择开启模型,前端生成可以选择模型去进行生成
2、AI设计部插件--图像生成
列表展示前端生成的任务


3、图像生成用户端和商城端使用路径
①用户端使用:用户通过会员中心--AI设计部--图像生成进行生成
②商城端使用:
可以通过后台AI助理--图像生成进行操作

商城上传图片弹窗也增加了可以直接生成

15、场景管理
(1)自定义一个场景,可以让会员直接使用场景内容生成图像


(2)场景分类
前端效果:


二、前端展示
1、购买权益:
点击权益空间进入,会员可通过购买权益,获取相应的存储空间、数字分身、声音克隆、文案创作、唇形匹配的次数



2、转赠:
后台开启转赠功能时,可以将当前拥有的权益转让给其他会员

3、个人创作:
展示个人创作的作品、数字分身、声音克隆,点击数字分身/声音克隆可以进行创建数字分身操作
视频管理、分身管理、音色管理等可以查看已创建好的视频、分身及声音克隆信息~
页面效果:


4、企业成员权限开启:
企业成员使用该功能 需要企业创建人到企业管理pc端后台-员工管理中授权权限即可使用

注意:商城后台对应企业需要勾选好相关的权限,企业管理pc端后台才会显示
企业权益页面:
个人创作页面右上角点击切换可以切换企业空间,页面展示会员所有所在企业(如果是创建人 右上角会显示是创建 如果是成员 则显示该企业创建人会员名称),操作和个人权益一致 但消耗的权益数量是企业创建人的数量。
作品、数字分身、声音克隆都展示企业所有的


个人/企业空间:音色管理--新增声音克隆CV版展示

5、数字分身:
根据要求可创建一个数字人分身做为合成视频使用,录制真人出镜视频(念数字123)并上传,生成数字分身,可以上传正脸参考图
注:每创建一个数字人分身都会消耗一个数字分身权益数量,当数字权益数量为0时 页面不显示创建数字分身组件


6、声音克隆:
根据要求可创建一个声音克隆做为合成视频使用,录制声音,对声音进行克隆
注:每创建一个声音克隆都会消耗一个声音克隆权益数量,当声音克隆数量为0时 页面不显示创建声音克隆组件
声音克隆高阶版和声音克隆CV版的区别如下
声音克隆高阶版:提交20句话,每一句都需要校验。校验后再点击提交合成音色。(会带字幕)
声音克隆CV版:只需要10-20s的音频,无需提交校验。点击提交合成音色。(不带字幕)


声音克隆CV版,点击开始录制可以进行选择,阅读文案是通过后台进行添加的录音文案,没有添加则会为空,注意先添加好


7、视频创作:
(1)数字分身成片
根据要求创建一个合成视频,选择数字分身和声音,输入文案
注:1、每创建一个合成视频都会消耗一个合成视频权益数量,当合成视频数量为0时 页面不显示创建合成视频组件
2、数字分身默认是最新创建的分身,可点击更换其他分身

音乐:
可选择后台设置的背景音乐,点击播放按钮可以试听音乐 点击重置可取消选择的音乐

文案:
选择对应角色和字数要求,编写主题内容或者点击试试范文自动生成主题内容 点击生成文案 可以生成对应字数的文案
注:每创建一个文案都会消耗一个合成文案权益数量

配音:
可选择自己生成的配音(声音克隆和声音克隆CV版),或者使用公共配音进行合成视频。点击播放按钮可试听


(2)AI自动成片
填写视频创意描述,可以上传参考图片、视频封面、固定比例、分辨率、视频时长、选择模型(其中的Doubao-Seedance-2.5;支持最长30s时长一键成片创作)等进行生成视频

(3)素材成片
一键成片能力,支持自定义镜头创作(自定义添加多个镜头)、AI切割文案创作(生成完整文案让AI自动切割成多个镜头)
片头片尾视频则是通过AI素材库进行上传的

8、图像生成:

已生成的图像作品点击进入可以二次创作



三、企业管理pc端
AI设计部支持PC端,拥有权限的员工可以登录企业管理平台,进入AI设计部界面了。

在AI设计部功能里,员工可以自由切换个人空间与企业空间,灵活应对不同的办公场景。
企业空间下,企业法人购买AI设计部权益,员工使用权益进行上传编辑,共享数字分身、共享克隆音色、共享视频作品,团队高效协作

企业管理平台AI设计部首页展示权益详情,可以帮助员工了解存储空间使用情况、权益剩余量及总量等信息。

为了方便员工移动办公,界面也集成小程序二维码,员工微信扫码即可直达AI设计部小程序端,在手机上完成视频创作全流程。

支持自定义轮播图,企业在商城平台的AI设计部功能中上传图片并配置跳转链接。员工点击后可直接跳转至目标页面(如商城平台的AI设计部功能),实现企业管理平台与商城平台的快速切换。


企业管理pc端--点击轮播图可以跳转到设置的页面

在能力方面,企业管理平台AI设计部功能与手机端保持一致,包含视频创作、数字分身、声音克隆、唇形匹配四大核心板块。

- 一键成片:选择数字分身,输入文案并配置音色、背景音乐,合成并导出视频

- 一键成片:选择AI自动成片,上传图片、视频、音频素材\选择模型(其中的Doubao-Seedance-2.5;支持最长30s时长一键成片创作)一键生成视频成片

- 一键成片:选择素材成片,使用素材库素材快速生成视频!

自定义镜头创作:选择AI素材库--选择AI素材库上传的素材,可随机素材/选择标签或者手动选择素材进行合成;
片头/片尾也是根据素材库上传的选择
AI切割文案创作:生成完整文案让AI自动切割成多个镜头
- 数字分身:拍摄人物出镜视频素材,朗读数字123321即可,无需备稿,克隆数字形象。

- 声音克隆(可以选择声音克隆或者声音克隆CV版)
声音克隆:提交20句话,每一句都需要校验。校验后再点击提交合成音色。
声音克隆CV版:只需要10-20s的音频,无需提交校验。点击提交合成音色,每个企业1000个音色克隆免费额度

- 唇形匹配:选择创作好的视频进行唇形匹配,让语音与数字分身的口型精准同步。

- 图像生成:
可依据填写的图片创意描述,托人工智能模型解析文字、参考图等输入指令,生成图像

在已生成图像作品可以二次创作,会自动保留第一次上传的参考图另行编辑创意描述生成即可








上一篇

