AI面签通过机器人提问的形式取代真实的坐席,从【签里眼视频面签SaaS管理系统】抓取配置好的话术流程,基于客户的业务需求,通过TTS和ASR相关技术,进行问题提问和语义解析,并根据客户的回答内容进行判断以及后续流程节点的流转提问来实现整个面签过程的去人工化和自动化,并将全过程进行音视频录制留存。
实现的相关功能点如下:
√ 音视频通话
√ 云端录制
√ 活体人脸核身
√ ASR语义解析
√ TTS语音合成
√ 防出框比对
√ 动态话术配置(含证件托举)
√ 合同签名
1. 请联系相关商务人员开通租户权限,获取【企业账号】。
2. (按需提供)发起人脸识别需要姓名、证件号、大头照的base64(可有可无)。如果业务系统已经有了人脸识别,需要提供人脸识别的结果和大头照的base64。
3. 需要在【签里眼视频面签SaaS管理系统】进行话术等相关数据配置,生成话术获取到话术ID
2.1 添加依赖框架、静态库、动态库
SDK 依赖以下系统框架,需要在【Build Phases】>【Link Binary With Libraries】中添加,可以参考 Demo,具体依赖如下:
SDK 需要使用相机、相册和录音权限,请在 info.plist 中添加:
Privacy - Microphone Usage Description
Privacy - Camera Usage Description
Privacy - Location When In Use Usage Description
Privacy - Photo Library Usage Description
Supports opening documents in place = YES (documents 文件可访问)
Application supports iTunes file sharing = YES (documents 文件可访问)
1.需要在【BuildSettings】>【Other Linker Flags】中设置:-ObjC
2.需要在【BuildSettings】> 【Enable Bitcode】中设置为 NO
在 appdelegate 的didFinishLaunchingWithOptions 方法中调用SDK初始化的方法。
[[SigningESDK sharedInstance]initSDK];
[SigningESDK sharedInstance].delegate = self;
可以在代理方法中查看初始化结果:
#pragma mark - SigningESDKDelegate
-(void)SigningESDKinitResult:(SEInitResult *)result{
}
SEVideoManager *manager = [SEVideoManager sharedInstance];
manager.delegate = self;
/**
调起服务
@param tenantID 企业账号,需要在后台申请
@param contractID辅助编号
@param businessID 业务编号
*/
[manager videoWithTenantID:tenantID contractID:contractID businessID:businessID];
/**
上传视频
@param videoName 视频名称
@param tenantID 企业账号
@param contractId 辅助编号
@param businessID 业务编号
*/
[[SEVideoManager sharedInstance]uploadVideoWithVideoName:videoName tenantID:tenantID contractId:businessID businessID:businessID];
-(BOOL)SEVideoServiceContinue;
/**
1、如果业务系统不需要人脸识别的功能,
姓名 name 和 证件号 非必传
2、如果需要人脸识别的功能,姓名 name 和证件号 idNo 必传,
人脸识别结果faceVerifyResultType,sourcePhotoStr 为非必传,
sourcePhotoStr参数有值:使用合作伙伴提供的比对源照片进行比对,必须注照片是正脸可信照片,照片质量由合作方保证。参数为空 :根据身份证号 + 姓名使用权威数据源比对
SEFaceVerifyData *faceData = [[SEFaceVerifyData alloc]init];
faceData.idNo = @"130422199201111111”;//证件号
faceData.name = @"张三”;//姓名
faceData.faceVerifyResultType = SEFaceVerifyResultTypeSuccess;
faceData.sourcePhotoStr = @"/9j/4AAQSkZJRgAB……”;// BASE64String 比对源照片,注意:原始图片不能超过 500k,且必须为 JPG 或 PNG 格式。
*/
-(SEFaceVerifyData *)SEVideoServiceWithFaceVerifyData;
/// @param faceVerifyResult 人脸识别的结果
-(void)SEVideoServiceWithFaceVerifyResult:(SEFaceVerifyResult *)faceVerifyResult;
-(SEInterviewData *)SEVideoServiceWithInterviewData;
SEInterviewData *interViewData = [[SEInterviewData alloc]init];
interViewData.userName = 用户唯一标识(必传)
interViewData.tenantName = @”公司名称”//(必传)
interViewData.wordCode = 话术id
interViewData.contractAddress = 合同地址
interViewData.pramas = 话术id需要参数(key value,json串)
interViewData.isLiftWord = @”1” //1是有证件托举 0是没有证件托举
interViewData.interviewType = SEInterviewTypeAiAuto //面签方式(必传)
2023.7 版本号 2.3.0
AI面签自助面签新增实时人脸出框检测
2023.4版本号 2.3.0
AI面签自助面签新增实时人脸出框检测
2022.12 版本号 2.2.9
AI面签文字自动滚动加染色效果
2022.5 版本号 2.2.8
新增AI面签旗舰版模式
2021.11 版本号2.2.6
适配优化 ios 15 的导航栏问题
修改屏幕共享方案
2021.9 版本号2.2.2
AI自助增加上传比对源图片
2021.8 版本号2.2.0
横屏页面适配优化
升级优化视频基础库SDK
2021.7 版本号2.1.6
新增AI面签功能支持单分支多分支话术
2021.6 版本号2.1.6
增加面签结果页面
增加证件托举功能话术
优化人脸比对流程
2021.1.8 版本号2.1.2
remotelyRiskVoideUrl 增加 传入本地视频地址 http视频地址
增加远程面签及无人工面签操作按钮区域
无人工面签title文案修改
2020-12-03
自助录制时退出提醒
SEVideoResult 中添加 地理位置信息,经纬度
2020-11-23
新增远程面签风险视频地址,仅支持https并且与坐席端同域;
新增水印公司名称必传;
新增功能: 拍照水印; 无人工坐席面签; 网络检测转自助