视频文件异步接口
1. 接口介绍
客户通过视频文件异步识别接口提交识别任务,图普拉取视频文件进行截图及切片,对视频截图及语音片段进行识别检测,并将结果通过回调通知客户。 调用该接口时会返回本次审核任务的任务 ID,并在回调请求中携带任务 ID。业务流程如下:
图普采用 任务并发数 对异步接口进行并发控制,即任一时刻最多允许 N 个任务同时处理。在测试期间, 任务并发数为 30(允许同时处理 30 个任务),正式使用或需要增加时请联系客户经理调整。当超出任务并发数后继续提交任务时,根据接口类型略有不同:
- 异步文件接口:可以正常提交任务,提交的任务排队等待处理;
- 异步流接口:提交任务时返回超出并发状态码(由于流的实时性要求,无法排队等待处理,因此无法继续提交)。
异步文件接口中,视频/语音文件建议小于 10GB,而文档文件须小于 500MB;异步流接口对流的时长没有限制,建议客户在流关闭时主动调用任务关闭接口。
截图分辨率
如果视频的短边分辨率超过 1024 像素,则截取的图片以 1024/短边 等比例截取。例如:视频分辨率为 1920x1080
,
截图的分辨率为 1820x1024
。
2. 请求
2.1 请求地址
- v3.1(推荐)
- v3
区域 | 请求地址 |
---|---|
国内 | https://api.video.tuputech.com/v3.1/recognition/video/async/<secretId> |
国外 | https://api-oversea.video.tuputech.com/v3.1/recognition/video/async/<secretId> |
区域 | 请求地址 |
---|---|
国内 | https://api.video.tuputech.com/v3/recognition/video/asyncscan/<secretId> |
国外 | https://api-oversea.video.tuputech.com/v3/recognition/video/asyncscan/<secretId> |
<secretId>
需替换为您的应用 SID
,请联系客户经理为您开通及配置。关于 SID
详见 常见问题(FAQ)。
2.2 请求方法
POST
2.3 请求头
Content-Type: application/json
2.4 超时时间及异常处理
建议配置超时时间 1
秒,在 HTTP 响应状态码非 200
或业务状态码不为 0
时进行重试。
2.5 请求参数说明 🔥
- v3.1(推荐)
- v3
参数名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
video | Video | 是 | 视频文件信息,详见 Video 参数说明 |
tasks | Array<String> | 否 | 指定的任务 ID。通常单个应用(接口)下会配置多个识别任务,可根据业务需要指定其中的部分任务进行识别 |
customInfo | Object<String, Any> | 否 | 自定义信息,为识别任务添加业务信息(如房间 ID、文件 ID 等)或其他扩展参数 |
nonce | Number | 是 | 随机数 |
timestamp | Number | 是 | 当前服务器的 Unix 时间戳 |
signature | String | 是 |
|
Video 参数说明
参数名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
url | String | 是 | 视频文件链接。 1. 出于安全考虑,视频链接端口除 80 , 443 端口外,应在 1025-65535 范围内 |
callback | String | 否 | 识别结果回调接口地址,用于接收 POST 回调;未指定时忽略回调 |
interval | Number | 否 | 视频截图间隔,单位秒。取值范围 [0.5, 10] ,默认 1 秒 |
audio | Boolean | 否 | 是否开启语音识别,默认 false |
参数名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
video | String | 是 | 视频文件链接。 1. 出于安全考虑,视频链接端口除 80 , 443 端口外,应在 1025-65535 范围内 |
timestamp | Int | 是 | 当前服务器的 Unix 时间戳 |
nonce | Int | 是 | 随机数 |
signature | String | 是 |
|
callbackUrl | String | 否 | 识别结果回调接口地址,用于接收 POST 回调;未指定时忽略回调 |
interval | Number | 否 | 视频截图间隔,单位秒。取值范围 [0.5, 10] ,默认 1 秒 |
audio | Boolean | 否 | 是否开启语音识别,默认 false |
callbackRules | CallbackRules | 否 | 回调规则,默认回调违规标签的数据。详见 CallbackRules 数据结构 |
customInfo | Object<String, Any> | 否 | 自定义信息,为识别任务添加业务信息(如房间 ID、文件 ID 等)或其他扩展参数 |
task | Array<String> | 否 | 指定的任务 ID。通常单个应用(接口)下会配置多个识别任务,可根据业务需要指定其中的部分任务进行识别 |
CallbackRules 数据结构
参数名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
<任务 ID> | Array<CallbackRule> | 否 | 识别任务的回调规则,详见 CallbackRule 数据结构 |
CallbackRule 数据结构
参数名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
label | Int | 是 | 仅回调指定标签的结果 |
review | Boolean | 否 | 不为空时,仅回调指定标签的复审类型的结果 |
2.6 请求示例
- v3.1(推荐)
- v3
{
"video": {
"url": "<url>",
"callback": "<callback>",
"audio": true,
"interval": 1
},
"tasks": [
"<taskId>"
],
"customInfo": {
"roomId": "<roomId>"
},
"timestamp": 1685000000,
"nonce": 1685000000,
"signature": "<signature>"
}
{
"video": "<url>",
"interval": 1,
"callbackUrl": "<callback>",
"audio": false,
"customInfo": {
"roomId": "<roomId>"
},
"callbackRules": {
"54bcfc6c329af61034f7c2fc": [
{
"label": 0,
"review": false
},
{
"label": 1,
"review": false
}
]
},
"task": [
"<taskId>"
],
"timestamp": 1685000000,
"nonce": 1685000000,
"signature": "<signature>"
}
3. 同步响应
3.1 响应参数说明 🔥🔥
参数名称 | 类型 | 说明 |
---|---|---|
signature | String | 同步响应或回调请求签名,由图普使用私钥签名,在需要时,您可以通过 图普公钥 进行验签以确保此响应内容来自图普(与您调用接口时使用的公私钥不同)。验签步骤:
|
json | String | 同步响应或回调请求经过 JSON 转义后的字符串,需进一步解析得到业务数据。
|
JSON 参数说明
- v3.1(推荐)
- v3
参数名称 | 类型 | 说明 |
---|---|---|
code | Int | 状态码,详见 业务状态码 |
message | String | 状态信息 |
result | Result | 任务提交结果,详见 Result 参数说明 |
nonce | Number | 随机数 |
timestamp | Number | 当前服务器的 Unix 时间戳 |
Result 参数说明
参数名称 | 类型 | 说明 |
---|---|---|
requestId | String | 任务 ID,长度为 20~64 的字符串(可能随着服务迭代发生变化) |
url | String | 视频文件链接 |
callback | String | 识别结果回调接口地址 |
参数名称 | 类型 | 说明 |
---|---|---|
code | Int | 状态码,详见 业务状态码 |
message | String | 状态信息 |
nonce | Number | 随机数 |
timestamp | Number | 当前服务器的 Unix 时间戳 |
videoId | String | 任务 ID,长度为 20~64 的字符串(可能随着服务迭代发生变化) |
3.2 响应示例
- v3.1(推荐)
- v3
{
"code": 0,
"message": "success",
"result": {
"requestId": "<requestId>",
"url": "<url>",
"callback": "<callback>"
},
"nonce": 1685000000,
"timestamp": 1685000000
}
{
"code": 0,
"message": "success",
"videoId": "<videoId>",
"nonce": 1685000000,
"timestamp": 1685000000
}
4. 回调请求
4.1 请求地址
callbackUrl
参数指定的地址。
4.2 请求方法
POST
4.3 请求头
Content-Type: application/json
4.4 超时时间及异常处理
回调超时时间 5 秒,在 HTTP 响应状态码非 200
时进行重试,最多重试 3 次。
建议客户在处理回调时进行异步处理,响应回调时可以返回字符串或 JSON,示例如下:
// JSON
{
"message": "ok"
}
// 字符串
success
4.5 请求参数说明 🔥🔥🔥
参数名称 | 类型 | 说明 |
---|---|---|
signature | String | 同步响应或回调请求签名,由图普使用私钥签名,在需要时,您可以通过 图普公钥 进行验签以确保此响应内容来自图普(与您调用接口时使用的公私钥不同)。验签步骤:
|
json | String | 同步响应或回调请求经过 JSON 转义后的字符串,需进一步解析得到业务数据。
|
JSON 参数说明
- v3.1(推荐)
- v3
参数名称 | 类型 | 是否必有 | 说明 |
---|---|---|---|
code | Int | 是 | 状态码,详见 业务状态码 |
message | String | 是 | 状态信息 |
requestId | String | 是 | 视频任务 ID |
suggestion | Number | 否 | 汇总结果,整体的通过/拒绝情况,参考 审核场景汇总结果说明 |
riskType | Number | 否 | 汇总结果,整体的风险类型,参考 审核场景汇总结果说明 |
<任务 ID> | Object<String, Any> | 是 | 识别任务的结果,每个识别任务会有 全局固定不变 的 taskId 和对应数据结构,详见下述链接:1. 图片类任务结果 2. 文本类任务结果 3. 语音类任务结果 |
videoInfo | VideoInfo | 是 | 视频信息,详见 VideoInfo 数据结构 |
customInfo | Object<String, Any> | 否 | 提交的自定义信息,请求参数中的 customInfo |
nonce | Number | 是 | 随机数 |
timestamp | Number | 是 | 当前服务器的 Unix 时间戳 |
VideoInfo 数据结构
参数名称 | 类型 | 说明 |
---|---|---|
captureStart | String | 视频截图开始时间,UTC 时区,格式为 2023-01-01T00:00:00Z |
capturedImages | Int | 视频截图数量 |
duration | Number | 视频时长,单位秒 |
参数名称 | 类型 | 是否必有 | 说明 |
---|---|---|---|
code | Int | 是 | 状态码,详见 业务状态码 |
message | String | 是 | 状态信息 |
nonce | Number | 是 | 随机数 |
timestamp | Number | 是 | 当前服务器的 Unix 时间戳 |
videoInfo | VideoInfo | 是 | 视频信息,详见 VideoInfo 数据结构 |
<任务 ID> | Object<String, Any> | 是 | 识别任务的结果,每个识别任务会有 全局固定不变 的 taskId 和对应数据结构,详见下述链接:1. 图片类任务结果 2. 文本类任务结果 3. 语音类任务结果 |
suggestion | Number | 否 | 汇总结果,整体的通过/拒绝情况,参考 审核场景汇总结果说明 |
riskType | Number | 否 | 汇总结果,整体的风险类型,参考 审核场景汇总结果说明 |
customInfo | Object<String, Any> | 否 | 提交的自定义信息,请求参数中的 customInfo |
VideoInfo 数据结构
参数名称 | 类型 | 说明 |
---|---|---|
id | String | 任务 ID |
captureStart | String | 视频截图开始时间,UTC 时区,格式为 2023-01-01T00:00:00Z |
capturedImages | Int | 视频截图数量 |
duration | Float | 视频时长,单位秒 |
message | String | 状态信息,待废弃 |
status | String | 状态,待废弃 |
4.6 请求示例
- v3.1(推荐)
- v3
{
"code": 0,
"requestId": "<requestId>",
"riskType": 1,
"suggestion": 1,
"videoInfo": {
"captureStart": "2023-01-01T00:00:00Z",
"capturedImages": 9,
"duration": 8.5
},
"customInfo": {
"roomId": "<roomId>"
},
"<任务 ID>": {},
"nonce": 1685000000,
"timestamp": 1685000000
}
{
"code": 0,
"message": "success",
"nonce": 1685000000,
"timestamp": 1685000000,
"videoInfo": {
"id": "<videoId>",
"captureStart": "2023-01-01T00:00:00Z",
"capturedImages": 9,
"duration": 8.5
},
"customInfo": {
"roomId": "<roomId>"
},
"suggestion": 1,
"riskType": 1,
"<任务 ID(图片分类任务)>": {
"label": 0,
"review": false,
"fileList": [
{
"url": "<截图链接>",
"rate": 0.9,
"label": 0,
"review": false,
"second": 0
}
],
"avgScores": [
{
"score": 0.9,
"label": 0
}
],
"maximums": [
{
"max": 0.9,
"label": 0
}
],
"statistics": [
{
"count": 0,
"label": 1
}
]
},
"<任务 ID(人物搜索类任务)>": {
"label": 2,
"review": false,
"fileList": [
{
"url": "<截图链接>",
"similarity": 0.9,
"label": 2,
"review": false,
"typeName": "<人物类型>",
"faceId": "<人物名称>",
"personId": "<personId>",
"second": 0,
"facePosition": [
[
0.191406,
0.25
],
[
0.3125,
0.25
],
[
0.3125,
0.4652
],
[
0.191406,
0.4652
]
]
}
],
"statistics": [
{
"count": 1,
"label": 2
}
],
"matchList": [
{
"typeName": "<人物类型>",
"faceId": "<人物名称>",
"personId": "<personId>",
"count": 1
}
]
},
"<任务 ID(自定义图库)>": {
"label": 2,
"fileList": [
{
"url": "<截图链接>",
"label": 2,
"similarity": 0.9,
"relatives": [
{
"path": "<自定义图片链接>",
"score": 0.9
}
],
"second": 10
}
],
"maximums": [
{
"max": 0.9,
"label": 2
}
],
"statistics": [
{
"count": 1,
"label": 2
}
]
},
"<任务 ID(语音转译审核)>": {
"text": "毛泽东你好",
"violations": [
{
"startTime": 12,
"endTime": 15,
"content": "毛泽东",
"action": "block",
"label": "Politics",
"review": false,
"rate": 0.896484,
"details": [
{
"keyword": "毛泽东",
"hint": "毛泽东",
"mainLabel": "Politics",
"subLabel": "National_Leader"
}
]
}
]
},
"<任务 ID(OCR 文本审核)>": {
"label": 3,
"review": false,
"fileList": [
{
"url": "<截图链接>",
"text": "毛泽东",
"scores": 0.9,
"degree": 0,
"location": [
[
0.4256518406293357,
0.5753968315895163
],
[
0.5806905895660593,
0.5753968315895163
],
[
0.5806905895660593,
0.65079364460096
],
[
0.4256518406293357,
0.65079364460096
]
],
"textAnalysis": {
"label": 3,
"review": false,
"rate": 0.9,
"details": [
{
"keyword": "毛泽东",
"hint": "毛泽东",
"mainLabel": 3
}
]
},
"second": 10
}
],
"avgScores": [
{
"score": 0.9,
"label": 3
}
],
"maximums": [
{
"max": 0.9,
"label": 3
}
],
"statistics": [
{
"count": 1,
"label": 3
}
]
},
"<任务 ID(检测类任务)>": {
"fileList": [
{
"url": "<截图链接>",
"category": 0,
"scores": 0.9,
"second": 1,
"location": [
[
0.03537565228836477,
0.03303825855255127
],
[
0.2027942005938315,
0.03303825855255127
],
[
0.2027942005938315,
0.271730899810791
],
[
0.03537565228836477,
0.271730899810791
]
]
}
],
"avgScores": [
{
"score": 0.9,
"category": 0
}
],
"maximums": [
{
"max": 0.9,
"category": 0
}
],
"statistics": [
{
"count": 2,
"category": 0
}
]
}
}