@tencentcloud/sdk-mcp 1.7.7 → 1.7.8
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/CHANGELOG.md +13 -0
- package/README.md +7 -9
- package/index.js +8 -8
- package/knowledge/doc-url-resolver.js +16 -9
- package/knowledge/embedding/build-vectors.js +92 -0
- package/knowledge/embedding/embed-model.js +41 -0
- package/knowledge/embedding/vector-augment.js +126 -0
- package/knowledge/embedding/vector-index.js +70 -0
- package/knowledge/search/exact-lookup.js +145 -16
- package/knowledge/search/filter-pool.js +68 -32
- package/knowledge/search/requires-framework.js +1 -1
- package/knowledge/search/search-core.js +18 -12
- package/knowledge/search/search-knowledge.js +24 -34
- package/knowledge/search/search-pass.js +373 -168
- package/knowledge/search/url-row-scorer.js +24 -6
- package/package.json +3 -1
- package/resource/index/manifest.json +1 -1
- package/resource/index/vectors/index.json +4 -0
- package/resource/integration/chat/preset/react/integration.md +9 -5
- package/resource/integration/chat/preset/uni-app/integration.md +4 -0
- package/resource/integration/chat/preset/vue/integration.md +10 -6
- package/resource/integration/roomkit/preset/vue/integration.md +154 -208
- package/resource/knowledge/callkit/preset/miniprogram/integration.md +2 -1
- package/resource/knowledge/chat/preset/ios-uikit/integration.md +0 -16
- package/resource/knowledge/chat/preset/react/h5/integration.md +16 -5
- package/resource/knowledge/chat/preset/vue/features/conversation-list.md +6 -3
- package/resource/knowledge/chat/preset/vue/h5/integration.md +7 -4
- package/resource/knowledge/push/config/android/honor.md +16 -1
- package/resource/knowledge/push/config/android/huawei.md +20 -4
- package/resource/knowledge/push/config/android/meizu.md +19 -5
- package/resource/knowledge/push/config/android/vivo.md +20 -1
- package/resource/knowledge/push/config/harmonyos.md +21 -5
- package/resource/knowledge/push/integration/flutter.md +1 -1
- package/resource/knowledge/roomkit/preset/uniapp-app/integration.md +18 -14
- package/resource/knowledge/rtcengine/web/plugin/23-advanced-support-detection.md +30 -0
- package/resource/knowledge/rtcengine/web/plugin/31-advanced-plugins-overview.md +1 -1
- package/resource/knowledge/rtcengine/web/plugin/35-advanced-ai-denoiser.md +1 -1
- package/resource/knowledge/rtcengine/web/plugin/36-advanced-virtual-background.md +4 -0
- package/resource/knowledge/trtc/android/TRTCCloud.md +94 -85
- package/resource/knowledge/trtc/android/TRTCCloudDef.md +48 -46
- package/resource/knowledge/trtc/android/TRTCCloudListener.md +48 -48
- package/resource/knowledge/trtc/android/TXAudioEffectManager.md +18 -18
- package/resource/knowledge/trtc/android/TXDeviceManager.md +4 -4
- package/resource/knowledge/trtc/android/TXLiteAVCode.md +1 -0
- package/resource/knowledge/trtc/c++/ITRTCCloud.md +90 -90
- package/resource/knowledge/trtc/c++/ITXAudioEffectManager.md +18 -18
- package/resource/knowledge/trtc/c++/ITXDeviceManager.md +9 -9
- package/resource/knowledge/trtc/c++/TRTCCloudCallback.md +47 -47
- package/resource/knowledge/trtc/c++/TRTCTypeDef.md +47 -45
- package/resource/knowledge/trtc/c++/TXLiteAVCode.md +1 -0
- package/resource/knowledge/trtc/ios/TRTCCloud.md +93 -93
- package/resource/knowledge/trtc/ios/TRTCCloudDelegate.md +50 -50
- package/resource/knowledge/trtc/ios/TXAudioEffectManager.md +8 -8
- package/resource/knowledge/trtc/ios/TXDeviceManager.md +9 -9
- package/resource/knowledge/trtc/ios/TXLiteAVCode.md +1 -0
- package/resource/knowledge/trtc/ios/TXLiveSDKTypeDef.md +48 -46
- package/server-config.js +8 -9
- package/server.js +1 -1
- package/tools/common/present_framework_choice.js +1 -1
- package/tools/common/search_trtc_knowledge.js +20 -1
- package/utils/preflight-route.js +8 -0
- package/utils/report-cls-client.js +1 -1
- package/utils/report-es-client.js +1 -1
|
@@ -4,7 +4,7 @@ Module: TRTCCloud @ TXLiteAVSDK
|
|
|
4
4
|
|
|
5
5
|
Function: 腾讯云 TRTC 主功能接口
|
|
6
6
|
|
|
7
|
-
Version: 13.
|
|
7
|
+
Version: 13.5
|
|
8
8
|
|
|
9
9
|
## TRTCCloud
|
|
10
10
|
|
|
@@ -180,9 +180,9 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
180
180
|
包括 TRTCAppSceneLIVE 和 TRTCAppSceneVoiceChatRoom 两个可选项,分别是视频直播和语音直播,该模式适合十万人以内的在线直播场景,但需要您在接下来介绍的 TRTCParams 参数中指定 **角色(role)** 这个字段,也就是将房间中的用户区分为 **主播** (TRTCRoleAnchor) 和 **观众** (TRTCRoleAudience) 两种不同的角色。
|
|
181
181
|
|
|
182
182
|
调用该接口后,您会收到来自 TRTCCloudDelegate 中的 onEnterRoom 回调:
|
|
183
|
-
-
|
|
183
|
+
- 如果进房成功,参数 `result` 会是一个正数(result > 0),表示从函数调用到进入房间所花费的时间,单位是毫秒(ms)。
|
|
184
184
|
|
|
185
|
-
-
|
|
185
|
+
- 如果进房失败,参数 `result` 会是一个负数(result < 0),表示进房失败的[错误码](https://cloud.tencent.com/document/product/647/32257)。
|
|
186
186
|
|
|
187
187
|
|参数|描述|
|
|
188
188
|
|---------|---------|
|
|
@@ -219,7 +219,7 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
219
219
|
您可以在进入房间时通过 TRTCParams 中的 `role` 字段事先确定用户的角色,也可以在进入房间后通过该接口动态切换角色。
|
|
220
220
|
| 参数 | 描述 |
|
|
221
221
|
| --- | --- |
|
|
222
|
-
| role | 角色,默认为 <strong>主播</strong>。<br>-
|
|
222
|
+
| role | 角色,默认为 <strong>主播</strong>。<br>- TRTCRoleAnchor :主播,可以发布自己的音视频,同一个房间里最多支持50个主播同时发布音视频。<br>- TRTCRoleAudience :观众,不能发布自己的音视频流,只能观看房间中其他主播的音视频。如果要发布自己的音视频,需要先通过 switchRole 切换成 <strong>主播</strong>,同一个房间内同时最多可以容纳 10 万名观众。 |
|
|
223
223
|
|
|
224
224
|
> **注意**
|
|
225
225
|
>
|
|
@@ -239,8 +239,8 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
239
239
|
您可以在进入房间时通过 TRTCParams 中的 `role` 字段事先确定用户的角色,也可以在进入房间后通过该接口动态切换角色。
|
|
240
240
|
| 参数 | 描述 |
|
|
241
241
|
| --- | --- |
|
|
242
|
-
| privateMapKey | 用于权限控制的权限票据,当您希望某个房间只能让特定的 userId 进入或者上行视频时,需要使用 <code>privateMapKey</code> 进行权限保护。<br>-
|
|
243
|
-
| role | 角色,默认为 <strong>主播</strong>。<br>-
|
|
242
|
+
| privateMapKey | 用于权限控制的权限票据,当您希望某个房间只能让特定的 userId 进入或者上行视频时,需要使用 <code>privateMapKey</code> 进行权限保护。<br>- 仅建议有高级别安全需求的客户使用,更多详情请参见 <a href="https://cloud.tencent.com/document/product/647/32240">开启高级权限控制</a>。 |
|
|
243
|
+
| role | 角色,默认为 <strong>主播</strong>。<br>- TRTCRoleAnchor :主播,可以发布自己的音视频,同一个房间里最多支持50个主播同时发布音视频。<br>- TRTCRoleAudience :观众,不能发布自己的音视频流,只能观看房间中其他主播的音视频。如果要发布自己的音视频,需要先通过 switchRole 切换成 <strong>主播</strong>,同一个房间内同时最多可以容纳 10 万名观众。 |
|
|
244
244
|
|
|
245
245
|
> **注意**
|
|
246
246
|
>
|
|
@@ -254,9 +254,9 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
254
254
|
**切换房间。**
|
|
255
255
|
|
|
256
256
|
使用该接口可以让用户快速从一个房间切换到另一个房间。
|
|
257
|
-
-
|
|
257
|
+
- 如果用户的身份是“观众”,该接口的调用效果等同于 `exitRoom(当前房间) + enterRoom(新的房间)` 。
|
|
258
258
|
|
|
259
|
-
-
|
|
259
|
+
- 如果用户的身份是“主播”,该接口在切换房间的同时还会保持自己的音视频发布状态,因此在房间切换过程中,摄像头的预览和声音的采集都不会中断。
|
|
260
260
|
|
|
261
261
|
该接口适用于在线教育场景中,监课老师在多个房间中进行快速切换的场景。在该场景下使用 `switchRoom` 可以获得比 `exitRoom + enterRoom` 更好的流畅性和更少的代码量。
|
|
262
262
|
|
|
@@ -288,9 +288,9 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
288
288
|
跨房通话的请求结果会通过 TRTCCloudDelegate 中的 onConnectOtherRoom 回调通知给您。
|
|
289
289
|
|
|
290
290
|
例如:当房间“101”中的主播 A 通过 `connectOtherRoom()` 跟房间“102”中的主播 B 建立跨房通话后,
|
|
291
|
-
-
|
|
291
|
+
- 房间“101”中的用户都会收到主播 B 的 `onRemoteUserEnterRoom(B)` 和 `onUserVideoAvailable(B,YES)` 这两个事件回调,即房间“101”中的用户都可以订阅主播 B 的音视频。
|
|
292
292
|
|
|
293
|
-
-
|
|
293
|
+
- 房间“102”中的用户都会收到主播 A 的 `onRemoteUserEnterRoom(A)` 和 `onUserVideoAvailable(A,YES)` 这两个事件回调,即房间“102”中的用户都可以订阅主播 A 的音视频。
|
|
294
294
|
|
|
295
295
|
跨房通话的参数考虑到后续扩展字段的兼容性问题,暂时采用了 JSON 格式的参数:
|
|
296
296
|
|
|
@@ -337,9 +337,9 @@ TRTC 的所有用户都需要进入房间才能“发布”或“订阅”音视
|
|
|
337
337
|
**设置订阅模式(需要在进入房前设置才能生效)。**
|
|
338
338
|
|
|
339
339
|
您可以通过该接口在“自动订阅”和“手动订阅”两种模式下进行切换:
|
|
340
|
-
-
|
|
340
|
+
- 自动订阅:默认模式,用户在进入房间后会立刻接收到该房间中的音视频流,音频会自动播放,视频会自动开始解码(依然需要您通过 startRemoteView 接口绑定渲染控件)。
|
|
341
341
|
|
|
342
|
-
-
|
|
342
|
+
- 手动订阅:在用户进入房间后,需要手动调用 startRemoteView 接口才能启动视频流的订阅和解码,需要手动调用 muteRemoteAudio (NO) 接口才能启动声音的播放。
|
|
343
343
|
|
|
344
344
|
在绝大多数场景下,用户进入房间后都会订阅房间中所有主播的音视频流,因此 TRTC 默认采用了自动订阅模式,以求得最佳的“秒开体验”。
|
|
345
345
|
|
|
@@ -405,8 +405,8 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
405
405
|
>
|
|
406
406
|
> 4. 同一个用户可以在多个 TRTCCloud 实例中推流,也可以调用子实例中与本地音视频相关的接口。但需要注意:
|
|
407
407
|
>
|
|
408
|
-
> -
|
|
409
|
-
> -
|
|
408
|
+
> - 多实例的音频需要同时为麦克风采集或自定义采集,而且与音频设备相关的接口调用会以最后一次为准;
|
|
409
|
+
> - 与摄像头相关的调用会以最后一次为准:startLocalPreview。
|
|
410
410
|
|
|
411
411
|
**返回值说明:**
|
|
412
412
|
|
|
@@ -437,12 +437,12 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
437
437
|
例如:
|
|
438
438
|
|
|
439
439
|
房间“101”中有主播 A 与观众 B,房间“102”中有主播 C,主播 C 正常发布音视频流。主播 A 通过 connectOtherRoom 跟主播 C 建立跨房通话。
|
|
440
|
-
-
|
|
440
|
+
- 此时,主播 A 与观众 B 都会收到主播 C 的 `onRemoteUserEnterRoom(C)` , `onUserVideoAvailable(C,YES)` 和 `onUserAudioAvailable(C,YES)` 这三个事件回调,可以订阅主播 C 的音视频。
|
|
441
441
|
|
|
442
442
|
之后,主播 A 调用该接口禁用主播 C 在本房间发布音频的能力。
|
|
443
|
-
-
|
|
443
|
+
- 此后,主播 C 的音频流将无法发布至房间“101”,主播 A 与观众 B 都将收到 `onUserAudioAvailable(C,NO)` 事件回调,且无法再通过 `muteRemoteAudio(C,NO)` 订阅主播 C 的音频。
|
|
444
444
|
|
|
445
|
-
-
|
|
445
|
+
- 主播 C 的视频流将不受影响。房间“102”中的其他观众也不受影响,可以正常订阅主播 C 的音频。
|
|
446
446
|
|
|
447
447
|
该接口的参数考虑到后续扩展字段的兼容性问题,暂时采用了 JSON 格式的参数,示例如下:
|
|
448
448
|
|
|
@@ -553,8 +553,8 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
553
553
|
>
|
|
554
554
|
> 如果希望开播前预览摄像头画面并通过 BeautyManager 调节美颜参数,您可以:
|
|
555
555
|
>
|
|
556
|
-
> -
|
|
557
|
-
> -
|
|
556
|
+
> - 方案一:在调用 enterRoom 之前调用 `startLocalPreview` 。
|
|
557
|
+
> - 方案二:在调用 enterRoom 之后调用 `startLocalPreview + muteLocalVideo(YES)` 。
|
|
558
558
|
|
|
559
559
|
## startLocalPreview:
|
|
560
560
|
|
|
@@ -576,8 +576,8 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
576
576
|
>
|
|
577
577
|
> 如果希望开播前预览摄像头画面并通过 BeautyManager 调节美颜参数,您可以:
|
|
578
578
|
>
|
|
579
|
-
> -
|
|
580
|
-
> -
|
|
579
|
+
> - 方案一:在调用 enterRoom 之前调用 `startLocalPreview` 。
|
|
580
|
+
> - 方案二:在调用 enterRoom 之后调用 `startLocalPreview + muteLocalVideo(YES)` 。
|
|
581
581
|
|
|
582
582
|
## updateLocalView:
|
|
583
583
|
|
|
@@ -624,14 +624,14 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
624
624
|
**订阅远端用户的视频流,并绑定视频渲染控件。**
|
|
625
625
|
|
|
626
626
|
调用该接口可以让 SDK 拉取指定 userId 的视频流,并渲染到参数 `view` 指定的渲染控件上。您可以通过 setRemoteRenderParams 设置画面的显示模式。
|
|
627
|
-
-
|
|
627
|
+
- 如果您已经知道房间中有视频流的用户的 userId,可以直接调用 `startRemoteView` 订阅该用户的画面。
|
|
628
628
|
|
|
629
|
-
-
|
|
629
|
+
- 如果您不知道房间中有哪些用户在发布视频,您可以在 enterRoom 之后等待来自 onUserVideoAvailable 的通知。
|
|
630
630
|
|
|
631
631
|
调用本接口只是启动视频流的拉取,此时画面还需要加载和缓冲,当缓冲完毕后您会收到来自 onFirstVideoFrame 的通知。
|
|
632
632
|
| 参数 | 描述 |
|
|
633
633
|
| --- | --- |
|
|
634
|
-
| streamType | 指定要观看 userId 的视频流类型。<br>-
|
|
634
|
+
| streamType | 指定要观看 userId 的视频流类型。<br>- 高清大画面:TRTCVideoStreamTypeBig。<br>- 低清小画面:TRTCVideoStreamTypeSmall(需要远端用户通过 enableEncSmallVideoStream 开启双路编码后才有效果)。<br>- 辅流画面(常用于屏幕分享):TRTCVideoStreamTypeSub。 |
|
|
635
635
|
| userId | 指定远端用户的 ID。 |
|
|
636
636
|
| view | 用于承载视频画面的渲染控件。 |
|
|
637
637
|
|
|
@@ -665,7 +665,7 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
665
665
|
调用此接口会让 SDK 停止接收该用户的视频流,并释放该路视频流的解码和渲染资源。
|
|
666
666
|
| 参数 | 描述 |
|
|
667
667
|
| --- | --- |
|
|
668
|
-
| streamType | 指定要观看 userId 的视频流类型。<br>-
|
|
668
|
+
| streamType | 指定要观看 userId 的视频流类型。<br>- 高清大画面:TRTCVideoStreamTypeBig。<br>- 低清小画面:TRTCVideoStreamTypeSmall。<br>- 辅流画面(常用于屏幕分享):TRTCVideoStreamTypeSub。 |
|
|
669
669
|
| userId | 指定远端用户的 ID。 |
|
|
670
670
|
|
|
671
671
|
## stopAllRemoteView
|
|
@@ -687,7 +687,7 @@ TRTCCloud 一开始被设计成单例模式,限制了多房间并发观看的
|
|
|
687
687
|
| 参数 | 描述 |
|
|
688
688
|
| --- | --- |
|
|
689
689
|
| mute | 是否暂停接收。 |
|
|
690
|
-
| streamType | 要暂停/恢复的视频流类型。<br>-
|
|
690
|
+
| streamType | 要暂停/恢复的视频流类型。<br>- 高清大画面:TRTCVideoStreamTypeBig。<br>- 低清小画面:TRTCVideoStreamTypeSmall。<br>- 辅流画面(常用于屏幕分享):TRTCVideoStreamTypeSub。 |
|
|
691
691
|
| userId | 指定远端用户的 ID。 |
|
|
692
692
|
|
|
693
693
|
> **注意**
|
|
@@ -853,7 +853,7 @@ SDK 默认不开启麦克风,当用户需要发布本地音频时,需要调
|
|
|
853
853
|
开启本地音频的采集和发布后,房间中的其他用户会收到 onUserAudioAvailable(userId, YES) 的通知。
|
|
854
854
|
| 参数 | 描述 |
|
|
855
855
|
| --- | --- |
|
|
856
|
-
| quality | 声音音质<br>-
|
|
856
|
+
| quality | 声音音质<br>- TRTCAudioQualitySpeech,流畅:单声道;音频裸码率:18kbps;适合语音通话为主的场景,例如在线会议,语音通话。<br>- TRTCAudioQualityDefault,默认:单声道;音频裸码率:50kbps;SDK 默认的音频质量,如无特殊需求推荐选择之。<br>- TRTCAudioQualityMusic,高音质:双声道 + 全频带;音频裸码率:128kbps;适合需要高保真传输音乐的场景,例如在线K歌、音乐直播等。 |
|
|
857
857
|
|
|
858
858
|
> **注意**
|
|
859
859
|
>
|
|
@@ -1128,17 +1128,17 @@ SDK 默认不开启麦克风,当用户需要发布本地音频时,需要调
|
|
|
1128
1128
|
**获取美颜管理类(TXBeautyManager)。**
|
|
1129
1129
|
|
|
1130
1130
|
通过美颜管理,您可以使用以下功能:
|
|
1131
|
-
-
|
|
1131
|
+
- 设置“磨皮”、“美白”、“红润”等美颜特效。
|
|
1132
1132
|
|
|
1133
|
-
-
|
|
1133
|
+
- 以下功能仅iOS/Android支持:
|
|
1134
1134
|
|
|
1135
|
-
-
|
|
1135
|
+
- 设置“大眼”、“瘦脸”、“V脸”、“下巴”、“短脸”、“小鼻”、“亮眼”、“白牙”、“祛眼袋”、“祛皱纹”、“祛法令纹”等修脸特效。
|
|
1136
1136
|
|
|
1137
|
-
-
|
|
1137
|
+
- 设置“发际线”、“眼间距”、“眼角”、“嘴形”、“鼻翼”、“鼻子位置”、“嘴唇厚度”、“脸型”等修脸特效。
|
|
1138
1138
|
|
|
1139
|
-
-
|
|
1139
|
+
- 设置“眼影”、“腮红”等美妆特效。
|
|
1140
1140
|
|
|
1141
|
-
-
|
|
1141
|
+
- 设置动态贴纸和人脸挂件等动画特效。
|
|
1142
1142
|
**返回值说明:**
|
|
1143
1143
|
|
|
1144
1144
|
美颜管理类 TXBeautyManager。
|
|
@@ -1148,13 +1148,13 @@ SDK 默认不开启麦克风,当用户需要发布本地音频时,需要调
|
|
|
1148
1148
|
**添加水印。**
|
|
1149
1149
|
|
|
1150
1150
|
水印的位置是通过 rect 参数来指定的,rect 是一个四元组参数,其格式为 (x,y,width,height)
|
|
1151
|
-
-
|
|
1151
|
+
- x:水印的坐标,取值范围为 [0, 1] 的浮点数。
|
|
1152
1152
|
|
|
1153
|
-
-
|
|
1153
|
+
- y:水印的坐标,取值范围为 [0, 1] 的浮点数。
|
|
1154
1154
|
|
|
1155
|
-
-
|
|
1155
|
+
- width:水印的宽度,取值范围为 [0, 1] 的浮点数。
|
|
1156
1156
|
|
|
1157
|
-
-
|
|
1157
|
+
- height:是不用设置的,SDK 内部会根据水印图片的宽高比自动计算一个合适的高度。
|
|
1158
1158
|
|
|
1159
1159
|
参数设置举例:
|
|
1160
1160
|
|
|
@@ -1178,15 +1178,15 @@ SDK 默认不开启麦克风,当用户需要发布本地音频时,需要调
|
|
|
1178
1178
|
**获取音效管理类(TXAudioEffectManager)。**
|
|
1179
1179
|
|
|
1180
1180
|
TXAudioEffectManager 是音效管理接口,您可以通过该接口实现如下功能:
|
|
1181
|
-
-
|
|
1181
|
+
- 背景音乐:支持在线音乐和本地音乐,支持变速、变调等特效、支持原生和伴奏并播放和循环播放。
|
|
1182
1182
|
|
|
1183
|
-
-
|
|
1183
|
+
- 耳机耳返:麦克风捕捉的声音实时通过耳机播放,常用于音乐直播。
|
|
1184
1184
|
|
|
1185
|
-
-
|
|
1185
|
+
- 混响效果:KTV、小房间、大会堂、低沉、洪亮等。
|
|
1186
1186
|
|
|
1187
|
-
-
|
|
1187
|
+
- 变声特效:萝莉、大叔、重金属等。
|
|
1188
1188
|
|
|
1189
|
-
-
|
|
1189
|
+
- 短音效:鼓掌声、欢笑声等简短的音效文件(对于小于10秒的文件,请将 isShortFile 参数设置为 YES)。
|
|
1190
1190
|
**返回值说明:**
|
|
1191
1191
|
|
|
1192
1192
|
音效管理类 TXAudioEffectManager。
|
|
@@ -1237,13 +1237,13 @@ AI 转录管理类 AITranscriberManager。
|
|
|
1237
1237
|
如果您希望抓取整个 iOS 系统的屏幕内容(而不受当前应用的限制),推荐使用 startScreenCaptureByReplaykit。
|
|
1238
1238
|
|
|
1239
1239
|
iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
1240
|
-
-
|
|
1240
|
+
- 分辨率(videoResolution): 1280 x 720。
|
|
1241
1241
|
|
|
1242
|
-
-
|
|
1242
|
+
- 帧率(videoFps): 10 FPS。
|
|
1243
1243
|
|
|
1244
|
-
-
|
|
1244
|
+
- 码率(videoBitrate): 1600 kbps。
|
|
1245
1245
|
|
|
1246
|
-
-
|
|
1246
|
+
- 分辨率自适应(enableAdjustRes): NO。
|
|
1247
1247
|
|
|
1248
1248
|
| 参数 | 描述 |
|
|
1249
1249
|
| --- | --- |
|
|
@@ -1261,13 +1261,13 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1261
1261
|
参考文档:[实时屏幕分享(iOS)](https://cloud.tencent.com/document/product/647/45750)
|
|
1262
1262
|
|
|
1263
1263
|
iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
1264
|
-
-
|
|
1264
|
+
- 分辨率(videoResolution):1280 x 720。
|
|
1265
1265
|
|
|
1266
|
-
-
|
|
1266
|
+
- 帧率(videoFps):10 FPS。
|
|
1267
1267
|
|
|
1268
|
-
-
|
|
1268
|
+
- 码率(videoBitrate):1600 kbps。
|
|
1269
1269
|
|
|
1270
|
-
-
|
|
1270
|
+
- 分辨率自适应(enableAdjustRes):NO。
|
|
1271
1271
|
|
|
1272
1272
|
|参数|描述|
|
|
1273
1273
|
|---------|---------|
|
|
@@ -1282,7 +1282,7 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1282
1282
|
该接口可以抓取整个屏幕的内容,或抓取您指定的某个应用的窗口内容,并将其分享给同房间中的其他用户。
|
|
1283
1283
|
| 参数 | 描述 |
|
|
1284
1284
|
| --- | --- |
|
|
1285
|
-
| encParam | 屏幕分享的画面编码参数,SDK 会优先使用您通过此接口设置的编码参数:<br>-
|
|
1285
|
+
| encParam | 屏幕分享的画面编码参数,SDK 会优先使用您通过此接口设置的编码参数:<br>- 如果您设置 <code>encParam</code> 为空值,且您已通过 setSubStreamEncoderParam 设置过辅路视频编码参数,SDK 将使用您设置过的辅路编码参数进行屏幕分享。<br>- 如果您设置 <code>encParam</code> 为空值,且您未通过 setSubStreamEncoderParam 设置过辅路视频编码参数,SDK 将自动选择一个最佳的编码参数进行屏幕分享。 |
|
|
1286
1286
|
| streamType | 屏幕分享使用的线路,可以设置为主路(TRTCVideoStreamTypeBig)或者辅路(TRTCVideoStreamTypeSub),推荐使用辅路。 |
|
|
1287
1287
|
| view | 渲染控件所在的父控件,可以设置为空值,表示不显示屏幕分享的预览效果。 |
|
|
1288
1288
|
|
|
@@ -1358,9 +1358,9 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1358
1358
|
该接口可以设定远端用户所看到的屏幕分享(即辅路)的画面质量,同时也能决定云端录制出的视频文件中屏幕分享的画面质量。
|
|
1359
1359
|
|
|
1360
1360
|
请注意如下两个接口的差异:
|
|
1361
|
-
-
|
|
1361
|
+
- setVideoEncoderParam 用于设置主路画面(TRTCVideoStreamTypeBig,一般用于摄像头)的视频编码参数。
|
|
1362
1362
|
|
|
1363
|
-
-
|
|
1363
|
+
- setSubStreamEncoderParam 用于设置辅路画面(TRTCVideoStreamTypeSub,一般用于屏幕分享)的视频编码参数。
|
|
1364
1364
|
|
|
1365
1365
|
|参数|描述|
|
|
1366
1366
|
|---------|---------|
|
|
@@ -1466,19 +1466,19 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1466
1466
|
使用此接口可以向 SDK 投送自己采集的视频帧,SDK 会将视频帧进行编码并通过自身的网络模块传输出去。
|
|
1467
1467
|
|
|
1468
1468
|
参数 TRTCVideoFrame 推荐下列填写方式(其他字段不需要填写):
|
|
1469
|
-
-
|
|
1469
|
+
- pixelFormat:推荐选择 TRTCVideoPixelFormat_NV12。
|
|
1470
1470
|
|
|
1471
|
-
-
|
|
1471
|
+
- bufferType:推荐选择 TRTCVideoBufferType_PixelBuffer。
|
|
1472
1472
|
|
|
1473
|
-
-
|
|
1473
|
+
- pixelBuffer:iOS/Mac OS 平台上常用的视频数据格式。
|
|
1474
1474
|
|
|
1475
|
-
-
|
|
1475
|
+
- data:视频裸数据格式,bufferType 为 NSData 时使用。
|
|
1476
1476
|
|
|
1477
|
-
-
|
|
1477
|
+
- timestamp:时间戳,单位为毫秒(ms),请使用视频帧在采集时被记录下来的时间戳(可以在采集到一帧视频帧之后,通过调用 generateCustomPTS 获取时间戳)。
|
|
1478
1478
|
|
|
1479
|
-
-
|
|
1479
|
+
- width:视频图像长度,bufferType 为 NSData 时填写。
|
|
1480
1480
|
|
|
1481
|
-
-
|
|
1481
|
+
- height:视频图像宽度,bufferType 为 NSData 时填写。
|
|
1482
1482
|
|
|
1483
1483
|
参考文档:[自定义采集和渲染](https://cloud.tencent.com/document/product/647/34066)。
|
|
1484
1484
|
|
|
@@ -1518,15 +1518,15 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1518
1518
|
**向 SDK 投送自己采集的音频数据。**
|
|
1519
1519
|
|
|
1520
1520
|
参数 TRTCAudioFrame 推荐下列填写方式(其他字段不需要填写):
|
|
1521
|
-
-
|
|
1521
|
+
- audioFormat:音频数据格式,仅支持 TRTCAudioFrameFormatPCM。
|
|
1522
1522
|
|
|
1523
|
-
-
|
|
1523
|
+
- data:音频帧 buffer。音频帧数据只支持 PCM 格式,支持 5-100 ms 帧长,推荐使用 20ms 帧长,长度计算方法:48000采样率,单声道的帧长度: `48000 × 0.02s × 1 × 16bit = 15360bit = 1920字节` 。
|
|
1524
1524
|
|
|
1525
|
-
-
|
|
1525
|
+
- sampleRate:采样率,支持:16000、24000、32000、44100、48000。
|
|
1526
1526
|
|
|
1527
|
-
-
|
|
1527
|
+
- channel:声道数(如果是立体声,数据是交叉的),单声道:1; 双声道:2。
|
|
1528
1528
|
|
|
1529
|
-
-
|
|
1529
|
+
- timestamp:时间戳,单位为毫秒(ms),请使用音频帧在采集时被记录下来的时间戳(可以在采集到一帧音频帧之后,通过调用 generateCustomPTS 获取时间戳)。
|
|
1530
1530
|
|
|
1531
1531
|
参考文档:[自定义采集和渲染](https://cloud.tencent.com/document/product/647/74692)。
|
|
1532
1532
|
|
|
@@ -1570,13 +1570,13 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1570
1570
|
当您调用该接口后,如果发现返回值大于 100ms,则可以等待一帧音频帧的播放时间之后再次调用;如果返回值小于 100ms,则代表缓冲区比较小,您可以再次混入一些音轨数据以确保音轨缓冲区的大小维持在“安全水位”以上。
|
|
1571
1571
|
|
|
1572
1572
|
参数 TRTCAudioFrame 推荐下列填写方式(其他字段不需要填写):
|
|
1573
|
-
-
|
|
1573
|
+
- data:音频帧 buffer。音频帧数据只支持 PCM 格式,支持 5ms - 100ms 帧长,推荐使用 20ms 帧长,长度计算方法:48000采样率, 单声道的帧长度: `48000 × 0.02s × 1 × 16bit = 15360bit = 1920字节` 。
|
|
1574
1574
|
|
|
1575
|
-
-
|
|
1575
|
+
- sampleRate:采样率,支持:16000、24000、32000、44100、48000。
|
|
1576
1576
|
|
|
1577
|
-
-
|
|
1577
|
+
- channel:声道数(如果是立体声,数据是交叉的),单声道:1; 双声道:2。
|
|
1578
1578
|
|
|
1579
|
-
-
|
|
1579
|
+
- timestamp:时间戳,单位为毫秒(ms),请使用音频帧在采集时被记录下来的时间戳(可以在获得一帧音频帧之后,通过调用 generateCustomPTS 获得时间戳)。
|
|
1580
1580
|
|
|
1581
1581
|
|参数|描述|
|
|
1582
1582
|
|---------|---------|
|
|
@@ -1636,9 +1636,9 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1636
1636
|
**设置本地视频自定义渲染回调。**
|
|
1637
1637
|
|
|
1638
1638
|
设置该回调之后,SDK 内部会跳过原来的渲染流程,并把采集到的数据回调出来,您需要自己完成画面渲染。
|
|
1639
|
-
-
|
|
1639
|
+
- pixelFormat 指定回调的数据格式,例如 NV12、i420 以及 32BGRA。
|
|
1640
1640
|
|
|
1641
|
-
-
|
|
1641
|
+
- bufferType 指定 buffer 的类型,直接使用 PixelBuffer 效率最高;使用 NSData 相当于让 SDK 在内部做了一次内存转换,因此会有额外的性能损耗。
|
|
1642
1642
|
|
|
1643
1643
|
参考文档:[自定义采集和渲染](https://cloud.tencent.com/document/product/647/34066)。
|
|
1644
1644
|
|
|
@@ -1656,9 +1656,9 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1656
1656
|
**设置远端视频自定义渲染回调。**
|
|
1657
1657
|
|
|
1658
1658
|
设置该回调之后,SDK 内部会跳过原来的渲染流程,并把采集到的数据回调出来,您需要自己完成画面渲染。
|
|
1659
|
-
-
|
|
1659
|
+
- pixelFormat 指定回调的数据格式,例如 NV12、i420 以及 32BGRA。
|
|
1660
1660
|
|
|
1661
|
-
-
|
|
1661
|
+
- bufferType 指定 buffer 的类型,直接使用 PixelBuffer 效率最高;使用 NSData 相当于让 SDK 在内部做了一次内存转换,因此会有额外的性能损耗。
|
|
1662
1662
|
|
|
1663
1663
|
参考文档:[自定义采集和渲染](https://cloud.tencent.com/document/product/647/34066)。
|
|
1664
1664
|
|
|
@@ -1683,13 +1683,13 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1683
1683
|
**设置音频数据自定义回调。**
|
|
1684
1684
|
|
|
1685
1685
|
设置该回调之后,SDK 内部会把音频数据(PCM 格式)回调出来,包括:
|
|
1686
|
-
-
|
|
1686
|
+
- onCapturedAudioFrame:本地麦克风采集到的音频数据回调
|
|
1687
1687
|
|
|
1688
|
-
-
|
|
1688
|
+
- onLocalProcessedAudioFrame:本地采集并经过音频模块前处理后的音频数据回调
|
|
1689
1689
|
|
|
1690
|
-
-
|
|
1690
|
+
- onRemoteUserAudioFrame:混音前的每一路远程用户的音频数据
|
|
1691
1691
|
|
|
1692
|
-
-
|
|
1692
|
+
- onMixedPlayAudioFrame:将各路音频混合之后并最终要由系统播放出的音频数据回调
|
|
1693
1693
|
|
|
1694
1694
|
> **注意**
|
|
1695
1695
|
>
|
|
@@ -1701,11 +1701,11 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1701
1701
|
**设置本地麦克风采集出的音频帧回调格式。**
|
|
1702
1702
|
|
|
1703
1703
|
本接口用于设置 onCapturedAudioFrame 回调出来的 AudioFrame 的格式:
|
|
1704
|
-
-
|
|
1704
|
+
- sampleRate:采样率,支持:16000、32000、44100、48000。
|
|
1705
1705
|
|
|
1706
|
-
-
|
|
1706
|
+
- channel:声道数(如果是立体声,数据是交叉的),单声道:1; 双声道:2。
|
|
1707
1707
|
|
|
1708
|
-
-
|
|
1708
|
+
- samplesPerCall:采样点数,定义回调数据帧长。帧长必须为 10ms 的整数倍。
|
|
1709
1709
|
|
|
1710
1710
|
如果希望用毫秒数计算回调帧长,则将毫秒数转换成采样点数的公式为: `采样点数 = 毫秒数 * 采样率 / 1000` 。
|
|
1711
1711
|
|
|
@@ -1729,11 +1729,11 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1729
1729
|
**设置经过前处理后的本地音频帧回调格式。**
|
|
1730
1730
|
|
|
1731
1731
|
本接口用于设置 onLocalProcessedAudioFrame 回调出来的 AudioFrame 的格式:
|
|
1732
|
-
-
|
|
1732
|
+
- sampleRate:采样率,支持:16000、32000、44100、48000。
|
|
1733
1733
|
|
|
1734
|
-
-
|
|
1734
|
+
- channel:声道数(如果是立体声,数据是交叉的),单声道:1; 双声道:2。
|
|
1735
1735
|
|
|
1736
|
-
-
|
|
1736
|
+
- samplesPerCall:采样点数,定义回调数据帧长。帧长必须为 10ms 的整数倍。
|
|
1737
1737
|
|
|
1738
1738
|
如果希望用毫秒数计算回调帧长,则将毫秒数转换成采样点数的公式为: `采样点数 = 毫秒数 * 采样率 / 1000` 。
|
|
1739
1739
|
|
|
@@ -1757,11 +1757,11 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1757
1757
|
**设置最终要由系统播放出的音频帧回调格式。**
|
|
1758
1758
|
|
|
1759
1759
|
本接口用于设置 onMixedPlayAudioFrame 回调出来的 AudioFrame 的格式:
|
|
1760
|
-
-
|
|
1760
|
+
- sampleRate:采样率,支持:16000、32000、44100、48000。
|
|
1761
1761
|
|
|
1762
|
-
-
|
|
1762
|
+
- channel:声道数(如果是立体声,数据是交叉的),单声道:1; 双声道:2。
|
|
1763
1763
|
|
|
1764
|
-
-
|
|
1764
|
+
- samplesPerCall:采样点数,定义回调数据帧长。帧长必须为 10ms 的整数倍。
|
|
1765
1765
|
|
|
1766
1766
|
如果希望用毫秒数计算回调帧长,则将毫秒数转换成采样点数的公式为: `采样点数 = 毫秒数 * 采样率 / 1000` 。
|
|
1767
1767
|
|
|
@@ -1804,11 +1804,11 @@ iPhone 推荐的屏幕分享视频编码参数(TRTCVideoEncParam):
|
|
|
1804
1804
|
调用该接口之前,您需要先通过 enableCustomAudioRendering 开启音频自定义播放。
|
|
1805
1805
|
|
|
1806
1806
|
参数 TRTCAudioFrame 推荐下列填写方式(其他字段不需要填写):
|
|
1807
|
-
-
|
|
1807
|
+
- sampleRate:采样率,必填,支持 16000、24000、32000、44100、48000。
|
|
1808
1808
|
|
|
1809
|
-
-
|
|
1809
|
+
- channel:声道数,必填,单声道请填1,双声道请填2,双声道时数据是交叉的。
|
|
1810
1810
|
|
|
1811
|
-
-
|
|
1811
|
+
- data:用于获取音频数据的 buffer。需要您根据一帧音频帧的帧长度分配好 data 的内存大小。获取的 PCM 数据支持 10ms 或 20ms 两种帧长,推荐使用 20ms 的帧长。
|
|
1812
1812
|
|
|
1813
1813
|
计算公式为: `采样率 x 播放时长 x 声道数量 x 2(每个样点的字节数)` , 例如: 48000Hz 采样率、单声道、且播放时长为 20ms 的一帧音频帧的 buffer 大小为 `48000 × 0.02s × 1 × 16bit = 15360bit = 1920字节` 。
|
|
1814
1814
|
|
|
@@ -1909,7 +1909,7 @@ YES:消息已通过限制,等待后续视频帧发送;NO:消息被限制
|
|
|
1909
1909
|
|
|
1910
1910
|
> **注意**
|
|
1911
1911
|
>
|
|
1912
|
-
> 1. 测速过程将产生少量的基础服务费用,详见 [计费概述 > 基础服务](https://cloud.tencent.com/document/product/647/17157
|
|
1912
|
+
> 1. 测速过程将产生少量的基础服务费用,详见 [计费概述 > 基础服务](https://cloud.tencent.com/document/product/647/17157) 文档说明。
|
|
1913
1913
|
>
|
|
1914
1914
|
> 2. 请在进入房间前进行网速测试,在房间中网速测试会影响正常的音视频传输效果,而且由于干扰过多,网速测试结果也不准确。
|
|
1915
1915
|
>
|
|
@@ -1961,11 +1961,11 @@ YES:消息已通过限制,等待后续视频帧发送;NO:消息被限制
|
|
|
1961
1961
|
**设置本地日志的保存路径。**
|
|
1962
1962
|
|
|
1963
1963
|
通过该接口您可以更改 SDK 本地日志的默认存储路径,SDK 默认的本地日志的存储位置:
|
|
1964
|
-
-
|
|
1964
|
+
- Windows 平台:在 C:/Users/[系统用户名]/AppData/Roaming/liteav/log,即 %appdata%/liteav/log 下。
|
|
1965
1965
|
|
|
1966
|
-
-
|
|
1966
|
+
- iOS 或 Mac 平台:在 sandbox Documents/log 下。
|
|
1967
1967
|
|
|
1968
|
-
-
|
|
1968
|
+
- Android 平台:在 /app私有目录/files/log/liteav/ 下。
|
|
1969
1969
|
|
|
1970
1970
|
|参数|描述|
|
|
1971
1971
|
|---------|---------|
|