@vkontakte/calls-sdk 2.6.2-dev.0c3e1d9.0 → 2.6.2-dev.10785ca.0

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (58) hide show
  1. package/CallsSDK.d.ts +68 -11
  2. package/abstract/BaseApi.d.ts +7 -3
  3. package/abstract/BaseSignaling.d.ts +17 -3
  4. package/calls-sdk.cjs.js +8 -8
  5. package/calls-sdk.esm.js +8 -8
  6. package/classes/Conversation.d.ts +38 -7
  7. package/classes/MediaSource.d.ts +7 -2
  8. package/classes/ParticipantIdRegistry.d.ts +2 -0
  9. package/classes/ProducerCommandSerializationService.d.ts +19 -0
  10. package/classes/codec/IEncoder.d.ts +3 -0
  11. package/classes/codec/LibVPxEncoder.d.ts +4 -1
  12. package/classes/codec/Types.d.ts +6 -1
  13. package/classes/codec/WebCodecsEncoder.d.ts +4 -1
  14. package/classes/screenshare/PacketHistory.d.ts +30 -0
  15. package/classes/screenshare/PacketHistory.test.d.ts +1 -0
  16. package/classes/screenshare/ScreenCaptureSender.d.ts +16 -1
  17. package/classes/screenshare/ScreenCongestionControl.d.ts +25 -0
  18. package/classes/screenshare/SharingStatReport.d.ts +6 -0
  19. package/classes/screenshare/Utils.d.ts +6 -0
  20. package/classes/transport/ServerTransport.d.ts +2 -0
  21. package/default/Api.d.ts +8 -3
  22. package/default/Api.test.d.ts +1 -0
  23. package/default/Signaling.d.ts +23 -4
  24. package/enums/ConversationFeature.d.ts +2 -1
  25. package/enums/ConversationOption.d.ts +3 -1
  26. package/enums/HangupType.d.ts +3 -1
  27. package/enums/LiveStatus.d.ts +7 -0
  28. package/enums/MediaOption.d.ts +3 -1
  29. package/enums/RoomsEventType.d.ts +6 -0
  30. package/enums/SignalingCommandType.d.ts +12 -1
  31. package/enums/SignalingNotification.d.ts +12 -1
  32. package/package.json +1 -1
  33. package/static/ApiTransport.d.ts +1 -1
  34. package/static/External.d.ts +95 -4
  35. package/static/Params.d.ts +109 -2
  36. package/static/Utils.d.ts +5 -1
  37. package/static/WebRTCUtils.d.ts +2 -1
  38. package/types/Asr.d.ts +5 -0
  39. package/types/Conversation.d.ts +12 -0
  40. package/types/ConversationFeature.d.ts +3 -0
  41. package/types/ConversationParams.d.ts +1 -0
  42. package/types/ExternalId.d.ts +2 -0
  43. package/types/Feedback.d.ts +22 -0
  44. package/types/LayoutUtils.d.ts +5 -0
  45. package/types/MediaSettings.d.ts +5 -1
  46. package/types/MovieShare.d.ts +58 -0
  47. package/types/Participant.d.ts +2 -0
  48. package/types/ParticipantLayout.d.ts +7 -1
  49. package/types/ParticipantListChunk.d.ts +2 -0
  50. package/types/ParticipantStreamDescription.d.ts +2 -1
  51. package/types/Room.d.ts +71 -0
  52. package/types/SignalingMessage.d.ts +64 -0
  53. package/types/WaitingHall.d.ts +2 -8
  54. package/utils/ArrayDequeue.d.ts +24 -0
  55. package/utils/ArrayDequeue.spec.d.ts +1 -0
  56. package/utils/Conversation.d.ts +2 -0
  57. package/utils/MsgPackerBufferUtils.d.ts +31 -0
  58. package/worker/LibVPxEncoderWorker.d.ts +1 -1
@@ -35,6 +35,17 @@ declare enum SignalingNotification {
35
35
  PROMOTE_PARTICIPANT = "promote-participant",
36
36
  CHAT_ROOM_UPDATED = "chat-room-updated",
37
37
  PROMOTION_APPROVED = "promotion-approved",
38
- JOIN_LINK_CHANGED = "join-link-changed"
38
+ JOIN_LINK_CHANGED = "join-link-changed",
39
+ FEEDBACK = "feedback",
40
+ MOVIE_UPDATE_NOTIFICATION = "movie-update-notification",
41
+ MOVIE_SHARE_INFO = "movie-share-info",
42
+ MOVIE_SHARE_STARTED = "movie-share-started",
43
+ MOVIE_SHARE_STOPPED = "movie-share-stopped",
44
+ ROOM_UPDATED = "room-updated",
45
+ ROOMS_UPDATED = "rooms-updated",
46
+ ROOM_PARTICIPANTS_UPDATED = "room-participants-updated",
47
+ FEATURES_PER_ROLE_CHANGED = "features-per-role-changed",
48
+ ASR_STARTED = "asr-started",
49
+ ASR_STOPPED = "asr-stopped"
39
50
  }
40
51
  export default SignalingNotification;
package/package.json CHANGED
@@ -1,6 +1,6 @@
1
1
  {
2
2
  "name": "@vkontakte/calls-sdk",
3
- "version": "2.6.2-dev.0c3e1d9.0",
3
+ "version": "2.6.2-dev.10785ca.0",
4
4
  "author": "vk.com",
5
5
  "description": "Library for video calls based on the vk.com platform",
6
6
  "homepage": "https://vk.com",
@@ -1,7 +1,7 @@
1
1
  export declare function init(): void;
2
2
  export declare function sendBeakon(method: string, params?: {
3
3
  [key: string]: any;
4
- }, noSession?: boolean): void;
4
+ }, noSession?: boolean): Promise<void>;
5
5
  export declare function request(method: string, params?: {
6
6
  [key: string]: any;
7
7
  }, noSession?: boolean): Promise<unknown>;
@@ -6,12 +6,17 @@ import ChatRoomEventType from '../enums/ChatRoomEventType';
6
6
  import ConversationOption from '../enums/ConversationOption';
7
7
  import FatalError from '../enums/FatalError';
8
8
  import MediaOption from '../enums/MediaOption';
9
+ import RoomsEventType from '../enums/RoomsEventType';
9
10
  import UserRole from '../enums/UserRole';
11
+ import { IFeaturesPerRole } from '../types/ConversationFeature';
10
12
  import { ExternalId, ExternalParticipant, ExternalParticipantId, ExternalParticipantListChunk, ExternalParticipantListMarkers } from '../types/ExternalId';
13
+ import { IFeedbackExternal } from '../types/Feedback';
11
14
  import MediaModifiers from '../types/MediaModifiers';
12
15
  import MediaSettings from '../types/MediaSettings';
16
+ import { IOnRemoteMovieData, ISharedMovieInfo, ISharedMovieState, ISharedMovieStoppedInfo } from '../types/MovieShare';
13
17
  import MuteStates from '../types/MuteStates';
14
18
  import { ParticipantStateMapped } from '../types/Participant';
19
+ import { Room, RoomParticipantUpdate, Rooms, RoomsUpdate } from '../types/Room';
15
20
  import { DebugMessageType } from './Debug';
16
21
  import { JSONObject } from './Json';
17
22
  /**
@@ -72,10 +77,31 @@ declare namespace External {
72
77
  * Если сервер закончил стримить собеседника, вместо стрима будет передан null
73
78
  *
74
79
  * @param userId
75
- * @param streamName
76
- * @param stream
80
+ * @param data
81
+ */
82
+ function onRemoteLive(userId: ExternalParticipantId, data: IOnRemoteMovieData): void;
83
+ /**
84
+ * Получен собственный стрим лайв.
85
+ * Если сервер закончил стримить собеседника, вместо стрима будет передан null
86
+ *
87
+ * @param userId
88
+ * @param data
77
89
  */
78
- function onRemoteLive(userId: ExternalParticipantId, streamName: string, stream: MediaStream | null): void;
90
+ function onLocalLive(userId: ExternalParticipantId, data: IOnRemoteMovieData): void;
91
+ /**
92
+ * Получено обновление стрима или лайва от собеседника.
93
+ *
94
+ * @param userId
95
+ * @param data
96
+ */
97
+ function onRemoteLiveUpdate(userId: ExternalParticipantId, data: ISharedMovieState): void;
98
+ /**
99
+ * Получено обновление собственного стрима или лайва.
100
+ *
101
+ * @param userId
102
+ * @param data
103
+ */
104
+ function onLocalLiveUpdate(userId: ExternalParticipantId, data: ISharedMovieState): void;
79
105
  /**
80
106
  * Получен стрим с экрана собеседника.
81
107
  * Если сервер закончил стримить экран собеседника, вместо стрима будет передан null
@@ -91,8 +117,9 @@ declare namespace External {
91
117
  * @param mediaModifiers Текущие настройки пользовательского медиа
92
118
  * @param muteStates Состояние устройств при входе в звонок
93
119
  * @param participants Список участников звонка (при `Params.batchParticipantsOnStart = true`)
120
+ * @param rooms Список комнат в звонке
94
121
  */
95
- function onConversation(userId: ExternalParticipantId, mediaModifiers: MediaModifiers, muteStates: MuteStates, participants?: ExternalParticipant[]): void;
122
+ function onConversation(userId: ExternalParticipantId, mediaModifiers: MediaModifiers, muteStates: MuteStates, participants?: ExternalParticipant[], rooms?: Rooms): void;
96
123
  /**
97
124
  * Постраничные данные про участников при начале звонка
98
125
  * @param chunk
@@ -106,6 +133,41 @@ declare namespace External {
106
133
  * @param markers
107
134
  */
108
135
  function onRemoteMediaSettings(userId: ExternalParticipantId, mediaSettings: MediaSettings, markers?: ExternalParticipantListMarkers): void;
136
+ /**
137
+ * Изменились данные собственного стрима
138
+ *
139
+ * @param userId
140
+ * @param mediaSettings
141
+ */
142
+ function onLocalMediaSettings(userId: ExternalParticipantId, mediaSettings: MediaSettings): void;
143
+ /**
144
+ * Полученны данные по стримам (лайв/мувик) от собеседника
145
+ *
146
+ * @param userId
147
+ * @param sharedMovieInfo
148
+ */
149
+ function onRemoteSharedMovieInfo(userId: ExternalParticipantId, sharedMovieInfo: ISharedMovieInfo): void;
150
+ /**
151
+ * Полученны данные по остановленным стримам (лайв/мувик) от собеседника
152
+ *
153
+ * @param userId
154
+ * @param sharedMovieStoppedInfo
155
+ */
156
+ function onRemoteSharedMovieStoppedInfo(userId: ExternalParticipantId, sharedMovieStoppedInfo: ISharedMovieStoppedInfo): void;
157
+ /**
158
+ * Полученны данные по собственным стримам (лайв/мувик)
159
+ *
160
+ * @param userId
161
+ * @param sharedMovieInfo
162
+ */
163
+ function onLocalSharedMovieInfo(userId: ExternalParticipantId, sharedMovieInfo: ISharedMovieInfo): void;
164
+ /**
165
+ * Полученны данные по собственным остановленным стримам (лайв/мувик)
166
+ *
167
+ * @param userId
168
+ * @param sharedMovieStoppedInfo
169
+ */
170
+ function onLocalSharedMovieStoppedInfo(userId: ExternalParticipantId, sharedMovieStoppedInfo: ISharedMovieStoppedInfo): void;
109
171
  /**
110
172
  * Добавили участника
111
173
  *
@@ -355,5 +417,34 @@ declare namespace External {
355
417
  * @param joinLink токен присоединения к звонку
356
418
  */
357
419
  function onJoinLinkChanged(joinLink: string): void;
420
+ /**
421
+ */
422
+ function onRoomsUpdated(updates: Partial<Record<RoomsEventType, RoomsUpdate>>): void;
423
+ /**
424
+ */
425
+ function onRoomUpdated(eventTypes: RoomsEventType[], roomId: number, room: Room | null, deactivate: boolean | null): void;
426
+ /**
427
+ */
428
+ function onRoomParticipantsUpdated(update: RoomParticipantUpdate): void;
429
+ /**
430
+ * Получена новая реакция
431
+ */
432
+ function onFeedback(feedback: IFeedbackExternal[]): void;
433
+ /**
434
+ * Изменилось состояние пермиссий фич в звонке
435
+ *
436
+ * @param featuresPerRole Информация о доступных фичах по ролям
437
+ */
438
+ function onFeaturesPerRoleChanged(featuresPerRole: IFeaturesPerRole): void;
439
+ /**
440
+ * Начата текстовая расшифровка звонка
441
+ * @param initiatorId Id пользователя, запустившего расшифровку звонка
442
+ * @param movieId Id расшифровки
443
+ */
444
+ function onAsrStarted(initiatorId: ExternalParticipantId, movieId: number): void;
445
+ /**
446
+ * Закончена текстовая расшифровка звонка
447
+ */
448
+ function onAsrStopped(): void;
358
449
  }
359
450
  export default External;
@@ -6,13 +6,18 @@ import ChatRoomEventType from '../enums/ChatRoomEventType';
6
6
  import ConversationOption from '../enums/ConversationOption';
7
7
  import FatalError from '../enums/FatalError';
8
8
  import MediaOption from '../enums/MediaOption';
9
+ import RoomsEventType from '../enums/RoomsEventType';
9
10
  import UserRole from '../enums/UserRole';
11
+ import { IFeaturesPerRole } from '../types/ConversationFeature';
10
12
  import { ExternalId, ExternalParticipant, ExternalParticipantId, ExternalParticipantListChunk, ExternalParticipantListMarkers } from '../types/ExternalId';
13
+ import { IFeedbackExternal } from '../types/Feedback';
11
14
  import IceServer from '../types/IceServer';
12
15
  import MediaModifiers from '../types/MediaModifiers';
13
16
  import MediaSettings from '../types/MediaSettings';
17
+ import { IOnRemoteMovieData, ISharedMovieInfo, ISharedMovieState, ISharedMovieStoppedInfo } from '../types/MovieShare';
14
18
  import MuteStates from '../types/MuteStates';
15
19
  import { ParticipantStateMapped } from '../types/Participant';
20
+ import { Room, RoomParticipantUpdate, Rooms, RoomsUpdate } from '../types/Room';
16
21
  import AuthData from './AuthData';
17
22
  import { DebugMessageType } from './Debug';
18
23
  import { ParticipantStatus } from './External';
@@ -24,6 +29,7 @@ import { FacingMode } from './WebRTCUtils';
24
29
  export declare type ParamsObject = {
25
30
  platform: string;
26
31
  clientType: string;
32
+ externalUserType: string;
27
33
  device: string;
28
34
  /**
29
35
  * API ключ приложения
@@ -43,6 +49,11 @@ export declare type ParamsObject = {
43
49
  * Домен, чтобы попасть в тестовую группу. Для тестирования экспериментальных улучшений существуют отдельные сервера, чтобы собирать фидбек и уже потом раскатывать на всех юзеров. Если передать сюда специальный ключ, то конверсейшн будет обрабатываться на таком сервере.
44
50
  */
45
51
  domain: string;
52
+ /**
53
+ * Домен, куда будет ходить Ok api за данными
54
+ * @hidden
55
+ */
56
+ externalDomain: string;
46
57
  iceServers: IceServer[];
47
58
  wssBase: string;
48
59
  wssToken: string;
@@ -186,6 +197,7 @@ export declare type ParamsObject = {
186
197
  * Работает только при приёме экрана через дата-канал.
187
198
  *
188
199
  * _По умолчанию: `true`_
200
+ * @deprecated
189
201
  */
190
202
  producerScreenTrack: boolean;
191
203
  /**
@@ -193,12 +205,19 @@ export declare type ParamsObject = {
193
205
  * Работает только при отправке экрана через дата-канал.
194
206
  *
195
207
  * _По умолчанию: `true`_
208
+ * @deprecated
196
209
  */
197
210
  consumerScreenTrack: boolean;
198
211
  producerNotificationDataChannel: boolean;
199
212
  producerCommandDataChannel: boolean;
200
213
  consumerScreenDataChannel: boolean;
201
214
  producerScreenDataChannel: boolean;
215
+ /**
216
+ * Размер пакета для отправки трансляции экрана в датаканал в байтах.
217
+ * Максимальный размер пакета 65536 bytes в хроме, но по стандарту лучше максимум 16 Кб.
218
+ * @hidden
219
+ */
220
+ consumerScreenDataChannelPacketSize: number;
202
221
  screenShareWebmBuilder: boolean;
203
222
  noiseSuppression: boolean;
204
223
  /**
@@ -222,6 +241,10 @@ export declare type ParamsObject = {
222
241
  * Включить постраничный вывод участников. Работает только если включено videoTracksCount (слоты)
223
242
  */
224
243
  useParticipantListChunk: boolean;
244
+ /**
245
+ * Включить комнаты
246
+ */
247
+ useRooms: boolean;
225
248
  /**
226
249
  * Индекс участника для первого chunk'а который придет при установки соединения с сервером
227
250
  */
@@ -239,6 +262,11 @@ export declare type ParamsObject = {
239
262
  * Включать RED-extension (redundancy) для p2p звонков
240
263
  */
241
264
  p2pAudioRed: boolean;
265
+ /**
266
+ * Добавлять флаг spsPpsIdrInKeyframe для h264 кодека. В результате ключевые фреймы без sps и pps
267
+ * не используются как ключевые. Решает проблему с артефактами на видео в случае потерь пакетов.
268
+ */
269
+ h264spsPpsIdrInKeyframe: boolean;
242
270
  /**
243
271
  * Получать список участников звонка третьим аргументом в `onConversation`
244
272
  * @hidden
@@ -262,6 +290,11 @@ export declare type ParamsObject = {
262
290
  * @hidden
263
291
  */
264
292
  preserveAudioTracks: boolean;
293
+ /**
294
+ * Использовать congestion control для шаринга
295
+ * @hidden
296
+ */
297
+ screenShareCongestionControl: boolean;
265
298
  /**
266
299
  * Получен локальный стрим с камеры/микрофона
267
300
  */
@@ -292,11 +325,24 @@ export declare type ParamsObject = {
292
325
  * Получен стрим трансляция или мувик от собеседника.
293
326
  * Если сервер закончил стримить экран собеседника, вместо стрима будет передан null
294
327
  */
295
- onRemoteLive?: (userId: ExternalParticipantId, streamId: string, stream: MediaStream | null) => void;
328
+ onRemoteLive?: (userId: ExternalParticipantId, data: IOnRemoteMovieData) => void;
329
+ /**
330
+ * Получен собственный стрим трансляция или мувик.
331
+ * Если сервер закончил стримить экран собеседника, вместо стрима будет передан null
332
+ */
333
+ onLocalLive?: (userId: ExternalParticipantId, data: IOnRemoteMovieData) => void;
334
+ /**
335
+ * Получено обновление стрима или лайва от собеседника.
336
+ */
337
+ onRemoteLiveUpdate?: (userId: ExternalParticipantId, data: ISharedMovieState) => void;
338
+ /**
339
+ * Получено обновление собственного стрима или лайва.
340
+ */
341
+ onLocalLiveUpdate?: (userId: ExternalParticipantId, data: ISharedMovieState) => void;
296
342
  /**
297
343
  * Начат звонок
298
344
  */
299
- onConversation?: (userId: ExternalParticipantId, mediaModifiers: MediaModifiers, muteStates: MuteStates, participants?: ExternalParticipant[]) => void;
345
+ onConversation?: (userId: ExternalParticipantId, mediaModifiers: MediaModifiers, muteStates: MuteStates, participants?: ExternalParticipant[], rooms?: Rooms) => void;
300
346
  /**
301
347
  * Начальный список участников для постраничного звонка
302
348
  */
@@ -305,6 +351,26 @@ export declare type ParamsObject = {
305
351
  * Изменились данные стрима собеседника
306
352
  */
307
353
  onRemoteMediaSettings?: (userId: ExternalParticipantId, mediaSettings: MediaSettings, markers?: ExternalParticipantListMarkers) => void;
354
+ /**
355
+ * Изменились данные стрима собеседника
356
+ */
357
+ onLocalMediaSettings?: (userId: ExternalParticipantId, mediaSettings: MediaSettings) => void;
358
+ /**
359
+ * Полученны данные по стримам (лайв/мувик) от собеседника
360
+ */
361
+ onRemoteSharedMovieInfo?: (userId: ExternalParticipantId, sharedMovieInfo: ISharedMovieInfo) => void;
362
+ /**
363
+ * Полученны данные по остановленным стримам (лайв/мувик) от собеседника
364
+ */
365
+ onRemoteSharedMovieStoppedInfo?: (userId: ExternalParticipantId, sharedMovieStoppedInfo: ISharedMovieStoppedInfo) => void;
366
+ /**
367
+ * Полученны данные по собственным стримам (лайв/мувик)
368
+ */
369
+ onLocalSharedMovieInfo?: (userId: ExternalParticipantId, sharedMovieInfo: ISharedMovieInfo) => void;
370
+ /**
371
+ * Полученны данные по собственным остановленным стримам (лайв/мувик)
372
+ */
373
+ onLocalSharedMovieStoppedInfo?: (userId: ExternalParticipantId, sharedMovieStoppedInfo: ISharedMovieStoppedInfo) => void;
308
374
  /**
309
375
  * Добавили участника
310
376
  */
@@ -470,6 +536,39 @@ export declare type ParamsObject = {
470
536
  * @param joinLink токен присоединения к звонку
471
537
  */
472
538
  onJoinLinkChanged?: (joinLink: string) => void;
539
+ /**
540
+ * Получено обновление списка комнат
541
+ * @param updates список обновлений по комнатам
542
+ */
543
+ onRoomsUpdated?: (updates: Partial<Record<RoomsEventType, RoomsUpdate>>) => void;
544
+ /**
545
+ * Получено обновление комнаты
546
+ * @param eventTypes список событий
547
+ * @param roomId номер комнаты
548
+ * @param room комната
549
+ */
550
+ onRoomUpdated?: (eventTypes: RoomsEventType[], roomId: number, room: Room | null, deactivate: boolean | null) => void;
551
+ /**
552
+ * Получение обновление списка участников в комнате
553
+ * @param update обновление списка участников
554
+ */
555
+ onRoomParticipantsUpdated?: (update: RoomParticipantUpdate) => void;
556
+ /**
557
+ * Получены новые реакции в звонке
558
+ * @param feedback массив с реакциями
559
+ */
560
+ onFeedback?: (feedback: IFeedbackExternal[]) => void;
561
+ /**
562
+ * Включать capability c аудио шарой
563
+ */
564
+ audioShareCapabilityEnabled: boolean;
565
+ /**
566
+ * Изменился список ролей, которым доступны ConversationFeatures
567
+ *
568
+ * @param featuresPerRole Объект вида ключ: ConversationFeature = значение: UserRole[]
569
+ * (если ключ фичи отсутствует, или в ролях пустой массив, считаем фичу доступной для всех пользователей)
570
+ */
571
+ onFeaturesPerRoleChanged?: (featuresPerRole: IFeaturesPerRole) => void;
473
572
  };
474
573
  export default abstract class Params {
475
574
  private static _params;
@@ -486,6 +585,8 @@ export default abstract class Params {
486
585
  static set platform(value: string);
487
586
  static get clientType(): string;
488
587
  static set clientType(value: string);
588
+ static get externalUserType(): string;
589
+ static set externalUserType(value: string);
489
590
  static get device(): string;
490
591
  static get apiKey(): string;
491
592
  static get apiEnv(): string;
@@ -495,6 +596,7 @@ export default abstract class Params {
495
596
  static get anonymToken(): string;
496
597
  static set anonymToken(value: string);
497
598
  static get domain(): string;
599
+ static get externalDomain(): string;
498
600
  static get iceServers(): IceServer[];
499
601
  static set iceServers(value: IceServer[]);
500
602
  static get wssBase(): string;
@@ -544,6 +646,7 @@ export default abstract class Params {
544
646
  static get producerCommandDataChannel(): boolean;
545
647
  static get consumerScreenDataChannel(): boolean;
546
648
  static get producerScreenDataChannel(): boolean;
649
+ static get consumerScreenDataChannelPacketSize(): number;
547
650
  static get screenShareWebmBuilder(): boolean;
548
651
  static get noiseSuppression(): boolean;
549
652
  static set noiseSuppression(value: boolean);
@@ -558,12 +661,16 @@ export default abstract class Params {
558
661
  static get breakVideoPayloadTypes(): boolean;
559
662
  static get filteredMessages(): boolean;
560
663
  static get useParticipantListChunk(): boolean;
664
+ static get useRooms(): boolean;
561
665
  static get participantListChunkInitIndex(): number;
562
666
  static get participantListChunkInitCount(): number;
563
667
  static get serverAudioRed(): boolean;
564
668
  static get p2pAudioRed(): boolean;
669
+ static get h264spsPpsIdrInKeyframe(): boolean;
565
670
  static get batchParticipantsOnStart(): boolean;
566
671
  static get filterObservers(): boolean;
567
672
  static get muteMode(): boolean;
568
673
  static get preserveAudioTracks(): boolean;
674
+ static get audioShareCapabilityEnabled(): boolean;
675
+ static get screenShareCongestionControl(): boolean;
569
676
  }
package/static/Utils.d.ts CHANGED
@@ -6,7 +6,7 @@ import VideoSettings from '../types/VideoSettings';
6
6
  export declare const PARAMETERS_SEPARATOR = ":";
7
7
  export declare const DEVICE_IDX_PARAMETER = "d";
8
8
  declare namespace Utils {
9
- function patchSDP(sdp: string, preferH264: boolean, brokenH264: boolean, preferVP9: boolean, isAudioNack?: boolean, preferRed?: boolean): string;
9
+ function patchSDP(sdp: string, preferH264: boolean, brokenH264: boolean, preferVP9: boolean, h264spsPpsIdrInKeyframe: boolean, isAudioNack?: boolean, preferRed?: boolean): string;
10
10
  function getPeerIdString(peerId: SignalingMessage.PeerId): string;
11
11
  function comparePeerId(peerId1: SignalingMessage.PeerId, peerId2: SignalingMessage.PeerId): boolean;
12
12
  function getPeerConnectionHostInfo(pc: RTCPeerConnection): Promise<any>;
@@ -60,5 +60,9 @@ declare namespace Utils {
60
60
  * https://stash.odkl.ru/projects/ODKL/repos/odnoklassniki-webrtc/browse/src/main/java/one/webrtc/domain/conversation/ParticipantIndex.java#67-78
61
61
  */
62
62
  function participantMarkerCompare(marker1: ExternalParticipantListMarker | undefined, marker2: ExternalParticipantListMarker | undefined): number;
63
+ /** убирает все ключи со значением `V` на 1 уровне */
64
+ function objectFilterOutValues<T extends Record<string, V>, V = unknown>(obj: T, value?: V | V[]): Partial<T>;
65
+ function objectReduce<R, T extends Object>(obj: T, callback: (acc: R, value: T[keyof T], key: keyof T) => R, initialValue: R): R;
66
+ const setImmediate: (fn: VoidFunction) => VoidFunction;
63
67
  }
64
68
  export default Utils;
@@ -66,7 +66,7 @@ declare namespace WebRTCUtils {
66
66
  /**
67
67
  * Запрашивает трансляцию экрана пользователя
68
68
  */
69
- function getScreenMedia(): Promise<MediaStream>;
69
+ function getScreenMedia(withAudioShare: boolean): Promise<MediaStream>;
70
70
  /**
71
71
  * Запрашивает камеру пользователя
72
72
  *
@@ -146,5 +146,6 @@ declare namespace WebRTCUtils {
146
146
  * Возвращает подверсию браузера (если она есть)
147
147
  */
148
148
  function browserSubVersion(): string;
149
+ function isAudioShareSupported(): boolean;
149
150
  }
150
151
  export default WebRTCUtils;
package/types/Asr.d.ts ADDED
@@ -0,0 +1,5 @@
1
+ import { ParticipantId } from './Participant';
2
+ export interface AsrInfo {
3
+ movieId: number;
4
+ initiatorId: ParticipantId;
5
+ }
@@ -0,0 +1,12 @@
1
+ import MediaOption from '../enums/MediaOption';
2
+ import MediaSettings from './MediaSettings';
3
+ import { Participant } from './Participant';
4
+ export interface IProcessMuteStateParams {
5
+ mediaOptions?: MediaOption[];
6
+ muteAll?: boolean;
7
+ unmute?: boolean;
8
+ serverSettings?: MediaSettings | null;
9
+ admin?: Participant | null;
10
+ stateUpdated?: boolean;
11
+ requestedMedia?: MediaOption[];
12
+ }
@@ -0,0 +1,3 @@
1
+ import ConversationFeature from '../enums/ConversationFeature';
2
+ import UserRole from '../enums/UserRole';
3
+ export declare type IFeaturesPerRole = Partial<Record<ConversationFeature, UserRole[]>>;
@@ -10,5 +10,6 @@ declare type ConversationParams = {
10
10
  isp_as_org?: string;
11
11
  loc_cc?: string;
12
12
  loc_reg?: string;
13
+ external_user_type: string;
13
14
  };
14
15
  export default ConversationParams;
@@ -1,6 +1,7 @@
1
1
  import MediaOption from '../enums/MediaOption';
2
2
  import { ParticipantStatus } from '../static/External';
3
3
  import MediaSettings from './MediaSettings';
4
+ import { ISharedMovieInfo } from './MovieShare';
4
5
  import MuteStates from './MuteStates';
5
6
  import { ParticipantListMarker, ParticipantListType, ParticipantStateMapped } from './Participant';
6
7
  import SignalingMessage from './SignalingMessage';
@@ -94,6 +95,7 @@ export interface ExternalParticipant {
94
95
  */
95
96
  unmuteOptions: MediaOption[];
96
97
  markers?: ExternalParticipantListMarkers;
98
+ movieShareInfos?: ISharedMovieInfo[];
97
99
  }
98
100
  export interface ExternalParticipantListChunk {
99
101
  participants: ExternalParticipant[];
@@ -0,0 +1,22 @@
1
+ import { CompositeUserId } from './Participant';
2
+ import { ExternalParticipantId } from './ExternalId';
3
+ interface IFeedbackItem {
4
+ participantId: CompositeUserId;
5
+ /** event timestamps for this participant, chronologically */
6
+ times: number[];
7
+ }
8
+ export interface IFeedbackItemExternal extends Omit<IFeedbackItem, 'participantId'> {
9
+ participantId: ExternalParticipantId;
10
+ }
11
+ export interface IFeedback {
12
+ /** feedback ID; key values should be negotiated by clients themselves, like in ParticipantState, and have just the same restrictions; on backend the values of these keys are not bound in any way to those in ParticipantState */
13
+ key: string;
14
+ /** total amount of reactions of this type from the start of this call */
15
+ totalCount: number;
16
+ /** list of items containing initiator & all related data, if any */
17
+ items: IFeedbackItem[];
18
+ }
19
+ export interface IFeedbackExternal extends Omit<IFeedback, 'items'> {
20
+ items: IFeedbackItemExternal[];
21
+ }
22
+ export {};
@@ -0,0 +1,5 @@
1
+ import { Layout, RequestKeyFrame, StopStream } from './ParticipantLayout';
2
+ export declare const REQUEST_KEY_FRAME_CODE = "kf";
3
+ export declare function isStopStreaming(layout: Layout | StopStream | RequestKeyFrame): layout is StopStream;
4
+ export declare function isRequestKeyFrame(layout: Layout | StopStream | RequestKeyFrame): layout is RequestKeyFrame;
5
+ export declare function layoutToString(layout: Layout | StopStream | RequestKeyFrame): string;
@@ -14,12 +14,16 @@ export declare type MediaSettings = {
14
14
  * Включена ли трансляция экрана
15
15
  */
16
16
  isScreenSharingEnabled: boolean;
17
+ /**
18
+ * Включена ли трансляция звука
19
+ */
20
+ isAudioSharingEnabled: boolean;
17
21
  videoStreams: VideoStreamInfo[];
18
22
  };
19
23
  export declare type VideoStreamInfo = {
20
24
  id: string;
21
25
  source: string;
22
- vkMovieId?: string;
26
+ externalMovieId?: string;
23
27
  };
24
28
  export default MediaSettings;
25
29
  export declare function compareMediaSettings(ms1: MediaSettings, ms2: MediaSettings): boolean;
@@ -0,0 +1,58 @@
1
+ import LiveStatus from '../enums/LiveStatus';
2
+ import { OkUserId, CompositeUserId } from './Participant';
3
+ import { MediaType } from './ParticipantStreamDescription';
4
+ export interface IMoviePreview {
5
+ url: string;
6
+ width: number;
7
+ height: number;
8
+ }
9
+ export interface IAddMovieParams {
10
+ movieId: string;
11
+ gain?: number;
12
+ metadata?: {
13
+ title?: string;
14
+ thumbnails?: IMoviePreview[];
15
+ };
16
+ }
17
+ export declare type ISharedMovieStateResponse = [
18
+ number,
19
+ number,
20
+ boolean,
21
+ number,
22
+ boolean,
23
+ number
24
+ ];
25
+ export interface ISharedMovieState {
26
+ participantId: CompositeUserId;
27
+ gain?: number;
28
+ pause?: boolean;
29
+ offset?: number;
30
+ mute?: boolean;
31
+ liveStatus?: LiveStatus;
32
+ }
33
+ export interface IUpdateMovieData {
34
+ movieId: string;
35
+ gain?: number;
36
+ pause?: boolean;
37
+ offset?: number;
38
+ mute?: boolean;
39
+ }
40
+ export interface ISharedMovieInfo {
41
+ movieId: OkUserId;
42
+ initiatorId: CompositeUserId;
43
+ title: string;
44
+ source: MediaType;
45
+ externalMovieId: string;
46
+ duration: number;
47
+ thumbnails: IMoviePreview[];
48
+ }
49
+ export interface ISharedMovieStoppedInfo {
50
+ movieId: OkUserId;
51
+ initiatorId: CompositeUserId;
52
+ source: MediaType;
53
+ }
54
+ export interface IOnRemoteMovieData {
55
+ streamName: string;
56
+ stream: MediaStream | null;
57
+ mediaType: MediaType;
58
+ }
@@ -4,6 +4,7 @@ import UserRole from '../enums/UserRole';
4
4
  import { ParticipantStatus } from '../static/External';
5
5
  import MediaSettings from '../types/MediaSettings';
6
6
  import { ExternalId, ExternalParticipantId, ExternalParticipantListMarkers } from './ExternalId';
7
+ import { ISharedMovieInfo } from './MovieShare';
7
8
  import MuteStates from './MuteStates';
8
9
  import ParticipantLayout from './ParticipantLayout';
9
10
  /**
@@ -55,6 +56,7 @@ export interface Participant {
55
56
  unmuteOptions: MediaOption[];
56
57
  observedIds: CompositeUserId[];
57
58
  markers?: ExternalParticipantListMarkers;
59
+ movieShareInfos?: ISharedMovieInfo[];
58
60
  }
59
61
  export interface IGetParticipantsParameters {
60
62
  externalIds: ExternalId[];
@@ -31,10 +31,16 @@ export declare type StopStream = {
31
31
  */
32
32
  stopStream: true;
33
33
  };
34
+ /**
35
+ * Request key frame from source. Should not be called often, negatively impacts video quality.
36
+ */
37
+ export declare type RequestKeyFrame = {
38
+ keyFrameRequested: true;
39
+ };
34
40
  /**
35
41
  * Лейаут собеседника в звонке
36
42
  */
37
- export declare type ParticipantLayout = (Layout | StopStream) & {
43
+ export declare type ParticipantLayout = (Layout | StopStream | RequestKeyFrame) & {
38
44
  /**
39
45
  * Внешний ID пользователя
40
46
  */
@@ -10,4 +10,6 @@ export interface ParticipantListChunkParameters {
10
10
  backward?: boolean;
11
11
  /** If true then resulting chunk will start from Participant with specified marker, if such Participant (still) exists */
12
12
  includeMarker?: boolean;
13
+ /** optional, id of the room to get chunk for, main call if unspecified */
14
+ roomId?: number;
13
15
  }
@@ -6,7 +6,8 @@ export declare enum MediaType {
6
6
  CAMERA = "CAMERA",
7
7
  SCREEN = "SCREEN",
8
8
  STREAM = "STREAM",
9
- MOVIE = "MOVIE"
9
+ MOVIE = "MOVIE",
10
+ AUDIOSHARE = "AUDIOSHARE"
10
11
  }
11
12
  export declare function serializeParticipantStreamDescription(description: ParticipantStreamDescription): string;
12
13
  export declare function parseParticipantStreamDescription(descriptionString: string): ParticipantStreamDescription;