tencentcloud-sdk-nodejs-dlc 4.0.689 → 4.0.691

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
@@ -69,6 +69,24 @@ export interface DescribeTaskResultResponse {
69
69
  RequestId?: string
70
70
  }
71
71
 
72
+ /**
73
+ * DescribeDatasourceConnection返回参数结构体
74
+ */
75
+ export interface DescribeDatasourceConnectionResponse {
76
+ /**
77
+ * 数据连接总数
78
+ */
79
+ TotalCount: number
80
+ /**
81
+ * 数据连接对象集合
82
+ */
83
+ ConnectionSet: Array<DatasourceConnectionInfo>
84
+ /**
85
+ * 唯一请求 ID,每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
86
+ */
87
+ RequestId?: string
88
+ }
89
+
72
90
  /**
73
91
  * Presto监控指标
74
92
  */
@@ -904,6 +922,47 @@ export interface Task {
904
922
  SparkSQLTask?: SQLTask
905
923
  }
906
924
 
925
+ /**
926
+ * Elasticsearch数据源的详细信息
927
+ */
928
+ export interface ElasticsearchInfo {
929
+ /**
930
+ * 数据源ID
931
+ 注意:此字段可能返回 null,表示取不到有效值。
932
+ */
933
+ InstanceId?: string
934
+ /**
935
+ * 数据源名称
936
+ 注意:此字段可能返回 null,表示取不到有效值。
937
+ */
938
+ InstanceName?: string
939
+ /**
940
+ * 用户名
941
+ 注意:此字段可能返回 null,表示取不到有效值。
942
+ */
943
+ User?: string
944
+ /**
945
+ * 密码,需要base64编码
946
+ 注意:此字段可能返回 null,表示取不到有效值。
947
+ */
948
+ Password?: string
949
+ /**
950
+ * 数据源的VPC和子网信息
951
+ 注意:此字段可能返回 null,表示取不到有效值。
952
+ */
953
+ Location?: DatasourceConnectionLocation
954
+ /**
955
+ * 默认数据库名称
956
+ 注意:此字段可能返回 null,表示取不到有效值。
957
+ */
958
+ DbName?: string
959
+ /**
960
+ * 访问Elasticsearch的ip、端口信息
961
+ 注意:此字段可能返回 null,表示取不到有效值。
962
+ */
963
+ ServiceInfo?: Array<IpPortPair>
964
+ }
965
+
907
966
  /**
908
967
  * DetachUserPolicy请求参数结构体
909
968
  */
@@ -1563,53 +1622,25 @@ export interface ModifySparkAppRequest {
1563
1622
  }
1564
1623
 
1565
1624
  /**
1566
- * spark流任务统计信息
1625
+ * 数据源连接的网络信息
1567
1626
  */
1568
- export interface StreamingStatistics {
1569
- /**
1570
- * 任务开始时间
1571
- */
1572
- StartTime: string
1573
- /**
1574
- * 数据接收器数
1575
- */
1576
- Receivers: number
1577
- /**
1578
- * 运行中的接收器数
1579
- */
1580
- NumActiveReceivers: number
1581
- /**
1582
- * 不活跃的接收器数
1583
- */
1584
- NumInactiveReceivers: number
1585
- /**
1586
- * 运行中的批数
1587
- */
1588
- NumActiveBatches: number
1589
- /**
1590
- * 待处理的批数
1591
- */
1592
- NumRetainedCompletedBatches: number
1593
- /**
1594
- * 已完成的批数
1595
- */
1596
- NumTotalCompletedBatches: number
1627
+ export interface DatasourceConnectionLocation {
1597
1628
  /**
1598
- * 平均输入速率
1629
+ * 数据连接所在Vpc实例Id,如“vpc-azd4dt1c”。
1599
1630
  */
1600
- AverageInputRate: number
1631
+ VpcId: string
1601
1632
  /**
1602
- * 平均等待时长
1633
+ * Vpc的IPv4 CIDR
1603
1634
  */
1604
- AverageSchedulingDelay: number
1635
+ VpcCidrBlock: string
1605
1636
  /**
1606
- * 平均处理时长
1637
+ * 数据连接所在子网的实例Id,如“subnet-bthucmmy”
1607
1638
  */
1608
- AverageProcessingTime: number
1639
+ SubnetId: string
1609
1640
  /**
1610
- * 平均延时
1641
+ * Subnet的IPv4 CIDR
1611
1642
  */
1612
- AverageTotalDelay: number
1643
+ SubnetCidrBlock: string
1613
1644
  }
1614
1645
 
1615
1646
  /**
@@ -1889,17 +1920,19 @@ export interface QueryResultResponse {
1889
1920
  }
1890
1921
 
1891
1922
  /**
1892
- * UnlockMetaData请求参数结构体
1923
+ * ip端口对信息
1893
1924
  */
1894
- export interface UnlockMetaDataRequest {
1925
+ export interface IpPortPair {
1895
1926
  /**
1896
- * 锁ID
1927
+ * ip信息
1928
+ 注意:此字段可能返回 null,表示取不到有效值。
1897
1929
  */
1898
- LockId: number
1930
+ Ip?: string
1899
1931
  /**
1900
- * 数据源名称
1932
+ * 端口信息
1933
+ 注意:此字段可能返回 null,表示取不到有效值。
1901
1934
  */
1902
- DatasourceConnectionName?: string
1935
+ Port?: number
1903
1936
  }
1904
1937
 
1905
1938
  /**
@@ -2083,6 +2116,21 @@ export interface CreateUserResponse {
2083
2116
  RequestId?: string
2084
2117
  }
2085
2118
 
2119
+ /**
2120
+ * 文本格式
2121
+ */
2122
+ export interface TextFile {
2123
+ /**
2124
+ * 文本类型,本参数取值为TextFile。
2125
+ */
2126
+ Format: string
2127
+ /**
2128
+ * 处理文本用的正则表达式。
2129
+ 注意:此字段可能返回 null,表示取不到有效值。
2130
+ */
2131
+ Regex: string
2132
+ }
2133
+
2086
2134
  /**
2087
2135
  * DescribeNotebookSessionStatements请求参数结构体
2088
2136
  */
@@ -2471,6 +2519,24 @@ export interface WorkGroupIdSetOfUserId {
2471
2519
  WorkGroupIds: Array<number | bigint>
2472
2520
  }
2473
2521
 
2522
+ /**
2523
+ * Kerberos详细信息
2524
+ */
2525
+ export interface KerberosInfo {
2526
+ /**
2527
+ * Krb5Conf文件值
2528
+ */
2529
+ Krb5Conf?: string
2530
+ /**
2531
+ * KeyTab文件值
2532
+ */
2533
+ KeyTab?: string
2534
+ /**
2535
+ * 服务主体
2536
+ */
2537
+ ServicePrincipal?: string
2538
+ }
2539
+
2474
2540
  /**
2475
2541
  * 数据表分块信息。
2476
2542
  */
@@ -3201,6 +3267,70 @@ export interface TableBaseInfo {
3201
3267
  DbGovernPolicyIsDisable?: string
3202
3268
  }
3203
3269
 
3270
+ /**
3271
+ * hive类型数据源的信息
3272
+ */
3273
+ export interface HiveInfo {
3274
+ /**
3275
+ * hive metastore的地址
3276
+ */
3277
+ MetaStoreUrl: string
3278
+ /**
3279
+ * hive数据源类型,代表数据储存的位置,COS或者HDFS
3280
+ */
3281
+ Type: string
3282
+ /**
3283
+ * 数据源所在的私有网络信息
3284
+ */
3285
+ Location: DatasourceConnectionLocation
3286
+ /**
3287
+ * 如果类型为HDFS,需要传一个用户名
3288
+ */
3289
+ User?: string
3290
+ /**
3291
+ * 如果类型为HDFS,需要选择是否高可用
3292
+ */
3293
+ HighAvailability?: boolean
3294
+ /**
3295
+ * 如果类型为COS,需要填写COS桶连接
3296
+ */
3297
+ BucketUrl?: string
3298
+ /**
3299
+ * json字符串。如果类型为HDFS,需要填写该字段
3300
+ */
3301
+ HdfsProperties?: string
3302
+ /**
3303
+ * Hive的元数据库信息
3304
+ 注意:此字段可能返回 null,表示取不到有效值。
3305
+ */
3306
+ Mysql?: MysqlInfo
3307
+ /**
3308
+ * emr集群Id
3309
+ 注意:此字段可能返回 null,表示取不到有效值。
3310
+ */
3311
+ InstanceId?: string
3312
+ /**
3313
+ * emr集群名称
3314
+ 注意:此字段可能返回 null,表示取不到有效值。
3315
+ */
3316
+ InstanceName?: string
3317
+ /**
3318
+ * EMR集群中hive组件的版本号
3319
+ 注意:此字段可能返回 null,表示取不到有效值。
3320
+ */
3321
+ HiveVersion?: string
3322
+ /**
3323
+ * Kerberos详细信息
3324
+ 注意:此字段可能返回 null,表示取不到有效值。
3325
+ */
3326
+ KerberosInfo?: KerberosInfo
3327
+ /**
3328
+ * 是否开启Kerberos
3329
+ 注意:此字段可能返回 null,表示取不到有效值。
3330
+ */
3331
+ KerberosEnable?: boolean
3332
+ }
3333
+
3204
3334
  /**
3205
3335
  * DMSTable基本信息
3206
3336
  */
@@ -3371,327 +3501,442 @@ export interface DescribeDMSTablesRequest {
3371
3501
  }
3372
3502
 
3373
3503
  /**
3374
- * ModifyUser请求参数结构体
3504
+ * 任务实例。
3375
3505
  */
3376
- export interface ModifyUserRequest {
3506
+ export interface TaskResponseInfo {
3377
3507
  /**
3378
- * 用户Id,和CAM侧Uin匹配
3508
+ * 任务所属Database的名称。
3379
3509
  */
3380
- UserId: string
3510
+ DatabaseName?: string
3381
3511
  /**
3382
- * 用户描述
3512
+ * 任务数据量。
3383
3513
  */
3384
- UserDescription: string
3385
- }
3386
-
3387
- /**
3388
- * 元数据存储描述属性
3389
- */
3390
- export interface DMSSds {
3514
+ DataAmount?: number
3391
3515
  /**
3392
- * 存储地址
3393
- 注意:此字段可能返回 null,表示取不到有效值。
3516
+ * 任务Id。
3394
3517
  */
3395
- Location?: string
3518
+ Id?: string
3396
3519
  /**
3397
- * 输入格式
3398
- 注意:此字段可能返回 null,表示取不到有效值。
3520
+ * 计算耗时,单位: ms
3399
3521
  */
3400
- InputFormat?: string
3522
+ UsedTime?: number
3401
3523
  /**
3402
- * 输出格式
3403
- 注意:此字段可能返回 null,表示取不到有效值。
3524
+ * 任务输出路径。
3404
3525
  */
3405
- OutputFormat?: string
3526
+ OutputPath?: string
3406
3527
  /**
3407
- * bucket数量
3408
- 注意:此字段可能返回 null,表示取不到有效值。
3528
+ * 任务创建时间。
3409
3529
  */
3410
- NumBuckets?: number
3530
+ CreateTime?: string
3411
3531
  /**
3412
- * 是是否压缩
3413
- 注意:此字段可能返回 null,表示取不到有效值。
3532
+ * 任务状态:0 初始化, 1 执行中, 2 执行成功,3 数据写入中,4 排队中。-1 执行失败,-3 已取消。
3414
3533
  */
3415
- Compressed?: boolean
3534
+ State?: number
3416
3535
  /**
3417
- * 是否有子目录
3418
- 注意:此字段可能返回 null,表示取不到有效值。
3536
+ * 任务SQL类型,DDL|DML等
3419
3537
  */
3420
- StoredAsSubDirectories?: boolean
3538
+ SQLType?: string
3421
3539
  /**
3422
- * 序列化lib
3540
+ * 任务SQL语句
3541
+ */
3542
+ SQL?: string
3543
+ /**
3544
+ * 结果是否过期。
3545
+ */
3546
+ ResultExpired?: boolean
3547
+ /**
3548
+ * 数据影响统计信息。
3549
+ */
3550
+ RowAffectInfo?: string
3551
+ /**
3552
+ * 任务结果数据表。
3423
3553
  注意:此字段可能返回 null,表示取不到有效值。
3424
3554
  */
3425
- SerdeLib?: string
3555
+ DataSet?: string
3426
3556
  /**
3427
- * 序列化名称
3557
+ * 失败信息, 例如:errorMessage。该字段已废弃。
3558
+ */
3559
+ Error?: string
3560
+ /**
3561
+ * 任务执行进度num/100(%)
3562
+ */
3563
+ Percentage?: number
3564
+ /**
3565
+ * 任务执行输出信息。
3566
+ */
3567
+ OutputMessage?: string
3568
+ /**
3569
+ * 执行SQL的引擎类型
3570
+ */
3571
+ TaskType?: string
3572
+ /**
3573
+ * 任务进度明细
3428
3574
  注意:此字段可能返回 null,表示取不到有效值。
3429
3575
  */
3430
- SerdeName?: string
3576
+ ProgressDetail?: string
3431
3577
  /**
3432
- * 桶名称
3578
+ * 任务结束时间
3433
3579
  注意:此字段可能返回 null,表示取不到有效值。
3434
3580
  */
3435
- BucketCols?: Array<string>
3581
+ UpdateTime?: string
3436
3582
  /**
3437
- * 序列化参数
3583
+ * 计算资源id
3438
3584
  注意:此字段可能返回 null,表示取不到有效值。
3439
3585
  */
3440
- SerdeParams?: Array<KVPair>
3586
+ DataEngineId?: string
3441
3587
  /**
3442
- * 附加参数
3588
+ * 执行sql的子uin
3443
3589
  注意:此字段可能返回 null,表示取不到有效值。
3444
3590
  */
3445
- Params?: Array<KVPair>
3591
+ OperateUin?: string
3446
3592
  /**
3447
- * 列排序(Expired)
3593
+ * 计算资源名字
3448
3594
  注意:此字段可能返回 null,表示取不到有效值。
3449
3595
  */
3450
- SortCols?: DMSColumnOrder
3596
+ DataEngineName?: string
3451
3597
  /**
3452
- *
3598
+ * 导入类型是本地导入还是cos
3453
3599
  注意:此字段可能返回 null,表示取不到有效值。
3454
3600
  */
3455
- Cols?: Array<DMSColumn>
3601
+ InputType?: string
3456
3602
  /**
3457
- * 列排序字段
3603
+ * 导入配置
3458
3604
  注意:此字段可能返回 null,表示取不到有效值。
3459
3605
  */
3460
- SortColumns?: Array<DMSColumnOrder>
3461
- }
3462
-
3463
- /**
3464
- * CreateSparkAppTask返回参数结构体
3465
- */
3466
- export interface CreateSparkAppTaskResponse {
3606
+ InputConf?: string
3467
3607
  /**
3468
- * 批Id
3608
+ * 数据条数
3609
+ 注意:此字段可能返回 null,表示取不到有效值。
3469
3610
  */
3470
- BatchId?: string
3611
+ DataNumber?: number
3471
3612
  /**
3472
- * 任务Id
3613
+ * 查询数据能不能下载
3614
+ 注意:此字段可能返回 null,表示取不到有效值。
3473
3615
  */
3474
- TaskId?: string
3616
+ CanDownload?: boolean
3475
3617
  /**
3476
- * 唯一请求 ID,每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
3618
+ * 用户别名
3619
+ 注意:此字段可能返回 null,表示取不到有效值。
3477
3620
  */
3478
- RequestId?: string
3479
- }
3480
-
3481
- /**
3482
- * CancelTask请求参数结构体
3483
- */
3484
- export interface CancelTaskRequest {
3621
+ UserAlias?: string
3485
3622
  /**
3486
- * 任务Id,全局唯一
3623
+ * spark应用作业名
3624
+ 注意:此字段可能返回 null,表示取不到有效值。
3487
3625
  */
3488
- TaskId: string
3489
- }
3490
-
3491
- /**
3492
- * 任务实例。
3493
- */
3494
- export interface TaskResponseInfo {
3626
+ SparkJobName?: string
3495
3627
  /**
3496
- * 任务所属Database的名称。
3628
+ * spark应用作业Id
3629
+ 注意:此字段可能返回 null,表示取不到有效值。
3497
3630
  */
3498
- DatabaseName?: string
3631
+ SparkJobId?: string
3499
3632
  /**
3500
- * 任务数据量。
3633
+ * spark应用入口jar文件
3634
+ 注意:此字段可能返回 null,表示取不到有效值。
3501
3635
  */
3502
- DataAmount?: number
3636
+ SparkJobFile?: string
3503
3637
  /**
3504
- * 任务Id。
3638
+ * spark ui url
3639
+ 注意:此字段可能返回 null,表示取不到有效值。
3505
3640
  */
3506
- Id?: string
3641
+ UiUrl?: string
3507
3642
  /**
3508
- * 计算耗时,单位: ms
3643
+ * 任务耗时,单位: ms
3644
+ 注意:此字段可能返回 null,表示取不到有效值。
3509
3645
  */
3510
- UsedTime?: number
3646
+ TotalTime?: number
3511
3647
  /**
3512
- * 任务输出路径。
3648
+ * spark app job执行task的程序入口参数
3649
+ 注意:此字段可能返回 null,表示取不到有效值。
3513
3650
  */
3514
- OutputPath?: string
3651
+ CmdArgs?: string
3515
3652
  /**
3516
- * 任务创建时间。
3653
+ * 集群镜像大版本名称
3654
+ 注意:此字段可能返回 null,表示取不到有效值。
3517
3655
  */
3518
- CreateTime?: string
3656
+ ImageVersion?: string
3519
3657
  /**
3520
- * 任务状态:0 初始化, 1 执行中, 2 执行成功,3 数据写入中,4 排队中。-1 执行失败,-3 已取消。
3658
+ * driver规格:small,medium,large,xlarge;内存型(引擎类型):m.small,m.medium,m.large,m.xlarge
3659
+ 注意:此字段可能返回 null,表示取不到有效值。
3521
3660
  */
3522
- State?: number
3661
+ DriverSize?: string
3523
3662
  /**
3524
- * 任务SQL类型,DDL|DML等
3663
+ * executor规格:small,medium,large,xlarge;内存型(引擎类型):m.small,m.medium,m.large,m.xlarge
3664
+ 注意:此字段可能返回 null,表示取不到有效值。
3525
3665
  */
3526
- SQLType?: string
3666
+ ExecutorSize?: string
3527
3667
  /**
3528
- * 任务SQL语句
3668
+ * 指定executor数量,最小值为1,最大值小于集群规格
3669
+ 注意:此字段可能返回 null,表示取不到有效值。
3529
3670
  */
3530
- SQL?: string
3671
+ ExecutorNums?: number
3531
3672
  /**
3532
- * 结果是否过期。
3673
+ * 指定executor max数量(动态配置场景下),最小值为1,最大值小于集群规格(当ExecutorMaxNumbers小于ExecutorNums时,改值设定为ExecutorNums)
3674
+ 注意:此字段可能返回 null,表示取不到有效值。
3533
3675
  */
3534
- ResultExpired?: boolean
3676
+ ExecutorMaxNumbers?: number
3535
3677
  /**
3536
- * 数据影响统计信息。
3678
+ * 任务公共指标数据
3679
+ 注意:此字段可能返回 null,表示取不到有效值。
3537
3680
  */
3538
- RowAffectInfo?: string
3681
+ CommonMetrics?: CommonMetrics
3539
3682
  /**
3540
- * 任务结果数据表。
3683
+ * spark任务指标数据
3541
3684
  注意:此字段可能返回 null,表示取不到有效值。
3542
3685
  */
3543
- DataSet?: string
3686
+ SparkMonitorMetrics?: SparkMonitorMetrics
3544
3687
  /**
3545
- * 失败信息, 例如:errorMessage。该字段已废弃。
3688
+ * presto任务指标数据
3689
+ 注意:此字段可能返回 null,表示取不到有效值。
3546
3690
  */
3547
- Error?: string
3691
+ PrestoMonitorMetrics?: PrestoMonitorMetrics
3692
+ }
3693
+
3694
+ /**
3695
+ * ModifyUser请求参数结构体
3696
+ */
3697
+ export interface ModifyUserRequest {
3548
3698
  /**
3549
- * 任务执行进度num/100(%)
3699
+ * 用户Id,和CAM侧Uin匹配
3550
3700
  */
3551
- Percentage?: number
3701
+ UserId: string
3552
3702
  /**
3553
- * 任务执行输出信息。
3703
+ * 用户描述
3554
3704
  */
3555
- OutputMessage?: string
3705
+ UserDescription: string
3706
+ }
3707
+
3708
+ /**
3709
+ * 元数据存储描述属性
3710
+ */
3711
+ export interface DMSSds {
3556
3712
  /**
3557
- * 执行SQL的引擎类型
3713
+ * 存储地址
3714
+ 注意:此字段可能返回 null,表示取不到有效值。
3558
3715
  */
3559
- TaskType?: string
3716
+ Location?: string
3560
3717
  /**
3561
- * 任务进度明细
3718
+ * 输入格式
3562
3719
  注意:此字段可能返回 null,表示取不到有效值。
3563
3720
  */
3564
- ProgressDetail?: string
3721
+ InputFormat?: string
3565
3722
  /**
3566
- * 任务结束时间
3723
+ * 输出格式
3567
3724
  注意:此字段可能返回 null,表示取不到有效值。
3568
3725
  */
3569
- UpdateTime?: string
3726
+ OutputFormat?: string
3570
3727
  /**
3571
- * 计算资源id
3728
+ * bucket数量
3572
3729
  注意:此字段可能返回 null,表示取不到有效值。
3573
3730
  */
3574
- DataEngineId?: string
3731
+ NumBuckets?: number
3575
3732
  /**
3576
- * 执行sql的子uin
3733
+ * 是是否压缩
3577
3734
  注意:此字段可能返回 null,表示取不到有效值。
3578
3735
  */
3579
- OperateUin?: string
3736
+ Compressed?: boolean
3580
3737
  /**
3581
- * 计算资源名字
3738
+ * 是否有子目录
3582
3739
  注意:此字段可能返回 null,表示取不到有效值。
3583
3740
  */
3584
- DataEngineName?: string
3741
+ StoredAsSubDirectories?: boolean
3585
3742
  /**
3586
- * 导入类型是本地导入还是cos
3743
+ * 序列化lib
3587
3744
  注意:此字段可能返回 null,表示取不到有效值。
3588
3745
  */
3589
- InputType?: string
3746
+ SerdeLib?: string
3590
3747
  /**
3591
- * 导入配置
3748
+ * 序列化名称
3592
3749
  注意:此字段可能返回 null,表示取不到有效值。
3593
3750
  */
3594
- InputConf?: string
3751
+ SerdeName?: string
3595
3752
  /**
3596
- * 数据条数
3753
+ * 桶名称
3597
3754
  注意:此字段可能返回 null,表示取不到有效值。
3598
3755
  */
3599
- DataNumber?: number
3756
+ BucketCols?: Array<string>
3600
3757
  /**
3601
- * 查询数据能不能下载
3758
+ * 序列化参数
3602
3759
  注意:此字段可能返回 null,表示取不到有效值。
3603
3760
  */
3604
- CanDownload?: boolean
3761
+ SerdeParams?: Array<KVPair>
3605
3762
  /**
3606
- * 用户别名
3763
+ * 附加参数
3607
3764
  注意:此字段可能返回 null,表示取不到有效值。
3608
3765
  */
3609
- UserAlias?: string
3766
+ Params?: Array<KVPair>
3610
3767
  /**
3611
- * spark应用作业名
3768
+ * 列排序(Expired)
3612
3769
  注意:此字段可能返回 null,表示取不到有效值。
3613
3770
  */
3614
- SparkJobName?: string
3771
+ SortCols?: DMSColumnOrder
3615
3772
  /**
3616
- * spark应用作业Id
3773
+ *
3617
3774
  注意:此字段可能返回 null,表示取不到有效值。
3618
3775
  */
3619
- SparkJobId?: string
3776
+ Cols?: Array<DMSColumn>
3620
3777
  /**
3621
- * spark应用入口jar文件
3778
+ * 列排序字段
3622
3779
  注意:此字段可能返回 null,表示取不到有效值。
3623
3780
  */
3624
- SparkJobFile?: string
3781
+ SortColumns?: Array<DMSColumnOrder>
3782
+ }
3783
+
3784
+ /**
3785
+ * CreateSparkAppTask返回参数结构体
3786
+ */
3787
+ export interface CreateSparkAppTaskResponse {
3625
3788
  /**
3626
- * spark ui url
3627
- 注意:此字段可能返回 null,表示取不到有效值。
3789
+ * 批Id
3628
3790
  */
3629
- UiUrl?: string
3791
+ BatchId?: string
3630
3792
  /**
3631
- * 任务耗时,单位: ms
3632
- 注意:此字段可能返回 null,表示取不到有效值。
3793
+ * 任务Id
3633
3794
  */
3634
- TotalTime?: number
3795
+ TaskId?: string
3635
3796
  /**
3636
- * spark app job执行task的程序入口参数
3637
- 注意:此字段可能返回 null,表示取不到有效值。
3797
+ * 唯一请求 ID,每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
3638
3798
  */
3639
- CmdArgs?: string
3799
+ RequestId?: string
3800
+ }
3801
+
3802
+ /**
3803
+ * CancelTask请求参数结构体
3804
+ */
3805
+ export interface CancelTaskRequest {
3640
3806
  /**
3641
- * 集群镜像大版本名称
3642
- 注意:此字段可能返回 null,表示取不到有效值。
3807
+ * 任务Id,全局唯一
3643
3808
  */
3644
- ImageVersion?: string
3809
+ TaskId: string
3810
+ }
3811
+
3812
+ /**
3813
+ * spark流任务统计信息
3814
+ */
3815
+ export interface StreamingStatistics {
3645
3816
  /**
3646
- * driver规格:small,medium,large,xlarge;内存型(引擎类型):m.small,m.medium,m.large,m.xlarge
3647
- 注意:此字段可能返回 null,表示取不到有效值。
3817
+ * 任务开始时间
3648
3818
  */
3649
- DriverSize?: string
3819
+ StartTime: string
3650
3820
  /**
3651
- * executor规格:small,medium,large,xlarge;内存型(引擎类型):m.small,m.medium,m.large,m.xlarge
3652
- 注意:此字段可能返回 null,表示取不到有效值。
3821
+ * 数据接收器数
3653
3822
  */
3654
- ExecutorSize?: string
3823
+ Receivers: number
3655
3824
  /**
3656
- * 指定executor数量,最小值为1,最大值小于集群规格
3657
- 注意:此字段可能返回 null,表示取不到有效值。
3825
+ * 运行中的接收器数
3658
3826
  */
3659
- ExecutorNums?: number
3827
+ NumActiveReceivers: number
3660
3828
  /**
3661
- * 指定executor max数量(动态配置场景下),最小值为1,最大值小于集群规格(当ExecutorMaxNumbers小于ExecutorNums时,改值设定为ExecutorNums)
3662
- 注意:此字段可能返回 null,表示取不到有效值。
3829
+ * 不活跃的接收器数
3663
3830
  */
3664
- ExecutorMaxNumbers?: number
3831
+ NumInactiveReceivers: number
3665
3832
  /**
3666
- * 任务公共指标数据
3667
- 注意:此字段可能返回 null,表示取不到有效值。
3833
+ * 运行中的批数
3668
3834
  */
3669
- CommonMetrics?: CommonMetrics
3835
+ NumActiveBatches: number
3670
3836
  /**
3671
- * spark任务指标数据
3672
- 注意:此字段可能返回 null,表示取不到有效值。
3837
+ * 待处理的批数
3673
3838
  */
3674
- SparkMonitorMetrics?: SparkMonitorMetrics
3839
+ NumRetainedCompletedBatches: number
3675
3840
  /**
3676
- * presto任务指标数据
3677
- 注意:此字段可能返回 null,表示取不到有效值。
3841
+ * 已完成的批数
3678
3842
  */
3679
- PrestoMonitorMetrics?: PrestoMonitorMetrics
3843
+ NumTotalCompletedBatches: number
3844
+ /**
3845
+ * 平均输入速率
3846
+ */
3847
+ AverageInputRate: number
3848
+ /**
3849
+ * 平均等待时长
3850
+ */
3851
+ AverageSchedulingDelay: number
3852
+ /**
3853
+ * 平均处理时长
3854
+ */
3855
+ AverageProcessingTime: number
3856
+ /**
3857
+ * 平均延时
3858
+ */
3859
+ AverageTotalDelay: number
3680
3860
  }
3681
3861
 
3682
3862
  /**
3683
- * 文本格式
3863
+ * 数据源信息
3684
3864
  */
3685
- export interface TextFile {
3865
+ export interface DatasourceConnectionInfo {
3686
3866
  /**
3687
- * 文本类型,本参数取值为TextFile。
3867
+ * 数据源数字Id
3688
3868
  */
3689
- Format: string
3869
+ Id: number
3690
3870
  /**
3691
- * 处理文本用的正则表达式。
3871
+ * 数据源字符串Id
3872
+ */
3873
+ DatasourceConnectionId: string
3874
+ /**
3875
+ * 数据源名称
3876
+ */
3877
+ DatasourceConnectionName: string
3878
+ /**
3879
+ * 数据源描述
3880
+ */
3881
+ DatasourceConnectionDesc: string
3882
+ /**
3883
+ * 数据源类型,支持DataLakeCatalog、IcebergCatalog、Result、Mysql、HiveCos、HiveHdfs
3884
+ */
3885
+ DatasourceConnectionType: string
3886
+ /**
3887
+ * 数据源属性
3692
3888
  注意:此字段可能返回 null,表示取不到有效值。
3693
3889
  */
3694
- Regex: string
3890
+ DatasourceConnectionConfig: DatasourceConnectionConfig
3891
+ /**
3892
+ * 数据源状态:0(初始化)、1(成功)、-1(已删除)、-2(失败)、-3(删除中)
3893
+ */
3894
+ State: number
3895
+ /**
3896
+ * 地域
3897
+ */
3898
+ Region: string
3899
+ /**
3900
+ * 用户AppId
3901
+ */
3902
+ AppId: string
3903
+ /**
3904
+ * 数据源创建时间
3905
+ */
3906
+ CreateTime: string
3907
+ /**
3908
+ * 数据源最近一次更新时间
3909
+ */
3910
+ UpdateTime: string
3911
+ /**
3912
+ * 数据源同步失败原因
3913
+ */
3914
+ Message: string
3915
+ /**
3916
+ * 数据源绑定的计算引擎信息
3917
+ 注意:此字段可能返回 null,表示取不到有效值。
3918
+ */
3919
+ DataEngines?: Array<DataEngineInfo>
3920
+ /**
3921
+ * 创建人
3922
+ 注意:此字段可能返回 null,表示取不到有效值。
3923
+ */
3924
+ UserAlias?: string
3925
+ /**
3926
+ * 网络配置列表
3927
+ 注意:此字段可能返回 null,表示取不到有效值。
3928
+ */
3929
+ NetworkConnectionSet?: Array<NetworkConnection>
3930
+ /**
3931
+ * 连通性状态:0(未测试,默认)、1(正常)、2(失败)
3932
+ 注意:此字段可能返回 null,表示取不到有效值。
3933
+ */
3934
+ ConnectivityState?: number
3935
+ /**
3936
+ * 连通性测试提示信息
3937
+ 注意:此字段可能返回 null,表示取不到有效值。
3938
+ */
3939
+ ConnectivityTips?: string
3695
3940
  }
3696
3941
 
3697
3942
  /**
@@ -3947,6 +4192,20 @@ export interface AlterDMSTableRequest {
3947
4192
  Name?: string
3948
4193
  }
3949
4194
 
4195
+ /**
4196
+ * Kafka连接信息
4197
+ */
4198
+ export interface KafkaInfo {
4199
+ /**
4200
+ * kakfa实例Id
4201
+ */
4202
+ InstanceId: string
4203
+ /**
4204
+ * kakfa数据源的网络信息
4205
+ */
4206
+ Location: DatasourceConnectionLocation
4207
+ }
4208
+
3950
4209
  /**
3951
4210
  * CreateImportTask返回参数结构体
3952
4211
  */
@@ -4255,6 +4514,20 @@ export interface DescribeTaskResultRequest {
4255
4514
  MaxResults?: number
4256
4515
  }
4257
4516
 
4517
+ /**
4518
+ * UnlockMetaData请求参数结构体
4519
+ */
4520
+ export interface UnlockMetaDataRequest {
4521
+ /**
4522
+ * 锁ID
4523
+ */
4524
+ LockId: number
4525
+ /**
4526
+ * 数据源名称
4527
+ */
4528
+ DatasourceConnectionName?: string
4529
+ }
4530
+
4258
4531
  /**
4259
4532
  * 查询列表过滤条件参数
4260
4533
  */
@@ -5082,6 +5355,42 @@ export interface DMSColumnOrder {
5082
5355
  Order?: number
5083
5356
  }
5084
5357
 
5358
+ /**
5359
+ * Mysql类型数据源信息
5360
+ */
5361
+ export interface MysqlInfo {
5362
+ /**
5363
+ * 连接mysql的jdbc url
5364
+ */
5365
+ JdbcUrl: string
5366
+ /**
5367
+ * 用户名
5368
+ */
5369
+ User: string
5370
+ /**
5371
+ * mysql密码
5372
+ */
5373
+ Password: string
5374
+ /**
5375
+ * mysql数据源的网络信息
5376
+ */
5377
+ Location: DatasourceConnectionLocation
5378
+ /**
5379
+ * 数据库名称
5380
+ */
5381
+ DbName?: string
5382
+ /**
5383
+ * 数据库实例ID,和数据库侧保持一致
5384
+ 注意:此字段可能返回 null,表示取不到有效值。
5385
+ */
5386
+ InstanceId?: string
5387
+ /**
5388
+ * 数据库实例名称,和数据库侧保持一致
5389
+ 注意:此字段可能返回 null,表示取不到有效值。
5390
+ */
5391
+ InstanceName?: string
5392
+ }
5393
+
5085
5394
  /**
5086
5395
  * CreateSparkApp返回参数结构体
5087
5396
  */
@@ -5155,17 +5464,13 @@ export interface CreateTasksRequest {
5155
5464
  }
5156
5465
 
5157
5466
  /**
5158
- * SuspendResumeDataEngine请求参数结构体
5467
+ * 其他数据源
5159
5468
  */
5160
- export interface SuspendResumeDataEngineRequest {
5469
+ export interface OtherDatasourceConnection {
5161
5470
  /**
5162
- * 虚拟集群名称
5471
+ * 网络参数
5163
5472
  */
5164
- DataEngineName: string
5165
- /**
5166
- * 操作类型 suspend/resume
5167
- */
5168
- Operate: string
5473
+ Location: DatasourceConnectionLocation
5169
5474
  }
5170
5475
 
5171
5476
  /**
@@ -5354,6 +5659,47 @@ export interface LockMetaDataRequest {
5354
5659
  Hostname?: string
5355
5660
  }
5356
5661
 
5662
+ /**
5663
+ * 数据源详细信息
5664
+ */
5665
+ export interface DataSourceInfo {
5666
+ /**
5667
+ * 数据源实例的唯一ID
5668
+ 注意:此字段可能返回 null,表示取不到有效值。
5669
+ */
5670
+ InstanceId?: string
5671
+ /**
5672
+ * 数据源的名称
5673
+ 注意:此字段可能返回 null,表示取不到有效值。
5674
+ */
5675
+ InstanceName?: string
5676
+ /**
5677
+ * 数据源的JDBC访问链接
5678
+ 注意:此字段可能返回 null,表示取不到有效值。
5679
+ */
5680
+ JdbcUrl?: string
5681
+ /**
5682
+ * 用于访问数据源的用户名
5683
+ 注意:此字段可能返回 null,表示取不到有效值。
5684
+ */
5685
+ User?: string
5686
+ /**
5687
+ * 数据源访问密码,需要base64编码
5688
+ 注意:此字段可能返回 null,表示取不到有效值。
5689
+ */
5690
+ Password?: string
5691
+ /**
5692
+ * 数据源的VPC和子网信息
5693
+ 注意:此字段可能返回 null,表示取不到有效值。
5694
+ */
5695
+ Location?: DatasourceConnectionLocation
5696
+ /**
5697
+ * 默认数据库名
5698
+ 注意:此字段可能返回 null,表示取不到有效值。
5699
+ */
5700
+ DbName?: string
5701
+ }
5702
+
5357
5703
  /**
5358
5704
  * CancelSparkSessionBatchSQL请求参数结构体
5359
5705
  */
@@ -5697,7 +6043,7 @@ export interface CreateSparkSessionBatchSQLRequest {
5697
6043
  */
5698
6044
  DataEngineName: string
5699
6045
  /**
5700
- * 运行sql
6046
+ * 运行sql,需要base64编码。
5701
6047
  */
5702
6048
  ExecuteSQL: string
5703
6049
  /**
@@ -5735,7 +6081,7 @@ export interface CreateSparkSessionBatchSQLRequest {
5735
6081
  */
5736
6082
  Arguments?: Array<KVPair>
5737
6083
  /**
5738
- * 是否继承集群的资源类配置:0:自定义(默认),1:继承集群;
6084
+ * 是否继承集群的资源类配置:0:不继承(默认),1:继承集群;
5739
6085
  */
5740
6086
  IsInherit?: number
5741
6087
  }
@@ -6068,6 +6414,20 @@ export interface DataEngineInfo {
6068
6414
  SessionResourceTemplate?: SessionResourceTemplate
6069
6415
  }
6070
6416
 
6417
+ /**
6418
+ * SuspendResumeDataEngine请求参数结构体
6419
+ */
6420
+ export interface SuspendResumeDataEngineRequest {
6421
+ /**
6422
+ * 虚拟集群名称
6423
+ */
6424
+ DataEngineName: string
6425
+ /**
6426
+ * 操作类型 suspend/resume
6427
+ */
6428
+ Operate: string
6429
+ }
6430
+
6071
6431
  /**
6072
6432
  * DescribeSparkAppTasks请求参数结构体
6073
6433
  */
@@ -6120,6 +6480,53 @@ export interface LockMetaDataResponse {
6120
6480
  RequestId?: string
6121
6481
  }
6122
6482
 
6483
+ /**
6484
+ * DescribeDatasourceConnection请求参数结构体
6485
+ */
6486
+ export interface DescribeDatasourceConnectionRequest {
6487
+ /**
6488
+ * 连接ID列表,指定要查询的连接ID
6489
+ */
6490
+ DatasourceConnectionIds?: Array<string>
6491
+ /**
6492
+ * 过滤条件,当前支持的过滤键为:DatasourceConnectionName(数据源连接名)。
6493
+ DatasourceConnectionType (数据源连接连接类型)
6494
+ */
6495
+ Filters?: Array<Filter>
6496
+ /**
6497
+ * 偏移量,默认为0
6498
+ */
6499
+ Offset?: number
6500
+ /**
6501
+ * 返回数量,默认20,最大值100
6502
+ */
6503
+ Limit?: number
6504
+ /**
6505
+ * 排序字段,支持如下字段类型,create-time(默认,创建时间)、update-time(更新时间)
6506
+ */
6507
+ SortBy?: string
6508
+ /**
6509
+ * 排序方式,desc表示正序,asc表示反序, 默认为desc
6510
+ */
6511
+ Sorting?: string
6512
+ /**
6513
+ * 筛选字段:起始时间
6514
+ */
6515
+ StartTime?: string
6516
+ /**
6517
+ * 筛选字段:截止时间
6518
+ */
6519
+ EndTime?: string
6520
+ /**
6521
+ * 连接名称列表,指定要查询的连接名称
6522
+ */
6523
+ DatasourceConnectionNames?: Array<string>
6524
+ /**
6525
+ * 连接类型,支持Mysql/HiveCos/Kafka/DataLakeCatalog
6526
+ */
6527
+ DatasourceConnectionTypes?: Array<string>
6528
+ }
6529
+
6123
6530
  /**
6124
6531
  * CheckLockMetaData返回参数结构体
6125
6532
  */
@@ -6475,6 +6882,57 @@ export interface DMSColumn {
6475
6882
  IsPartition?: boolean
6476
6883
  }
6477
6884
 
6885
+ /**
6886
+ * 数据源属性
6887
+ */
6888
+ export interface DatasourceConnectionConfig {
6889
+ /**
6890
+ * Mysql数据源连接的属性
6891
+ 注意:此字段可能返回 null,表示取不到有效值。
6892
+ */
6893
+ Mysql?: MysqlInfo
6894
+ /**
6895
+ * Hive数据源连接的属性
6896
+ 注意:此字段可能返回 null,表示取不到有效值。
6897
+ */
6898
+ Hive?: HiveInfo
6899
+ /**
6900
+ * Kafka数据源连接的属性
6901
+ 注意:此字段可能返回 null,表示取不到有效值。
6902
+ */
6903
+ Kafka?: KafkaInfo
6904
+ /**
6905
+ * 其他数据源连接的属性
6906
+ 注意:此字段可能返回 null,表示取不到有效值。
6907
+ */
6908
+ OtherDatasourceConnection?: OtherDatasourceConnection
6909
+ /**
6910
+ * PostgreSQL数据源连接的属性
6911
+ 注意:此字段可能返回 null,表示取不到有效值。
6912
+ */
6913
+ PostgreSql?: DataSourceInfo
6914
+ /**
6915
+ * SQLServer数据源连接的属性
6916
+ 注意:此字段可能返回 null,表示取不到有效值。
6917
+ */
6918
+ SqlServer?: DataSourceInfo
6919
+ /**
6920
+ * ClickHouse数据源连接的属性
6921
+ 注意:此字段可能返回 null,表示取不到有效值。
6922
+ */
6923
+ ClickHouse?: DataSourceInfo
6924
+ /**
6925
+ * Elasticsearch数据源连接的属性
6926
+ 注意:此字段可能返回 null,表示取不到有效值。
6927
+ */
6928
+ Elasticsearch?: ElasticsearchInfo
6929
+ /**
6930
+ * TDSQL-PostgreSQL数据源连接的属性
6931
+ 注意:此字段可能返回 null,表示取不到有效值。
6932
+ */
6933
+ TDSQLPostgreSql?: DataSourceInfo
6934
+ }
6935
+
6478
6936
  /**
6479
6937
  * UpdateRowFilter请求参数结构体
6480
6938
  */