tencentcloud-sdk-nodejs-dlc 4.0.348 → 4.0.349

package/src/services/dlc/v20210125/dlc_models.ts

@@ -107,6 +107,21 @@ export interface DeleteUserRequest {
   UserIds: Array<string>
 }
 
+/**
+ * DescribeSparkAppJob请求参数结构体
+ */
+export interface DescribeSparkAppJobRequest {
+  /**
+   * spark作业Id，与JobName同时存在时，JobName无效
+   */
+  JobId?: string
+
+  /**
+   * spark作业名
+   */
+  JobName?: string
+}
+
 /**
  * CreateStoreLocation返回参数结构体
  */
@@ -168,51 +183,150 @@ export interface DescribeTablesResponse {
 }
 
 /**
- * 工作组信息
+ * spark作业详情
  */
-export interface WorkGroupInfo {
+export interface SparkJobInfo {
   /**
-   * 查询到的工作组唯一Id
+   * spark作业ID
    */
-  WorkGroupId: number
+  JobId: string
 
   /**
-   * 工作组名称
+   * spark作业名
    */
-  WorkGroupName: string
+  JobName: string
 
   /**
-      * 工作组描述
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  WorkGroupDescription: string
+   * spark作业类型，可去1或者2，1表示batch作业， 2表示streaming作业
+   */
+  JobType: number
 
   /**
-   * 工作组关联的用户数量
+   * 引擎名
    */
-  UserNum: number
+  DataEngine: string
 
   /**
-      * 工作组关联的用户集合
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  UserSet: Array<UserMessage>
+   * 该字段已下线，请使用字段Datasource
+   */
+  Eni: string
 
   /**
-      * 工作组绑定的权限集合
+   * 程序包是否本地上传，cos或者lakefs
+   */
+  IsLocal: string
+
+  /**
+   * 程序包路径
+   */
+  JobFile: string
+
+  /**
+   * 角色ID
+   */
+  RoleArn: number
+
+  /**
+   * spark作业运行主类
+   */
+  MainClass: string
+
+  /**
+   * 命令行参数，spark作业命令行参数，空格分隔
+   */
+  CmdArgs: string
+
+  /**
+   * spark原生配置，换行符分隔
+   */
+  JobConf: string
+
+  /**
+   * 依赖jars是否本地上传，cos或者lakefs
+   */
+  IsLocalJars: string
+
+  /**
+   * spark作业依赖jars，逗号分隔
+   */
+  JobJars: string
+
+  /**
+   * 依赖文件是否本地上传，cos或者lakefs
+   */
+  IsLocalFiles: string
+
+  /**
+   * spark作业依赖文件，逗号分隔
+   */
+  JobFiles: string
+
+  /**
+   * spark作业driver资源大小
+   */
+  JobDriverSize: string
+
+  /**
+   * spark作业executor资源大小
+   */
+  JobExecutorSize: string
+
+  /**
+   * spark作业executor个数
+   */
+  JobExecutorNums: number
+
+  /**
+   * spark流任务最大重试次数
+   */
+  JobMaxAttempts: number
+
+  /**
+   * spark作业创建者
+   */
+  JobCreator: string
+
+  /**
+   * spark作业创建时间
+   */
+  JobCreateTime: number
+
+  /**
+   * spark作业更新时间
+   */
+  JobUpdateTime: number
+
+  /**
+   * spark作业最近任务ID
+   */
+  CurrentTaskId: string
+
+  /**
+   * spark作业最近运行状态
+   */
+  JobStatus: number
+
+  /**
+      * spark流作业统计
 注意：此字段可能返回 null，表示取不到有效值。
       */
-  PolicySet: Array<Policy>
+  StreamingStat: StreamingStatistics
 
   /**
-   * 工作组的创建人
-   */
-  Creator: string
+      * 数据源名
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  DataSource: string
+}
 
+/**
+ * DeleteSparkApp请求参数结构体
+ */
+export interface DeleteSparkAppRequest {
   /**
-   * 工作组的创建时间，形如2021-07-28 16:19:32
+   * spark应用名
    */
-  CreateTime: string
+  AppName: string
 }
 
 /**
@@ -240,6 +354,36 @@ export interface DeleteScriptResponse {
   RequestId?: string
 }
 
+/**
+ * 返回数据表的相关信息。
+ */
+export interface TableInfo {
+  /**
+   * 数据表配置信息。
+   */
+  TableBaseInfo: TableBaseInfo
+
+  /**
+   * 数据表格式。每次入参可选如下其一的KV结构，[TextFile，CSV，Json, Parquet, ORC, AVRD]。
+   */
+  DataFormat: DataFormat
+
+  /**
+   * 数据表列信息。
+   */
+  Columns: Array<Column>
+
+  /**
+   * 数据表分块信息。
+   */
+  Partitions: Array<Partition>
+
+  /**
+   * 数据存储路径。当前仅支持cos路径，格式如下：cosn://bucket-name/filepath。
+   */
+  Location: string
+}
+
 /**
  * 任务类型，任务如SQL查询等。
  */
@@ -271,33 +415,24 @@ export interface DetachUserPolicyRequest {
 }
 
 /**
- * 返回数据表的相关信息。
+ * DescribeSparkAppTasks返回参数结构体
  */
-export interface TableInfo {
+export interface DescribeSparkAppTasksResponse {
   /**
-   * 数据表配置信息。
-   */
-  TableBaseInfo: TableBaseInfo
-
-  /**
-   * 数据表格式。每次入参可选如下其一的KV结构，[TextFile，CSV，Json, Parquet, ORC, AVRD]。
-   */
-  DataFormat: DataFormat
-
-  /**
-   * 数据表列信息。
-   */
-  Columns: Array<Column>
+      * 任务列表
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  Tasks: TaskResponseInfo
 
   /**
-   * 数据表分块信息。
+   * 任务总数
    */
-  Partitions: Array<Partition>
+  TotalCount: number
 
   /**
-   * 数据存储路径。当前仅支持cos路径，格式如下：cosn://bucket-name/filepath。
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
    */
-  Location: string
+  RequestId?: string
 }
 
 /**
@@ -351,64 +486,128 @@ export interface DetachWorkGroupPolicyResponse {
 }
 
 /**
- * 数据表数据格式。
+ * CSV序列化及反序列化数据结构
  */
-export interface DataFormat {
+export interface CSVSerde {
   /**
-      * 文本格式，TextFile。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  TextFile: TextFile
+   * CSV序列化转义符，默认为"\\"，最长8个字符，如 Escape: "/\"
+   */
+  Escape?: string
 
   /**
-      * 文本格式，CSV。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  CSV: CSV
+   * CSV序列化字段域符，默认为"'"，最长8个字符, 如 Quote: "\""
+   */
+  Quote?: string
 
   /**
-      * 文本格式，Json。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  Json: Other
+   * CSV序列化分隔符，默认为"\t"，最长8个字符, 如 Separator: "\t"
+   */
+  Separator?: string
+}
 
+/**
+ * ModifySparkApp请求参数结构体
+ */
+export interface ModifySparkAppRequest {
   /**
-      * Parquet格式
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  Parquet: Other
+   * spark应用名
+   */
+  AppName: string
 
   /**
-      * ORC格式
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  ORC: Other
+   * 1代表spark jar应用，2代表spark streaming应用
+   */
+  AppType: number
 
   /**
-      * AVRO格式
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  AVRO: Other
-}
+   * 执行spark作业的数据引擎
+   */
+  DataEngine: string
 
-/**
- * CSV序列化及反序列化数据结构
- */
-export interface CSVSerde {
   /**
-   * CSV序列化转义符，默认为"\\"，最长8个字符，如 Escape: "/\"
+   * spark应用的执行入口
    */
-  Escape?: string
+  AppFile: string
 
   /**
-   * CSV序列化字段域符，默认为"'"，最长8个字符, 如 Quote: "\""
+   * 执行spark作业的角色ID
    */
-  Quote?: string
+  RoleArn: number
 
   /**
-   * CSV序列化分隔符，默认为"\t"，最长8个字符, 如 Separator: "\t"
+   * spark作业driver资源规格大小, 可取small,medium,large,xlarge
    */
-  Separator?: string
+  AppDriverSize: string
+
+  /**
+   * spark作业executor资源规格大小, 可取small,medium,large,xlarge
+   */
+  AppExecutorSize: string
+
+  /**
+   * spark作业executor个数
+   */
+  AppExecutorNums: number
+
+  /**
+   * spark应用Id
+   */
+  SparkAppId: string
+
+  /**
+   * 该字段已下线，请使用字段Datasource
+   */
+  Eni?: string
+
+  /**
+   * 是否本地上传，可取cos,lakefs
+   */
+  IsLocal?: string
+
+  /**
+   * spark jar作业时的主类
+   */
+  MainClass?: string
+
+  /**
+   * spark配置，以换行符分隔
+   */
+  AppConf?: string
+
+  /**
+   * 是否本地上传，可去cos,lakefs
+   */
+  IsLocalJars?: string
+
+  /**
+   * spark jar作业依赖jars，以逗号分隔
+   */
+  AppJars?: string
+
+  /**
+   * 是否本地上传，可去cos,lakefs
+   */
+  IsLocalFiles?: string
+
+  /**
+   * spark作业依赖资源，以逗号分隔
+   */
+  AppFiles?: string
+
+  /**
+   * spark作业命令行参数
+   */
+  CmdArgs?: string
+
+  /**
+   * 只对spark流任务生效
+   */
+  MaxRetries?: number
+
+  /**
+   * 数据源名
+   */
+  DataSource?: string
 }
 
 /**
@@ -522,44 +721,18 @@ task-kind - string （任务类型过滤）
 }
 
 /**
- * script实例。
+ * CreateSparkAppTask请求参数结构体
  */
-export interface Script {
+export interface CreateSparkAppTaskRequest {
   /**
-      * 脚本Id，长度36字节。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  ScriptId: string
-
-  /**
-      * 脚本名称，长度0-25。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  ScriptName: string
-
-  /**
-      * 脚本描述，长度0-50。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  ScriptDesc: string
-
-  /**
-      * 默认关联数据库。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  DatabaseName: string
-
-  /**
-      * SQL描述，长度0-10000。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  SQLStatement: string
+   * spark作业名
+   */
+  JobName: string
 
   /**
-      * 更新时间戳， 单位：ms。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  UpdateTime: number
+   * spark作业的命令行参数，以空格分隔；一般用于周期性调用使用
+   */
+  CmdArgs?: string
 }
 
 /**
@@ -628,6 +801,21 @@ export interface TableBaseInfo {
   TableFormat?: string
 }
 
+/**
+ * AttachUserPolicy请求参数结构体
+ */
+export interface AttachUserPolicyRequest {
+  /**
+   * 用户Id，和子用户uin相同，需要先使用CreateUser接口创建用户。可以使用DescribeUsers接口查看。
+   */
+  UserId: string
+
+  /**
+   * 鉴权策略集合
+   */
+  PolicySet?: Array<Policy>
+}
+
 /**
  * 批量顺序执行任务集合
  */
@@ -668,39 +856,79 @@ export interface AttachWorkGroupPolicyRequest {
   WorkGroupId: number
 
   /**
-   * 要绑定的策略集合
+   * 要绑定的策略集合
+   */
+  PolicySet?: Array<Policy>
+}
+
+/**
+ * CreateUser返回参数结构体
+ */
+export interface CreateUserResponse {
+  /**
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   */
+  RequestId?: string
+}
+
+/**
+ * DeleteUser返回参数结构体
+ */
+export interface DeleteUserResponse {
+  /**
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   */
+  RequestId?: string
+}
+
+/**
+ * CreateStoreLocation请求参数结构体
+ */
+export interface CreateStoreLocationRequest {
+  /**
+   * 计算结果存储cos路径，如：cosn://bucketname/
+   */
+  StoreLocation: string
+}
+
+/**
+ * DescribeSparkAppJobs请求参数结构体
+ */
+export interface DescribeSparkAppJobsRequest {
+  /**
+   * 返回结果按照该字段排序
+   */
+  SortBy?: string
+
+  /**
+   * 正序或者倒序，例如：desc
+   */
+  Sorting?: string
+
+  /**
+   * 按照该参数过滤
+   */
+  Filters?: Array<Filter>
+
+  /**
+   * 更新时间起始点
    */
-  PolicySet?: Array<Policy>
-}
+  StartTime?: string
 
-/**
- * CreateUser返回参数结构体
- */
-export interface CreateUserResponse {
   /**
-   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   * 更新时间截止点
    */
-  RequestId?: string
-}
+  EndTime?: string
 
-/**
- * DeleteUser返回参数结构体
- */
-export interface DeleteUserResponse {
   /**
-   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   * 查询列表偏移量
    */
-  RequestId?: string
-}
+  Offset?: number
 
-/**
- * CreateStoreLocation请求参数结构体
- */
-export interface CreateStoreLocationRequest {
   /**
-   * 计算结果存储cos路径，如：cosn://bucketname/
+   * 查询列表限制数量
    */
-  StoreLocation: string
+  Limit?: number
 }
 
 /**
@@ -767,18 +995,40 @@ export interface CreateTaskRequest {
 }
 
 /**
- * 数据库和数据表属性信息
+ * ModifySparkApp返回参数结构体
  */
-export interface Property {
+export interface ModifySparkAppResponse {
   /**
-   * 属性key名称。
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
    */
-  Key: string
+  RequestId?: string
+}
 
+/**
+ * CSV类型数据格式
+ */
+export interface CSV {
   /**
-   * 属性key对应的value。
+   * 压缩格式，["Snappy", "Gzip", "None"选一]。
    */
-  Value: string
+  CodeCompress?: string
+
+  /**
+   * CSV序列化及反序列化数据结构。
+   */
+  CSVSerde?: CSVSerde
+
+  /**
+      * 标题行，默认为0。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  HeadLines?: number
+
+  /**
+      * 格式，默认值为CSV
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  Format?: string
 }
 
 /**
@@ -878,6 +1128,27 @@ script-name-keyword - String - （过滤条件）数据表名称,形如：script
   Filters?: Array<Filter>
 }
 
+/**
+ * DescribeSparkAppJob返回参数结构体
+ */
+export interface DescribeSparkAppJobResponse {
+  /**
+      * spark作业详情
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  Job: SparkJobInfo
+
+  /**
+   * 查询的spark作业是否存在
+   */
+  IsExists: boolean
+
+  /**
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   */
+  RequestId?: string
+}
+
 /**
  * DeleteUsersFromWorkGroup返回参数结构体
  */
@@ -1057,18 +1328,98 @@ export interface ModifyWorkGroupResponse {
 }
 
 /**
- * AttachUserPolicy请求参数结构体
+ * ModifyUser请求参数结构体
  */
-export interface AttachUserPolicyRequest {
+export interface ModifyUserRequest {
   /**
-   * 用户Id，和子用户uin相同，需要先使用CreateUser接口创建用户。可以使用DescribeUsers接口查看。
+   * 用户Id，和CAM侧Uin匹配
    */
   UserId: string
 
   /**
-   * 鉴权策略集合
+   * 用户描述
    */
-  PolicySet?: Array<Policy>
+  UserDescription: string
+}
+
+/**
+ * spark流任务统计信息
+ */
+export interface StreamingStatistics {
+  /**
+   * 任务开始时间
+   */
+  StartTime: string
+
+  /**
+   * 数据接收器数
+   */
+  Receivers: number
+
+  /**
+   * 运行中的接收器数
+   */
+  NumActiveReceivers: number
+
+  /**
+   * 不活跃的接收器数
+   */
+  NumInactiveReceivers: number
+
+  /**
+   * 运行中的批数
+   */
+  NumActiveBatches: number
+
+  /**
+   * 待处理的批数
+   */
+  NumRetainedCompletedBatches: number
+
+  /**
+   * 已完成的批数
+   */
+  NumTotalCompletedBatches: number
+
+  /**
+   * 平均输入速率
+   */
+  AverageInputRate: number
+
+  /**
+   * 平均等待时长
+   */
+  AverageSchedulingDelay: number
+
+  /**
+   * 平均处理时长
+   */
+  AverageProcessingTime: number
+
+  /**
+   * 平均延时
+   */
+  AverageTotalDelay: number
+}
+
+/**
+ * CreateSparkAppTask返回参数结构体
+ */
+export interface CreateSparkAppTaskResponse {
+  /**
+   * 批Id
+   */
+  BatchId: string
+
+  /**
+   * 任务Id
+   */
+  TaskId: string
+
+  /**
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   */
+  RequestId?: string
 }
 
 /**
@@ -1303,6 +1654,47 @@ export interface DeleteScriptRequest {
   ScriptIds: Array<string>
 }
 
+/**
+ * script实例。
+ */
+export interface Script {
+  /**
+      * 脚本Id，长度36字节。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  ScriptId: string
+
+  /**
+      * 脚本名称，长度0-25。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  ScriptName: string
+
+  /**
+      * 脚本描述，长度0-50。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  ScriptDesc: string
+
+  /**
+      * 默认关联数据库。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  DatabaseName: string
+
+  /**
+      * SQL描述，长度0-10000。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  SQLStatement: string
+
+  /**
+      * 更新时间戳， 单位：ms。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  UpdateTime: number
+}
+
 /**
  * CreateImportTask返回参数结构体
  */
@@ -1343,6 +1735,54 @@ export interface CreateTableResponse {
   RequestId?: string
 }
 
+/**
+ * 工作组信息
+ */
+export interface WorkGroupInfo {
+  /**
+   * 查询到的工作组唯一Id
+   */
+  WorkGroupId: number
+
+  /**
+   * 工作组名称
+   */
+  WorkGroupName: string
+
+  /**
+      * 工作组描述
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  WorkGroupDescription: string
+
+  /**
+   * 工作组关联的用户数量
+   */
+  UserNum: number
+
+  /**
+      * 工作组关联的用户集合
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  UserSet: Array<UserMessage>
+
+  /**
+      * 工作组绑定的权限集合
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  PolicySet: Array<Policy>
+
+  /**
+   * 工作组的创建人
+   */
+  Creator: string
+
+  /**
+   * 工作组的创建时间，形如2021-07-28 16:19:32
+   */
+  CreateTime: string
+}
+
 /**
  * CreateScript请求参数结构体
  */
@@ -1913,51 +2353,24 @@ export interface DescribeTableRequest {
   TableName: string
 
   /**
-   * 查询表所在的数据库名称。
-   */
-  DatabaseName: string
-
-  /**
-   * 查询表所在的数据源名称
-   */
-  DatasourceConnectionName?: string
-}
-
-/**
- * 数据格式其它类型。
- */
-export interface Other {
-  /**
-   * 枚举类型，默认值为Json，可选值为[Json, Parquet, ORC, AVRD]之一。
-   */
-  Format: string
-}
-
-/**
- * CSV类型数据格式
- */
-export interface CSV {
-  /**
-   * 压缩格式，["Snappy", "Gzip", "None"选一]。
-   */
-  CodeCompress?: string
-
-  /**
-   * CSV序列化及反序列化数据结构。
+   * 查询表所在的数据库名称。
    */
-  CSVSerde?: CSVSerde
+  DatabaseName: string
 
   /**
-      * 标题行，默认为0。
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  HeadLines?: number
+   * 查询表所在的数据源名称
+   */
+  DatasourceConnectionName?: string
+}
 
+/**
+ * 数据格式其它类型。
+ */
+export interface Other {
   /**
-      * 格式，默认值为CSV
-注意：此字段可能返回 null，表示取不到有效值。
-      */
-  Format?: string
+   * 枚举类型，默认值为Json，可选值为[Json, Parquet, ORC, AVRD]之一。
+   */
+  Format: string
 }
 
 /**
@@ -2067,28 +2480,13 @@ export interface Policy {
 }
 
 /**
- * CreateTasks请求参数结构体
+ * CreateSparkApp返回参数结构体
  */
-export interface CreateTasksRequest {
-  /**
-   * 数据库名称。如果SQL语句中有数据库名称，优先使用SQL语句中的数据库，否则使用该参数指定的数据库（注：当提交建库sql时，该字段传空字符串）。
-   */
-  DatabaseName: string
-
-  /**
-   * SQL任务信息
-   */
-  Tasks: TasksInfo
-
-  /**
-   * 数据源名称，默认为DataLakeCatalog
-   */
-  DatasourceConnectionName?: string
-
+export interface CreateSparkAppResponse {
   /**
-   * 计算引擎名称，不填任务提交到默认集群
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
    */
-  DataEngineName?: string
+  RequestId?: string
 }
 
 /**
@@ -2108,38 +2506,38 @@ export interface CreateTaskResponse {
 }
 
 /**
- * DescribeWorkGroups请求参数结构体
+ * DeleteSparkApp返回参数结构体
  */
-export interface DescribeWorkGroupsRequest {
-  /**
-   * 查询的工作组Id，不填或填0表示不过滤。
-   */
-  WorkGroupId?: number
-
+export interface DeleteSparkAppResponse {
   /**
-   * 过滤条件，当前仅支持按照工作组名称进行模糊搜索。Key为workgroup-name
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
    */
-  Filters?: Array<Filter>
+  RequestId?: string
+}
 
+/**
+ * CreateTasks请求参数结构体
+ */
+export interface CreateTasksRequest {
   /**
-   * 偏移量，默认为0
+   * 数据库名称。如果SQL语句中有数据库名称，优先使用SQL语句中的数据库，否则使用该参数指定的数据库（注：当提交建库sql时，该字段传空字符串）。
    */
-  Offset?: number
+  DatabaseName: string
 
   /**
-   * 返回数量，默认20，最大值100
+   * SQL任务信息
    */
-  Limit?: number
+  Tasks: TasksInfo
 
   /**
-   * 排序字段，支持如下字段类型，create-time
+   * 数据源名称，默认为DataLakeCatalog
    */
-  SortBy?: string
+  DatasourceConnectionName?: string
 
   /**
-   * 排序方式，desc表示正序，asc表示反序， 默认为asc
+   * 计算引擎名称，不填任务提交到默认集群
    */
-  Sorting?: string
+  DataEngineName?: string
 }
 
 /**
@@ -2157,6 +2555,26 @@ export interface DescribeTableResponse {
   RequestId?: string
 }
 
+/**
+ * DescribeSparkAppJobs返回参数结构体
+ */
+export interface DescribeSparkAppJobsResponse {
+  /**
+   * spark作业列表详情
+   */
+  SparkAppJobs: Array<SparkJobInfo>
+
+  /**
+   * spark作业总数
+   */
+  TotalCount: number
+
+  /**
+   * 唯一请求 ID，每次请求都会返回。定位问题时需要提供该次请求的 RequestId。
+   */
+  RequestId?: string
+}
+
 /**
  * 查询表信息对象
  */
@@ -2241,6 +2659,41 @@ export interface DetachUserPolicyResponse {
   RequestId?: string
 }
 
+/**
+ * DescribeWorkGroups请求参数结构体
+ */
+export interface DescribeWorkGroupsRequest {
+  /**
+   * 查询的工作组Id，不填或填0表示不过滤。
+   */
+  WorkGroupId?: number
+
+  /**
+   * 过滤条件，当前仅支持按照工作组名称进行模糊搜索。Key为workgroup-name
+   */
+  Filters?: Array<Filter>
+
+  /**
+   * 偏移量，默认为0
+   */
+  Offset?: number
+
+  /**
+   * 返回数量，默认20，最大值100
+   */
+  Limit?: number
+
+  /**
+   * 排序字段，支持如下字段类型，create-time
+   */
+  SortBy?: string
+
+  /**
+   * 排序方式，desc表示正序，asc表示反序， 默认为asc
+   */
+  Sorting?: string
+}
+
 /**
  * CreateTasks返回参数结构体
  */
@@ -2261,6 +2714,106 @@ export interface CreateTasksResponse {
   RequestId?: string
 }
 
+/**
+ * CreateSparkApp请求参数结构体
+ */
+export interface CreateSparkAppRequest {
+  /**
+   * spark应用名
+   */
+  AppName: string
+
+  /**
+   * 1代表spark jar应用，2代表spark streaming应用
+   */
+  AppType: number
+
+  /**
+   * 执行spark作业的数据引擎
+   */
+  DataEngine: string
+
+  /**
+   * spark应用的执行入口
+   */
+  AppFile: string
+
+  /**
+   * 执行spark作业的角色ID
+   */
+  RoleArn: number
+
+  /**
+   * spark作业driver资源规格大小, 可取small,medium,large,xlarge
+   */
+  AppDriverSize: string
+
+  /**
+   * spark作业executor资源规格大小, 可取small,medium,large,xlarge
+   */
+  AppExecutorSize: string
+
+  /**
+   * spark作业executor个数
+   */
+  AppExecutorNums: number
+
+  /**
+   * 该字段已下线，请使用字段Datasource
+   */
+  Eni?: string
+
+  /**
+   * 是否本地上传，可去cos,lakefs
+   */
+  IsLocal?: string
+
+  /**
+   * spark jar作业时的主类
+   */
+  MainClass?: string
+
+  /**
+   * spark配置，以换行符分隔
+   */
+  AppConf?: string
+
+  /**
+   * 是否本地上传，包含cos,lakefs
+   */
+  IsLocalJars?: string
+
+  /**
+   * spark jar作业依赖jars，以逗号分隔
+   */
+  AppJars?: string
+
+  /**
+   * 是否本地上传，包含cos,lakefs
+   */
+  IsLocalFiles?: string
+
+  /**
+   * spark作业依赖资源，以逗号分隔
+   */
+  AppFiles?: string
+
+  /**
+   * spark作业命令行参数
+   */
+  CmdArgs?: string
+
+  /**
+   * 只对spark流任务生效
+   */
+  MaxRetries?: number
+
+  /**
+   * 数据源名
+   */
+  DataSource?: string
+}
+
 /**
  * UnbindWorkGroupsFromUser返回参数结构体
  */
@@ -2296,6 +2849,26 @@ export interface CreateWorkGroupRequest {
   UserIds?: Array<string>
 }
 
+/**
+ * DescribeSparkAppTasks请求参数结构体
+ */
+export interface DescribeSparkAppTasksRequest {
+  /**
+   * spark作业Id
+   */
+  JobId: string
+
+  /**
+   * 分页查询偏移量
+   */
+  Offset?: number
+
+  /**
+   * 分页查询Limit
+   */
+  Limit?: number
+}
+
 /**
  *  SQL查询任务
  */
@@ -2342,6 +2915,21 @@ export interface UserMessage {
   UserAlias: string
 }
 
+/**
+ * 数据库和数据表属性信息
+ */
+export interface Property {
+  /**
+   * 属性key名称。
+   */
+  Key: string
+
+  /**
+   * 属性key对应的value。
+   */
+  Value: string
+}
+
 /**
  * AttachUserPolicy返回参数结构体
  */
@@ -2388,18 +2976,44 @@ export interface DescribeViewsResponse {
 }
 
 /**
- * ModifyUser请求参数结构体
+ * 数据表数据格式。
  */
-export interface ModifyUserRequest {
+export interface DataFormat {
   /**
-   * 用户Id，和CAM侧Uin匹配
-   */
-  UserId: string
+      * 文本格式，TextFile。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  TextFile: TextFile
 
   /**
-   * 用户描述
-   */
-  UserDescription: string
+      * 文本格式，CSV。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  CSV: CSV
+
+  /**
+      * 文本格式，Json。
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  Json: Other
+
+  /**
+      * Parquet格式
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  Parquet: Other
+
+  /**
+      * ORC格式
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  ORC: Other
+
+  /**
+      * AVRO格式
+注意：此字段可能返回 null，表示取不到有效值。
+      */
+  AVRO: Other
 }
 
 /**