@ray-js/t-agent-plugin-aistream 0.2.8-beta.3 → 0.2.8-beta.5

package/dist/buildIn/withBuildIn.d.ts

@@ -1,6 +1,15 @@
 import { ChatAgent } from '@ray-js/t-agent';
 interface WithBuildInOptions {
+    /** 是否开启 TTS 自动播放，默认 false */
     audioAutoPlay?: boolean;
+    /** 是否开启智能家居技能（设备控制、场景管理），默认 true */
+    smartHome?: boolean;
+    /** 是否开启知识库关联文档展示，默认 true */
+    documents?: boolean;
+    /** 是否开启图片附件展示，默认 true */
+    image?: boolean;
+    /** 是否开启 TTS 语音播放能力，默认 true */
+    audio?: boolean;
 }
 export declare function withBuildIn(options?: WithBuildInOptions): (_agent: ChatAgent) => {};
 export {};

package/dist/buildIn/withBuildIn.js

@@ -33,9 +33,38 @@ export function withBuildIn(options) {
     });
 
     // 关联文档
-
-    // 关联智能家居卡片
-    (() => {
+    const enableDocuments = () => {
+      onSkillsEnd((skills, responseMessage) => {
+        if (!responseMessage) {
+          return;
+        }
+        const data = {
+          documents: []
+        };
+        for (let i = 0; i < skills.length; i++) {
+          var _content$custom;
+          const skill = skills[i];
+          if (skill.code !== BuildInSkillCode.SEARCH_KNOWLEDGE) {
+            continue;
+          }
+          const content = skill;
+          if (!((_content$custom = content.custom) !== null && _content$custom !== void 0 && (_content$custom = _content$custom.data) !== null && _content$custom !== void 0 && _content$custom.documents)) {
+            continue;
+          }
+          for (let i1 = 0; i1 < content.custom.data.documents.length; i1++) {
+            const doc = content.custom.data.documents[i1];
+            data.documents.push({
+              title: doc.title,
+              url: doc.url
+            });
+          }
+        }
+        if (data.documents.length) {
+          responseMessage.bubble.addTile('documents', data);
+        }
+      });
+    };
+    const enableSmartHome = () => {
       onSkillsEnd((skills, responseMessage) => {
         if (!responseMessage) {
           return;
@@ -117,41 +146,8 @@ export function withBuildIn(options) {
           responseMessage.bubble.addTile('operateCard', operateData);
         }
       });
-    })();
-    // 最后是关联文档
-    (() => {
-      onSkillsEnd((skills, responseMessage) => {
-        if (!responseMessage) {
-          return;
-        }
-        const data = {
-          documents: []
-        };
-        for (let i = 0; i < skills.length; i++) {
-          var _content$custom;
-          const skill = skills[i];
-          if (skill.code !== BuildInSkillCode.SEARCH_KNOWLEDGE) {
-            continue;
-          }
-          const content = skill;
-          if (!((_content$custom = content.custom) !== null && _content$custom !== void 0 && (_content$custom = _content$custom.data) !== null && _content$custom !== void 0 && _content$custom.documents)) {
-            continue;
-          }
-          for (let i1 = 0; i1 < content.custom.data.documents.length; i1++) {
-            const doc = content.custom.data.documents[i1];
-            data.documents.push({
-              title: doc.title,
-              url: doc.url
-            });
-          }
-        }
-        if (data.documents.length) {
-          responseMessage.bubble.addTile('documents', data);
-        }
-      });
-    })();
-    // 图片
-    (() => {
+    };
+    const enableImage = () => {
       onAttachmentsEnd((parts, respMsg) => {
         const streamSession = session.get('AIStream.streamSession');
         const prefix = streamSession.baseCacheDir;
@@ -166,9 +162,8 @@ export function withBuildIn(options) {
           }
         });
       });
-    })();
-    // 语音
-    (() => {
+    };
+    const enableAudio = () => {
       // 当前正在播放的消息 id 保存在 session 中，保证同一时刻只播一条；
       // 组件里的 playing 状态从 session 的 audioPlaying / playingMessageId 派生。
       // playing 是纯运行时状态，不落到 tile.data（避免被持久化）。
@@ -216,52 +211,39 @@ export function withBuildIn(options) {
       // 音频包结束时，往气泡里插入一个语音播放按钮（BubbleToolTile）。
       // 只持久化播放所需的音频参数，不含 playing 状态。
       //
-      // 注意：音频按流式分多包下发，格式头（codecType/sampleRate/channels/bitDepth）
-      // 只在 START 包里携带，END 包通常只带最终的 path/pts。因此不能只取 END 包，
-      // 需要按音频流 id（part.id 在同一段音频的所有分包间一致）聚合，
-      // 把 START 包的格式参数与 END 包的 path 合并后再建 tile，
-      // 否则持久化后点击播放时格式参数会全部丢失，只剩 path。
+      // 注意：音频按流式分多包下发，播放所需的完整参数（path + 格式头
+      // codecType/sampleRate/channels/bitDepth）只在首包（START/ONLY_ONE）携带；
+      // 后续 END 等包里这些字段是 0（而非 null/undefined），会污染数据。
+      // 因此只取每段音频的首包，丢弃后续包，按音频流 id（part.id 在同一段音频的
+      // 所有分包间一致）去重。
       onAttachmentsEnd((parts, respMsg) => {
         const audioMap = new Map();
         parts.forEach(i => {
-          var _audio$path, _audio$pts, _audio$codecType, _audio$sampleRate, _audio$channels, _audio$bitDepth;
           if (i.attachmentType !== 'audio') {
             return;
           }
           const audio = i.attachment;
-          const entry = audioMap.get(i.id) || {
-            audio: {},
-            complete: false
-          };
 
-          // 合并各分包：后到的非空字段覆盖，空字段保留先前值（END 包不会用 undefined 覆盖掉格式参数）
-          entry.audio = {
-            path: (_audio$path = audio.path) !== null && _audio$path !== void 0 ? _audio$path : entry.audio.path,
-            pts: (_audio$pts = audio.pts) !== null && _audio$pts !== void 0 ? _audio$pts : entry.audio.pts,
-            codecType: (_audio$codecType = audio.codecType) !== null && _audio$codecType !== void 0 ? _audio$codecType : entry.audio.codecType,
-            sampleRate: (_audio$sampleRate = audio.sampleRate) !== null && _audio$sampleRate !== void 0 ? _audio$sampleRate : entry.audio.sampleRate,
-            channels: (_audio$channels = audio.channels) !== null && _audio$channels !== void 0 ? _audio$channels : entry.audio.channels,
-            bitDepth: (_audio$bitDepth = audio.bitDepth) !== null && _audio$bitDepth !== void 0 ? _audio$bitDepth : entry.audio.bitDepth
-          };
-          if (audio.streamFlag === StreamFlag.ONLY_ONE || audio.streamFlag === StreamFlag.END) {
-            entry.complete = true;
-            // END 包的 path 是最终完整文件，确保覆盖
-            if (audio.path) {
-              entry.audio.path = audio.path;
-            }
+          // 只接收首包，后续包直接丢弃
+          if (audio.streamFlag !== StreamFlag.START && audio.streamFlag !== StreamFlag.ONLY_ONE) {
+            return;
           }
-          audioMap.set(i.id, entry);
-        });
-        audioMap.forEach(_ref => {
-          let {
-            audio,
-            complete
-          } = _ref;
-          if (complete) {
-            respMsg.bubble.addTile('bubbleTool', {
-              audio
-            });
+          if (audioMap.has(i.id)) {
+            return;
           }
+          audioMap.set(i.id, {
+            path: audio.path,
+            pts: audio.pts,
+            codecType: audio.codecType,
+            sampleRate: audio.sampleRate,
+            channels: audio.channels,
+            bitDepth: audio.bitDepth
+          });
+        });
+        audioMap.forEach(audio => {
+          respMsg.bubble.addTile('bubbleTool', {
+            audio
+          });
         });
       });
 
@@ -291,7 +273,25 @@ export function withBuildIn(options) {
           await setPlayingMessage(messageId);
         }
       });
-    })();
+    };
+
+    // 各功能默认开启，不传选项保持兼容；显式传 false 才关闭
+    // 关联智能家居卡片
+    if ((options === null || options === void 0 ? void 0 : options.smartHome) !== false) {
+      enableSmartHome();
+    }
+    // 关联文档
+    if ((options === null || options === void 0 ? void 0 : options.documents) !== false) {
+      enableDocuments();
+    }
+    // 图片
+    if ((options === null || options === void 0 ? void 0 : options.image) !== false) {
+      enableImage();
+    }
+    // 语音
+    if ((options === null || options === void 0 ? void 0 : options.audio) !== false) {
+      enableAudio();
+    }
     return {};
   };
 }

package/package.json

@@ -1,6 +1,6 @@
 {
   "name": "@ray-js/t-agent-plugin-aistream",
-  "version": "0.2.8-beta.3",
+  "version": "0.2.8-beta.5",
   "author": "Tuya.inc",
   "license": "MIT",
   "private": false,
@@ -36,5 +36,5 @@
   "devDependencies": {
     "@types/url-parse": "^1.4.11"
   },
-  "gitHead": "938bc0c7da7d23dbbad8c3c14c97e5f4007f06f7"
+  "gitHead": "433a3716af02d01c19f670855e62000fcae37d34"
 }