cmdbox 0.6.4.1__py3-none-any.whl → 0.6.5__py3-none-any.whl

cmdbox/app/features/cli/_cmdbox_vision_start.py

@@ -0,0 +1,234 @@
+from cmdbox import version
+from cmdbox.app import common, client, feature
+from cmdbox.app.commons import convert, redis_client
+from cmdbox.app.options import Options
+from pathlib import Path
+from typing import Dict, Any, Tuple, List, Union
+import argparse
+import logging
+
+
+class VisionStart(feature.UnsupportEdgeFeature):
+    VISION_MODEL = dict()
+    VISION_MODEL['092824/sam2.1_hiera_tiny'] = dict(type='sam2',
+                                                    path='092824/sam2.1_hiera_tiny.pt',
+                                                    conf='configs/sam2.1/sam2.1_hiera_t.yaml',
+                                                    url='https://dl.fbaipublicfiles.com/segment_anything_2/092824/sam2.1_hiera_tiny.pt')
+    VISION_MODEL['092824/sam2.1_hiera_small'] = dict(type='sam2',
+                                                     path='092824/sam2.1_hiera_small.pt',
+                                                     conf='configs/sam2.1/sam2.1_hiera_s.yaml',
+                                                     url='https://dl.fbaipublicfiles.com/segment_anything_2/092824/sam2.1_hiera_small.pt')
+    VISION_MODEL['092824/sam2.1_hiera_base_plus'] = dict(type='sam2',
+                                                         path='092824/sam2.1_hiera_base_plus.pt',
+                                                         conf='configs/sam2.1/sam2.1_hiera_b+.yaml',
+                                                         url='https://dl.fbaipublicfiles.com/segment_anything_2/092824/sam2.1_hiera_base_plus.pt')
+    VISION_MODEL['092824/sam2.1_hiera_large'] = dict(type='sam2',
+                                                     path='092824/sam2.1_hiera_large.pt',
+                                                     conf='configs/sam2.1/sam2.1_hiera_l.yaml',
+                                                     url='https://dl.fbaipublicfiles.com/segment_anything_2/092824/sam2.1_hiera_large.pt')
+
+    def get_mode(self) -> Union[str, List[str]]:
+        """
+        この機能のモードを返します
+
+        Returns:
+            Union[str, List[str]]: モード
+        """
+        return 'vision'
+
+    def get_cmd(self):
+        """
+        この機能のコマンドを返します
+
+        Returns:
+            str: コマンド
+        """
+        return 'start'
+    
+    def get_option(self):
+        """
+        この機能のオプションを返します
+
+        Returns:
+            Dict[str, Any]: オプション
+        """
+        return dict(
+            use_redis=self.USE_REDIS_MEIGHT, nouse_webmode=False, use_agent=True,
+            description_ja="画像/動画の推論を開始します。",
+            description_en="Starts inference on images/videos.",
+            choice=[
+                dict(opt="host", type=Options.T_STR, default=self.default_host, required=True, multi=False, hide=True, choice=None, web="mask",
+                     description_ja="Redisサーバーのサービスホストを指定します。",
+                     description_en="Specify the service host of the Redis server."),
+                dict(opt="port", type=Options.T_INT, default=self.default_port, required=True, multi=False, hide=True, choice=None, web="mask",
+                     description_ja="Redisサーバーのサービスポートを指定します。",
+                     description_en="Specify the service port of the Redis server."),
+                dict(opt="password", type=Options.T_STR, default=self.default_pass, required=True, multi=False, hide=True, choice=None, web="mask",
+                     description_ja=f"Redisサーバーのアクセスパスワード(任意)を指定します。省略時は `{self.default_pass}` を使用します。",
+                     description_en=f"Specify the access password of the Redis server (optional). If omitted, `{self.default_pass}` is used."),
+                dict(opt="svname", type=Options.T_STR, default=self.default_svname, required=True, multi=False, hide=True, choice=None, web="readonly",
+                     description_ja="サーバーのサービス名を指定します。省略時は `server` を使用します。",
+                     description_en="Specify the service name of the inference server. If omitted, `server` is used."),
+                dict(opt="retry_count", type=Options.T_INT, default=3, required=False, multi=False, hide=True, choice=None,
+                     description_ja="Redisサーバーへの再接続回数を指定します。0以下を指定すると永遠に再接続を行います。",
+                     description_en="Specifies the number of reconnections to the Redis server.If less than 0 is specified, reconnection is forever."),
+                dict(opt="retry_interval", type=Options.T_INT, default=5, required=False, multi=False, hide=True, choice=None,
+                     description_ja="Redisサーバーに再接続までの秒数を指定します。",
+                     description_en="Specifies the number of seconds before reconnecting to the Redis server."),
+                dict(opt="timeout", type=Options.T_INT, default="60", required=False, multi=False, hide=True, choice=None,
+                     description_ja="サーバーの応答が返ってくるまでの最大待ち時間を指定。",
+                     description_en="Specify the maximum waiting time until the server responds."),
+                dict(opt="vision_engine", type=Options.T_STR, default="sam2", required=True, multi=False, hide=False,
+                     choice=["sam2"],
+                     choice_show=dict(sam2=["sam2_model"]),
+                     description_ja="使用するVisionエンジンを指定します。",
+                     description_en="Specify the Vision engine to use."),
+                dict(opt="sam2_model", type=Options.T_STR, default="092824/sam2.1_hiera_tiny.pt", required=True, multi=False, hide=False,
+                     choice=[k for k in self.VISION_MODEL.keys() if self.VISION_MODEL[k]['type'] == 'sam2'],
+                     choice_edit=True,
+                     description_ja="使用するSAM2モデルを指定します。",
+                     description_en="Specify the SAM2 model to use."),
+            ]
+        )
+
+    def get_svcmd(self):
+        """
+        この機能のサーバー側のコマンドを返します
+
+        Returns:
+            str: サーバー側のコマンド
+        """
+        return 'vision_start'
+
+    def apprun(self, logger:logging.Logger, args:argparse.Namespace, tm:float, pf:List[Dict[str, float]]=[]) -> Tuple[int, Dict[str, Any], Any]:
+        """
+        この機能の実行を行います
+
+        Args:
+            logger (logging.Logger): ロガー
+            args (argparse.Namespace): 引数
+            tm (float): 実行開始時間
+            pf (List[Dict[str, float]]): 呼出元のパフォーマンス情報
+
+        Returns:
+            Tuple[int, Dict[str, Any], Any]: 終了コード, 結果, オブジェクト
+        """
+        if args.vision_engine is None:
+            msg = dict(warn=f"Please specify the --vision_engine option.")
+            common.print_format(msg, False, tm, args.output_json, args.output_json_append, pf=pf)
+            return self.RESP_WARN, msg, None
+        if args.vision_engine == 'sam2':
+            if args.sam2_model is None:
+                msg = dict(warn=f"Please specify the --sam2_model option.")
+                common.print_format(msg, False, tm, args.output_json, args.output_json_append, pf=pf)
+                return self.RESP_WARN, msg, None
+
+            vision_engine_b64 = convert.str2b64str(args.vision_engine)
+            sam2_model_b64 = convert.str2b64str(args.sam2_model)
+            cl = client.Client(logger, redis_host=args.host, redis_port=args.port, redis_password=args.password, svname=args.svname)
+            ret = cl.redis_cli.send_cmd(self.get_svcmd(),
+                                        [vision_engine_b64, sam2_model_b64],
+                                        retry_count=args.retry_count, retry_interval=args.retry_interval, timeout=args.timeout, nowait=False)
+            common.print_format(ret, False, tm, None, False, pf=pf)
+            if 'success' not in ret:
+                    return self.RESP_WARN, ret, cl
+            return self.RESP_SUCCESS, ret, cl
+
+        msg = dict(warn=f"Unsupported vision engine: {args.vision_engine}")
+        common.print_format(msg, False, tm, args.output_json, args.output_json_append, pf=pf)
+        return self.RESP_WARN, msg, None
+
+    def is_cluster_redirect(self):
+        """
+        クラスター宛のメッセージの場合、メッセージを転送するかどうかを返します
+
+        Returns:
+            bool: メッセージを転送する場合はTrue
+        """
+        return True
+
+    def svrun(self, data_dir:Path, logger:logging.Logger, redis_cli:redis_client.RedisClient, msg:List[str],
+              sessions:Dict[str, Dict[str, Any]]) -> int:
+        """
+        この機能のサーバー側の実行を行います
+
+        Args:
+            data_dir (Path): データディレクトリ
+            logger (logging.Logger): ロガー
+            redis_cli (redis_client.RedisClient): Redisクライアント
+            msg (List[str]): 受信メッセージ
+            sessions (Dict[str, Dict[str, Any]]): セッション情報
+        
+        Returns:
+            int: 終了コード
+        """
+        if logger.level == logging.DEBUG:
+            logger.debug(f"audit write svrun msg: {msg}")
+        vision_engine = convert.b64str2str(msg[2])
+        sam2_model = convert.b64str2str(msg[3])
+        st = self.start(msg[1], vision_engine, sam2_model, data_dir, logger, redis_cli, sessions)
+        return st
+
+    def start(self, reskey:str, vision_engine:str, sam2_model:str, data_dir:Path, logger:logging.Logger,
+              redis_cli:redis_client.RedisClient, sessions:Dict[str, Dict[str, Any]]) -> int:
+        """
+        SAM2のモデルを開始します
+
+        Args:
+            reskey (str): レスポンスキー
+            vision_engine (str): Visionエンジン
+            sam2_model (str): SAM2モデル
+            data_dir (Path): データディレクトリ
+            logger (logging.Logger): ロガー
+            redis_cli (redis_client.RedisClient): Redisクライアント
+            sessions (Dict[str, Dict[str, Any]]): セッション情報
+
+        Returns:
+            int: レスポンスコード
+        """
+        try:
+            if 'vision' not in sessions:
+                sessions['vision'] = {}
+            if vision_engine == 'sam2':
+                #===============================================================
+                # SAM2モデルの初期化
+                from sam2.build_sam import build_sam2
+                from sam2.sam2_image_predictor import SAM2ImagePredictor
+                #from sam2.sam2_video_predictor import SAM2VideoPredictor
+                import torch
+
+                sam2_dir = Path(version.__file__).parent / '.sam2' / 'model'
+                if not sam2_dir.exists():
+                    logger.error(f"Failed to start SAM2 model: sam2 directory does not exist: {sam2_dir}")
+                    redis_cli.rpush(reskey, dict(warn=f"Failed to start SAM2 model: sam2 directory does not exist: {sam2_dir}"))
+                    return self.RESP_WARN
+
+                model_file = sam2_dir / self.VISION_MODEL[sam2_model]['path']
+                config_file = self.VISION_MODEL[sam2_model]['conf']
+                if not model_file.exists():
+                    logger.error(f"Failed to start SAM2 model: model file does not exist: {model_file}")
+                    redis_cli.rpush(reskey, dict(warn=f"Failed to start SAM2 model: model file does not exist: {model_file}"))
+                    return self.RESP_WARN
+
+                device = 'cuda' if torch.cuda.is_available() else 'cpu'
+                # vvmファイルの読込み
+                predictor = SAM2ImagePredictor(build_sam2(config_file, model_file, device=device))
+                if vision_engine not in sessions['vision']:
+                    sessions['vision'][vision_engine] = {}
+                sessions['vision'][vision_engine][sam2_model] = dict(
+                    info=self.VISION_MODEL[sam2_model].copy(),
+                    predictor=predictor,
+                )
+                #===============================================================
+                # 成功時の処理
+                rescode, msg = (self.RESP_SUCCESS, dict(success=f'Success to start SAM2. Model: {sam2_model}'))
+                redis_cli.rpush(reskey, msg)
+                return rescode
+            else:
+                logger.warning(f"Unsupported vision engine: {vision_engine}")
+                redis_cli.rpush(reskey, dict(warn=f"Unsupported vision engine: {vision_engine}"))
+                return self.RESP_WARN
+        except Exception as e:
+            logger.warning(f"Failed to start: {e}", exc_info=True)
+            redis_cli.rpush(reskey, dict(warn=f"Failed to start: {e}"))
+            return self.RESP_WARN

cmdbox/app/features/cli/cmdbox_cmd_list.py

@@ -45,9 +45,9 @@ class CmdList(feature.OneshotResultEdgeFeature):
                 dict(opt="kwd", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja=f"検索したいコマンド名を指定します。中間マッチで検索します。",
                      description_en=f"Specify the name of the command you want to search. Search with intermediate matches."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=False, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。",
-                     description_en="Specify a file containing users and passwords with which they can signin."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=False, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="groups", type=Options.T_STR, default=None, required=False, multi=True, hide=False, choice=None,
                      description_ja="`signin_file` を指定した場合に、このユーザーグループに許可されているコマンドリストを返すように指定します。",
                      description_en="Specifies that `signin_file`, if specified, should return the list of commands allowed for this user group."),

cmdbox/app/features/cli/cmdbox_cmd_load.py

@@ -45,9 +45,9 @@ class CmdLoad(feature.OneshotResultEdgeFeature):
                 dict(opt="title", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja=f"読込みたいコマンド名を指定します。",
                      description_en=f"Specify the name of the command to be read."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=False, multi=False, hide=True, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。",
-                     description_en="Specify a file containing users and passwords with which they can signin."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=False, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="groups", type=Options.T_STR, default=None, required=False, multi=True, hide=True, choice=None,
                      description_ja="`signin_file` を指定した場合に、このユーザーグループに許可されているコマンドリストを返すように指定します。",
                      description_en="Specifies that `signin_file`, if specified, should return the list of commands allowed for this user group."),

cmdbox/app/features/cli/cmdbox_tts_install.py

@@ -254,8 +254,9 @@ class TtsInstall(feature.UnsupportEdgeFeature):
                     _msg = f"Failed to download VoiceVox core: {responce.status_code} {responce.reason}. {downloader_url}"
                     logger.error(_msg, exc_info=True)
                     return dict(warn=_msg)
-                with open(dlfile, mode='wb') as f:
+                def _wd(f):
                     f.write(responce.content)
+                common.save_file(dlfile, _wd, mode='wb')
                 # ダウンローダーの実行権限を付与
                 if voicevox_os != 'windows':
                     dlfile.chmod(dlfile.stat().st_mode | 0o111)
@@ -296,8 +297,9 @@ class TtsInstall(feature.UnsupportEdgeFeature):
                     _msg = f"Failed to download VoiceVox whl: {responce.status_code} {responce.reason}. {whl_url}"
                     logger.error(_msg, exc_info=True)
                     return dict(warn=_msg)
-                with open(voicevox_whl, mode='wb') as f:
+                def _ww(f):
                     f.write(responce.content)
+                common.save_file(voicevox_whl, _ww, mode='wb')
                 # whlファイルをpipでインストール
                 if logger.level == logging.DEBUG:
                     logger.debug(f"pip install {voicevox_whl}")

cmdbox/app/features/cli/cmdbox_tts_say.py

@@ -81,8 +81,9 @@ class TtsSay(cmdbox_tts_start.TtsStart):
             if 'success' in ret and 'data' in ret['success']:
                 wav_b64 = ret['success']['data']
                 wav_data = convert.b64str2bytes(wav_b64)
-                with open(args.tts_output, 'wb') as f:
+                def _w(f):
                     f.write(wav_data)
+                common.save_file(args.tts_output, _w, mode='wb')
                 del ret['success']['data'] # 音声データは削除
         common.print_format(ret, False, tm, None, False, pf=pf)
         if 'success' not in ret:

cmdbox/app/features/cli/cmdbox_web_apikey_add.py

@@ -43,9 +43,9 @@ class WebApikeyAdd(feature.UnsupportEdgeFeature):
                 dict(opt="apikey_name", type=Options.T_STR, default=None, required=True, multi=False, hide=False, choice=None,
                      description_ja="このユーザーのApiKey名を指定します。",
                      description_en="Specify the ApiKey name for this user."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_apikey_del.py

@@ -43,9 +43,9 @@ class WebApikeyDel(feature.UnsupportEdgeFeature):
                 dict(opt="apikey_name", type=Options.T_STR, default=None, required=True, multi=False, hide=False, choice=None,
                      description_ja="このユーザーのApiKey名を指定します。",
                      description_en="Specify the ApiKey name for this user."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=False, multi=False, hide=True, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_group_add.py

@@ -46,9 +46,9 @@ class WebGroupAdd(feature.UnsupportEdgeFeature):
                 dict(opt="group_parent", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja="親グループ名を指定します。",
                      description_en="Specifies the parent group name."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_group_del.py

@@ -40,9 +40,9 @@ class WebGroupDel(feature.UnsupportEdgeFeature):
                 dict(opt="group_id", type=Options.T_INT, default=None, required=True, multi=False, hide=False, choice=None,
                      description_ja="グループIDを指定します。",
                      description_en="Specify the group ID. Do not duplicate other groups."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_group_edit.py

@@ -46,9 +46,9 @@ class WebGroupEdit(feature.UnsupportEdgeFeature):
                 dict(opt="group_parent", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja="親グループ名を指定します。",
                      description_en="Specifies the parent group name."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_group_list.py

@@ -40,9 +40,9 @@ class WebGroupList(feature.UnsupportEdgeFeature):
                 dict(opt="group_name", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja="グループ名を指定して取得します。省略した時は全てのグループを取得します。",
                      description_en="Retrieved by specifying a group name. If omitted, all groups are retrieved."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_start.py

@@ -78,9 +78,9 @@ class WebStart(feature.UnsupportEdgeFeature, agent_base.AgentBase):
             dict(opt="ssl_ca_certs", type=Options.T_FILE, default=None, required=False, multi=False, hide=True, choice=None, fileio="in",
                     description_ja="SSLサーバーCA証明書ファイルを指定します。",
                     description_en="Specify the SSL server CA certificate file."),
-            dict(opt="signin_file", type=Options.T_FILE, default=None, required=False, multi=False, hide=True, choice=None, fileio="in",
-                    description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                    description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+            dict(opt="signin_file", type=Options.T_FILE, default=None, required=False, multi=False, hide=False, choice=None, fileio="in",
+                    description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                    description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
             dict(opt="session_domain", type=Options.T_STR, default=None, required=False, multi=False, hide=True, choice=None,
                     description_ja="サインインしたユーザーのセッションが有効なドメインを指定します。",
                     description_en="Specify the domain for which the signed-in user's session is valid."),
@@ -93,12 +93,12 @@ class WebStart(feature.UnsupportEdgeFeature, agent_base.AgentBase):
             dict(opt="session_timeout", type=Options.T_INT, default="900", required=False, multi=False, hide=True, choice=None,
                     description_ja="サインインしたユーザーのセッションタイムアウトの時間を秒で指定します。",
                     description_en="Specify the session timeout in seconds for signed-in users."),
-            dict(opt="guvicorn_workers", type=Options.T_INT, default=multiprocessing.cpu_count()*2, required=False, multi=False, hide=True, choice=None,
-                    description_ja="guvicornワーカー数を指定します。Linux環境でのみ有効です。-1又は未指定の場合はCPU数の2倍を使用します。",
-                    description_en="Specifies the number of guvicorn workers, valid only in Linux environment. If -1 or unspecified, twice the number of CPUs is used."),
-            dict(opt="guvicorn_timeout", type=Options.T_INT, default=30, required=False, multi=False, hide=True, choice=None,
-                    description_ja="guvicornワーカーのタイムアウトの時間を秒で指定します。",
-                    description_en="Specify the timeout duration of the guvicorn worker in seconds."),
+            dict(opt="gunicorn_workers", type=Options.T_INT, default=multiprocessing.cpu_count()*2, required=False, multi=False, hide=True, choice=None,
+                    description_ja="gunicornワーカー数を指定します。Linux環境でのみ有効です。-1又は未指定の場合はCPU数の2倍を使用します。",
+                    description_en="Specifies the number of gunicorn workers, valid only in Linux environment. If -1 or unspecified, twice the number of CPUs is used."),
+            dict(opt="gunicorn_timeout", type=Options.T_INT, default=30, required=False, multi=False, hide=True, choice=None,
+                    description_ja="gunicornワーカーのタイムアウトの時間を秒で指定します。",
+                    description_en="Specify the timeout duration of the gunicorn worker in seconds."),
             dict(opt="client_only", type=Options.T_BOOL, default=False, required=False, multi=False, hide=True, choice=[True, False],
                     description_ja="サーバーへの接続を行わないようにします。",
                     description_en="Do not make connections to the server."),
@@ -232,5 +232,5 @@ class WebStart(feature.UnsupportEdgeFeature, agent_base.AgentBase):
                 ssl_cert=args.ssl_cert, ssl_key=args.ssl_key, ssl_keypass=args.ssl_keypass, ssl_ca_certs=args.ssl_ca_certs,
                 session_domain=args.session_domain, session_path=args.session_path,
                 session_secure=args.session_secure, session_timeout=args.session_timeout,
-                outputs_key=args.outputs_key, guvicorn_workers=args.guvicorn_workers, guvicorn_timeout=args.guvicorn_timeout,
+                outputs_key=args.outputs_key, gunicorn_workers=args.gunicorn_workers, gunicorn_timeout=args.gunicorn_timeout,
                 agent_runner=agent_runner, mcp=mcp,)

cmdbox/app/features/cli/cmdbox_web_user_add.py

@@ -55,9 +55,9 @@ class WebUserAdd(feature.UnsupportEdgeFeature):
                 dict(opt="user_group", type=Options.T_STR, default=None, required=True, multi=True, hide=False, choice=None,
                      description_ja="ユーザーが所属するグループを指定します。",
                      description_en="Specifies the groups to which the user belongs."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_user_del.py

@@ -40,9 +40,9 @@ class WebUserDel(feature.UnsupportEdgeFeature):
                 dict(opt="user_id", type=Options.T_INT, default=None, required=True, multi=False, hide=False, choice=None,
                      description_ja="ユーザーIDを指定します。",
                      description_en="Specify the user ID."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_user_edit.py

@@ -55,9 +55,9 @@ class WebUserEdit(feature.UnsupportEdgeFeature):
                 dict(opt="user_group", type=Options.T_STR, default=None, required=True, multi=True, hide=False, choice=None,
                      description_ja="ユーザーが所属するグループを指定します。",
                      description_en="Specifies the groups to which the user belongs."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/cli/cmdbox_web_user_list.py

@@ -40,9 +40,9 @@ class WebUserList(feature.UnsupportEdgeFeature):
                 dict(opt="user_name", type=Options.T_STR, default=None, required=False, multi=False, hide=False, choice=None,
                      description_ja="ユーザー名を指定して取得します。省略した時は全てのユーザーを取得します。",
                      description_en="Retrieved by specifying a user name. If omitted, all users are retrieved."),
-                dict(opt="signin_file", type=Options.T_FILE, default=f".{self.ver.__appid__}/user_list.yml", required=True, multi=False, hide=False, choice=None, fileio="in",
-                     description_ja="サインイン可能なユーザーとパスワードを記載したファイルを指定します。省略した時は認証を要求しません。",
-                     description_en="Specify a file containing users and passwords with which they can signin. If omitted, no authentication is required."),
+                dict(opt="signin_file", type=Options.T_FILE, default=None, required=True, multi=False, hide=False, choice=None, fileio="in",
+                     description_ja=f"サインイン可能なユーザーとパスワードを記載したファイルを指定します。通常 '.{self.ver.__appid__}/user_list.yml' を指定します。",
+                     description_en=f"Specify a file containing users and passwords with which they can signin.Typically, specify '.{self.ver.__appid__}/user_list.yml'."),
                 dict(opt="stdout_log", type=Options.T_BOOL, default=True, required=False, multi=False, hide=True, choice=[True, False],
                      description_ja="GUIモードでのみ使用可能です。コマンド実行時の標準出力をConsole logに出力します。",
                      description_en="Available only in GUI mode. Outputs standard output during command execution to Console log."),

cmdbox/app/features/web/cmdbox_web_exec_cmd.py

@@ -34,16 +34,14 @@ class ExecCmd(cmdbox_web_load_cmd.LoadCmd):
                     raise HTTPException(status_code=401, detail=self.DEFAULT_401_MESSAGE)
                 opt = None
                 content_type = req.headers.get('content-type')
-                def _marge_opt(opt, param):
-                    for k in opt.keys():
-                        if k in param: opt[k] = param[k]
+                def _marge_opt(opt:Dict[str, Any], param:Dict[str, Any]) -> Dict[str, Any]:
+                    opt.update(param)
                     return opt
+                opt_def = self.load_cmd(web, title)
                 if content_type is None:
-                    opt = self.load_cmd(web, title)
-                    opt = _marge_opt(opt, req.query_params)
+                    opt = _marge_opt(opt_def, req.query_params)
                 elif content_type.startswith('multipart/form-data'):
-                    opt = self.load_cmd(web, title)
-                    opt = _marge_opt(opt, req.query_params)
+                    opt = _marge_opt(opt_def, req.query_params)
                     form = await req.form()
                     #files = {key: value for key, value in form.multi_items() if isinstance(value, UploadFile)}
                     for key, fv in form.multi_items():
@@ -52,13 +50,12 @@ class ExecCmd(cmdbox_web_load_cmd.LoadCmd):
                         if key == 'input_file': opt['stdin'] = False
                 elif content_type.startswith('application/json'):
                     opt = await req.json()
+                    opt = _marge_opt(opt_def, opt)
                 elif content_type.startswith('application/octet-stream'):
-                    opt = self.load_cmd(web, title)
-                    opt = _marge_opt(opt, req.query_params)
+                    opt = _marge_opt(opt_def, req.query_params)
                     opt['_stdin_body'] = await req.body()
                 else:
-                    opt = self.load_cmd(web, title)
-                    opt = _marge_opt(opt, req.query_params)
+                    opt = _marge_opt(opt_def, req.query_params)
                 if 'mode' not in opt or 'cmd' not in opt:
                     raise HTTPException(status_code=404, detail='mode or cmd is not found.')
                 opt['capture_stdout'] = nothread = True
@@ -147,9 +144,10 @@ class ExecCmd(cmdbox_web_load_cmd.LoadCmd):
         if 'port' in opt: opt['port'] = web.redis_port
         if 'password' in opt: opt['password'] = web.redis_password
         if 'svname' in opt: opt['svname'] = web.svname
-        if req.session is not None and 'signin' in req.session and req.session['signin'] is not None:
-            if 'clmsg_id' in req.session['signin'] and req.session['signin']['clmsg_id'] is not None:
-                opt['clmsg_id'] = req.session['signin']['clmsg_id']
+        if not 'clmsg_id' in opt:  # optに含まれる場合は処理しない
+            if req.session is not None and 'signin' in req.session and req.session['signin'] is not None:
+                if 'clmsg_id' in req.session['signin'] and req.session['signin']['clmsg_id'] is not None:
+                    opt['clmsg_id'] = req.session['signin']['clmsg_id']
         ap.sv = None
         ap.cl = None
         ap.web = None

cmdbox/app/features/web/cmdbox_web_versions_used.py

@@ -25,7 +25,7 @@ class VersionsUsed(feature.WebFeature):
                 for i, line in enumerate(f.readlines()):
                     parts = line.strip().split('\t')
                     ret.append(parts)
-            with open(Path(cmdbox.__file__).parent / 'app' / 'lib_license_list.txt', 'r', encoding='utf-8') as f:
+            with open(Path(cmdbox.__file__).parent / 'web' / 'voicevox_license_list.txt', 'r', encoding='utf-8') as f:
                 for i, line in enumerate(f.readlines()):
                     parts = line.strip().split('\t')
                     ret.append(parts)

cmdbox/app/filer.py

@@ -206,13 +206,15 @@ class Filer(object):
         try:
             mime_type, encoding = mimetypes.guess_type(str(abspath))
             fname = abspath.name
-            with open(abspath, "rb") as f:
+            def _r(f):
                 fd = f.read()
                 if mime_type is not None and mime_type != 'image/svg+xml' and mime_type.startswith('image') and img_thumbnail > 0:
                     img = convert.imgbytes2thumbnail(fd, (img_thumbnail, img_thumbnail))
                     fd = convert.img2byte(img, "jpeg")
                     fname = f"{fname}.thumbnail.jpg"
                 data = convert.bytes2b64str(fd)
+                return data
+            data = common.load_file(abspath, _r, mode='rb')
             return self.RESP_SUCCESS, dict(success=dict(name=fname, data=data, mime_type=mime_type))
         except Exception as e:
             self.logger.warning(f"Failed to download {abspath}. {e}")
@@ -252,8 +254,9 @@ class Filer(object):
         try:
             if mkdir:
                 save_path.parent.mkdir(parents=True, exist_ok=True)
-            with open(save_path, "wb") as f:
+            def _w(f):
                 f.write(file_data)
+            common.save_file(Path(save_path), _w, mode='wb')
             return self.RESP_SUCCESS, dict(success=f"Uploaded {save_path}")
         except Exception as e:
             self.logger.warning(f"Failed to upload {save_path}. {e}")