funboost 47.4__tar.gz → 47.5__tar.gz

{funboost-47.4/funboost.egg-info → funboost-47.5}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: funboost
-Version: 47.4
+Version: 47.5
 Summary: pip install funboost，python全功能分布式函数调度框架,funboost的功能是全面性重量级，用户能想得到的功能99%全都有;funboost的使用方式是轻量级，只有@boost一行代码需要写。支持python所有类型的并发模式和一切知名消息队列中间件，支持如 celery dramatiq等框架整体作为funboost中间件，python函数加速器，框架包罗万象，用户能想到的控制功能全都有。一统编程思维，兼容50% python业务场景，适用范围广。只需要一行代码即可分布式执行python一切函数，99%用过funboost的pythoner 感受是　简易 方便 强劲 强大，相见恨晚 
 Home-page: https://github.com/ydf0509/funboost
 Author: bfzs

{funboost-47.4 → funboost-47.5}/funboost/__init__.py

@@ -13,7 +13,7 @@ set_frame_config这个模块的 use_config_form_funboost_config_module() 是核
 这段注释说明和使用的用户无关,只和框架开发人员有关.
 '''
 
-__version__ = "47.4"
+__version__ = "47.5"
 
 from funboost.set_frame_config import show_frame_config
 

{funboost-47.4 → funboost-47.5}/funboost/core/booster.py

@@ -17,12 +17,13 @@ from funboost.core.loggers import flogger, develop_logger, logger_prompt
 from functools import wraps
 
 from funboost.core.exceptions import BoostDecoParamsIsOldVersion
-from funboost.core.func_params_model import BoosterParams, FunctionResultStatusPersistanceConfig, PriorityConsumingControlConfig
+from funboost.core.func_params_model import BoosterParams, FunctionResultStatusPersistanceConfig, PriorityConsumingControlConfig, PublisherParams
 
 from funboost.factories.consumer_factory import get_consumer
+from funboost.factories.publisher_factotry import get_publisher
+from funboost.publishers.base_publisher import AbstractPublisher
 from collections import defaultdict
 
-
 from funboost.core.msg_result_getter import AsyncResult, AioAsyncResult
 
 
@@ -81,7 +82,7 @@ class Booster:
             flogger.warning(f'''你的 {queue_name} 队列， funboost 40.0版本以后： {BoostDecoParamsIsOldVersion.new_version_change_hint}''')
         boost_params_merge = boost_params.copy()
         boost_params_merge.update_from_dict(kwargs)
-        self.boost_params:BoosterParams = boost_params_merge
+        self.boost_params: BoosterParams = boost_params_merge
         self.queue_name = boost_params_merge.queue_name
 
     def __str__(self):
@@ -156,10 +157,10 @@ class Booster:
         return AioAsyncResult(async_result.task_id, )
 
     async def aio_publish(self, msg: typing.Union[str, dict], task_id=None,
-                      priority_control_config: PriorityConsumingControlConfig = None) -> AioAsyncResult:
+                          priority_control_config: PriorityConsumingControlConfig = None) -> AioAsyncResult:
         """asyncio 生态下发布消息,因为同步push只需要消耗不到1毫秒,所以基本上大概可以直接在asyncio异步生态中直接调用同步的push方法,
         但为了更好的防止网络波动(例如发布消息到外网的消息队列耗时达到10毫秒),可以使用aio_push"""
-        async_result = await simple_run_in_executor(self.publish,msg,task_id,priority_control_config)
+        async_result = await simple_run_in_executor(self.publish, msg, task_id, priority_control_config)
         return AioAsyncResult(async_result.task_id, )
 
     # noinspection PyMethodMayBeStatic
@@ -206,7 +207,7 @@ class Booster:
         fabric_deploy(self, **params)
 
 
-boost = Booster   # @boost 后消费函数.  不能自动补全方法就用 Booster就可以。 2024版本的 pycharm抽风了，@boost的消费函数不能自动补全提示 .consume  .push 这些方法。
+boost = Booster  # @boost 后消费函数.  不能自动补全方法就用 Booster就可以。 2024版本的 pycharm抽风了，@boost的消费函数不能自动补全提示 .consume  .push 这些方法。
 task_deco = boost  # 两个装饰器名字都可以。task_deco是原来名字，兼容一下。
 
 
@@ -298,6 +299,25 @@ class BoostersManager:
             booster = Booster(boost_params)(boost_params.consuming_function)
         return booster
 
+    queue_name__cross_project_publisher_map = {}
+
+    @classmethod
+    def get_cross_project_publisher(cls, publisher_params: PublisherParams) -> AbstractPublisher:
+        """
+        跨不同的项目，发布消息。例如proj1中定义有fun1消费函数，但proj2无法直接到日proj1的函数，无法直接 fun1.push 来发布消息
+        可以使用这个方法，获取一个publisher。
+
+        publisher = BoostersManager.get_cross_project_publisher(PublisherParams(queue_name='proj1_queue', broker_kind=BrokerEnum.SQLITE_QUEUE))
+        publisher.publish({'x': aaa})
+        """
+        pid = os.getpid()
+        key = (pid, publisher_params.queue_name)
+        if key not in cls.queue_name__cross_project_publisher_map:
+            publisher = get_publisher(publisher_params)
+            publisher.push = lambda *args, **kwargs: print('跨项目虚拟publisher不支持push方法，请使用publish来发布消息')
+            cls.queue_name__cross_project_publisher_map[key] = publisher
+        return cls.queue_name__cross_project_publisher_map[key]
+
     @classmethod
     def push(cls, queue_name, *args, **kwargs):
         """push发布消息到消息队列 ;
@@ -323,7 +343,7 @@ class BoostersManager:
     consume = consume_queues
 
     @classmethod
-    def consume_all_queues(cls,block=True):
+    def consume_all_queues(cls, block=True):
         """
         启动所有消息队列名的消费,无需一个一个函数亲自 funxx.consume()来启动,多个函数队列在当前同一个进程内启动消费.
         这种方式节约总的内存,但无法利用多核cpu

{funboost-47.4 → funboost-47.5}/funboost/core/lazy_impoter.py

@@ -31,6 +31,8 @@ class FunboostLazyImpoter(SingletonBaseNew):
         from funboost.core import booster
         return booster.Booster
 
+
+
     # @property
     # @cached_method_result
     # def get_current_taskid(self):

{funboost-47.4 → funboost-47.5}/funboost/publishers/base_publisher.py

@@ -260,6 +260,8 @@ class AbstractPublisher(LoggerLevelSetterMixin, metaclass=abc.ABCMeta, ):
         # print(self.publish_params_checker.position_arg_name_list)
         # print(func_args)
         func_args_list = list(func_args)
+
+        print(func_args_list)
         if self.publisher_params.consuming_function_kind == FunctionKind.CLASS_METHOD:
             # print(self.publish_params_checker.all_arg_name[0])
             # func_args_list.insert(0, {'first_param_name': self.publish_params_checker.all_arg_name[0],

{funboost-47.4 → funboost-47.5}/funboost/timing_job/__init__.py

@@ -12,7 +12,8 @@ import threading
 from apscheduler.schedulers.background import BackgroundScheduler
 # noinspection PyProtectedMember
 from apscheduler.schedulers.base import STATE_STOPPED, STATE_RUNNING
-from apscheduler.util import undefined, TIMEOUT_MAX
+from apscheduler.util import undefined
+from threading import TIMEOUT_MAX
 import deprecated
 from funboost.utils.redis_manager import RedisMixin
 

{funboost-47.4 → funboost-47.5/funboost.egg-info}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: funboost
-Version: 47.4
+Version: 47.5
 Summary: pip install funboost，python全功能分布式函数调度框架,funboost的功能是全面性重量级，用户能想得到的功能99%全都有;funboost的使用方式是轻量级，只有@boost一行代码需要写。支持python所有类型的并发模式和一切知名消息队列中间件，支持如 celery dramatiq等框架整体作为funboost中间件，python函数加速器，框架包罗万象，用户能想到的控制功能全都有。一统编程思维，兼容50% python业务场景，适用范围广。只需要一行代码即可分布式执行python一切函数，99%用过funboost的pythoner 感受是　简易 方便 强劲 强大，相见恨晚 
 Home-page: https://github.com/ydf0509/funboost
 Author: bfzs