bricks-py 0.0.2__tar.gz → 0.0.3__tar.gz

{bricks-py-0.0.2 → bricks-py-0.0.3}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: bricks-py
-Version: 0.0.2
+Version: 0.0.3
 Summary: quickly build your crawler
 Author: Kem
 Author-email: 531144129@qq.com

{bricks-py-0.0.2 → bricks-py-0.0.3}/README.md

@@ -16,7 +16,7 @@ Bricks 拥有以下特性
 安装
 
 ```
-pip install bricks-py==0.0.1
+pip install bricks-py
 ```
 
 # 简单上手

{bricks-py-0.0.2 → bricks-py-0.0.3}/bricks/const.py

@@ -9,7 +9,7 @@ import uuid
 MACHINE_ID = hashlib.sha256(uuid.UUID(int=uuid.getnode()).hex[-12:].encode()).hexdigest()
 
 # 当前框架版本
-VERSION = "0.0.2"
+VERSION = "0.0.3"
 
 # 事件类型
 ERROR_OCCURRED = 'ERROR_OCCURRED'

{bricks-py-0.0.2 → bricks-py-0.0.3}/bricks/lib/proxies.py

@@ -35,6 +35,7 @@ class MetaClass(type):
     def __new__(cls, name, bases, dct):  # noqa
         def wrapper(raw_method):
             def inner(self, *args, **kwargs):
+                self: BaseProxy
                 proxy = raw_method(self, *args, **kwargs)
                 proxy.proxy = self.fmt(proxy=proxy.proxy)
                 proxy.auth = self.auth

{bricks-py-0.0.2 → bricks-py-0.0.3}/bricks/utils/pandora.py

@@ -116,6 +116,10 @@ def prepare(func, args=None, kwargs: dict = None, annotations: dict = None, name
         if name in kwargs:
             value = kwargs[name]
 
+        # 参数在 namespace 里面 -> 从 namespace 里面取
+        elif param.name in namespace:
+            value = namespace[param.name]
+
         # 参数类型存在于 annotations, 并且还可以从 args 里面取值, 并且刚好取到的对应的值也是当前类型 -> 直接从 args 里面取
         elif param.annotation in annotations and index < len(args) and type(args[index]) == param.annotation:
             value = args[index]
@@ -130,20 +134,16 @@ def prepare(func, args=None, kwargs: dict = None, annotations: dict = None, name
             value = args[index]
             index += 1
 
-        elif param.name in namespace:
-
-            value = namespace[param.name]
-
         elif param.default != inspect.Parameter.empty:
             continue
 
         # 没有传这个参数, 并且也没有可以备选的 annotations  -> 报错
         else:
             raise TypeError(f"missing required argument: {name}, signature: {dict(parameters)}")
-        if param.kind in [inspect.Parameter.POSITIONAL_ONLY, inspect.Parameter.POSITIONAL_OR_KEYWORD]:
+        if param.kind in [inspect.Parameter.POSITIONAL_ONLY]:
             new_args.append(value)
 
-        if param.kind == inspect.Parameter.KEYWORD_ONLY:
+        if param.kind in [inspect.Parameter.KEYWORD_ONLY, inspect.Parameter.POSITIONAL_OR_KEYWORD]:
             new_kwargs[name] = value
 
     return prepared(func=func, args=new_args, kwargs=new_kwargs)

{bricks-py-0.0.2 → bricks-py-0.0.3}/bricks_py.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: bricks-py
-Version: 0.0.2
+Version: 0.0.3
 Summary: quickly build your crawler
 Author: Kem
 Author-email: 531144129@qq.com

{bricks-py-0.0.2 → bricks-py-0.0.3}/demos/air_spider_demo.py

@@ -85,27 +85,27 @@ if __name__ == '__main__':
     spider = MySpider(
         # # 设置代理模式 1, 该模式适用于: 你已经将代理提取至 Redis 的 proxy 里面
         # # 这样设置的话就会自动去取
-        # proxy={
-        #     "ref": "bricks.lib.proxies.RedisProxy",  # 指向 Redis
-        #     "key": "proxy",  # 指向代理 Key
-        #     # 这个不写默认指向本地 Redis, 无密码的
-        #     "options": {
-        #         "host": "127.0.0.1",
-        #         "port": 6379,
-        #         "password": "xsxsxax"
-        #     },
-        #     "threshold": 100,  # 一个代理最多使用多少次, 到这个次数之后就会归还到Redis, 然后重新拿, 默认不归还
-        #     "scheme": "socks5"  # 代理协议, 默认是 http
-        # }
-
-        # 设置代理模式 2, 该模式适用于: 指向固定代理, 如 http://127.0.0.1:7890
-        # 这样设置的话就会自动去取
         proxy={
-            "ref": "bricks.lib.proxies.CustomProxy",  # 指向 Redis
-            "key": "127.0.0.1:7890",  # 指向代理 Key
+            "ref": "bricks.lib.proxies.RedisProxy",  # 指向 Redis
+            "key": "proxy",  # 指向代理 Key
+            # 这个不写默认指向本地 Redis, 无密码的
+            "options": {
+                "host": "127.0.0.1",
+                "port": 6379,
+                # "password": "xsxsxax"
+            },
             "threshold": 100,  # 一个代理最多使用多少次, 到这个次数之后就会归还到Redis, 然后重新拿, 默认不归还
-            "scheme": "http"  # 代理协议, 默认是 http
-        },
+            "scheme": "socks5"  # 代理协议, 默认是 http
+        }
+
+        # # 设置代理模式 2, 该模式适用于: 指向固定代理, 如 http://127.0.0.1:7890
+        # # 这样设置的话就会自动去取
+        # proxy={
+        #     "ref": "bricks.lib.proxies.CustomProxy",  # 指向 Redis
+        #     "key": "127.0.0.1:7890",  # 指向代理 Key
+        #     "threshold": 100,  # 一个代理最多使用多少次, 到这个次数之后就会归还到Redis, 然后重新拿, 默认不归还
+        #     # "scheme": "http"  # 代理协议, 默认是 http
+        # },
 
         # # 设置代理模式 3, 该模式适用于: 你有一个提取 api,访问就会获取代理
         # # 这样设置的话就会自动去取