Kekik 1.7.0__py3-none-any.whl → 1.7.2__py3-none-any.whl

Kekik/cache.py

@@ -1,65 +1,173 @@
-# ! https://github.com/Fatal1ty/aiocached
+# Bu araç @keyiflerolsun tarafından | @KekikAkademi için yazılmıştır.
 
-import asyncio
+from .cli         import konsol
 from functools    import wraps
-from time         import time
 from hashlib      import md5
 from urllib.parse import urlencode
+import time
+import threading
+import asyncio
+import pickle
 
+# Redis için asenkron client (Redis yoksa fallback yapılacak)
+import redis.asyncio as redis
+
+# -----------------------------------------------------
+# Sabitler ve Yardımcı Fonksiyonlar
+# -----------------------------------------------------
 UNLIMITED = None
 
-class Cache:
+def normalize_for_key(value):
     """
-    Basit in-memory cache yapısı.
-    TTL (time-to-live) süresi dolan veriler otomatik olarak temizlenir (get/erişim anında kontrol edilir).
+    Cache key oluşturma amacıyla verilen değeri normalize eder.
+    - Basit tipler (int, float, str, bool, None) doğrudan kullanılır.
+    - dict: Anahtarları sıralı olarak normalize eder.
+    - list/tuple: Elemanları normalize eder.
+    - Diğer: Sadece sınıf ismi kullanılır.
     """
-    def __init__(self, ttl=UNLIMITED):
-        self._data  = {}
+    if isinstance(value, (int, float, str, bool, type(None))):
+        return value
+
+    elif isinstance(value, dict):
+        return {k: normalize_for_key(value[k]) for k in sorted(value)}
+
+    elif isinstance(value, (list, tuple)):
+        return [normalize_for_key(item) for item in value]
+
+    else:
+        return value.__class__.__name__
+
+def simple_cache_key(func, args, kwargs) -> str:
+    """
+    Fonksiyonun tam adı ve parametrelerini kullanarak bir cache key oluşturur.
+    Oluşturulan stringin sonuna MD5 hash eklenebilir.
+    """
+    base_key = f"{func.__module__}.{func.__qualname__}"
+
+    if args:
+        norm_args = [normalize_for_key(arg) for arg in args]
+        base_key += f"|{norm_args}"
+
+    if kwargs:
+        norm_kwargs = {k: normalize_for_key(v) for k, v in kwargs.items()}
+        base_key   += f"|{str(sorted(norm_kwargs.items()))}"
+
+    hashed = md5(base_key.encode('utf-8')).hexdigest()
+    return f"{base_key}"  # |{hashed}
+
+async def make_cache_key(func, args, kwargs, is_fastapi=False) -> str:
+    """
+    Cache key'ini oluşturur.
+    - is_fastapi=False ise simple_cache_key() kullanılır.
+    - True ise FastAPI Request nesnesine göre özel key oluşturulur.
+    """
+    if not is_fastapi:
+        return simple_cache_key(func, args, kwargs)
+
+    # FastAPI: request ilk argümandan ya da kwargs'dan alınır.
+    request = args[0] if args else kwargs.get("request")
+
+    if request.method == "GET":
+        # Eğer query_params boşsa {} olarak ayarla
+        veri = dict(request.query_params) if request.query_params else {}
+    else:
+        try:
+            veri = await request.json()
+        except Exception:
+            form_data = await request.form()
+            veri = dict(form_data.items())
+
+    # Eğer "kurek" gibi özel parametreler varsa temizleyebilirsiniz:
+    veri.pop("kurek", None)
+
+    args_hash = md5(urlencode(veri).encode()).hexdigest() if veri else ""
+    return f"{request.url.path}?{veri}"
+
+# -----------------------------------------------------
+# Senkron Cache (RAM) Sınıfı
+# -----------------------------------------------------
+
+class SyncCache:
+    """
+    Senkron fonksiyonlar için basit in-memory cache.
+    TTL süresi dolan veriler periyodik olarak arka plan thread’iyle temizlenir.
+    """
+    def __init__(self, ttl=UNLIMITED, cleanup_interval=60 * 60):
         self._ttl   = ttl
+        self._data  = {}
         self._times = {}
 
+        # TTL sınırsız değilse, cleanup_interval ile ttl'den büyük olanı kullanıyoruz.
+        self._cleanup_interval = max(ttl, cleanup_interval) if ttl is not UNLIMITED else cleanup_interval
+
+        # Arka planda çalışan ve periyodik olarak expired entry'leri temizleyen thread başlatılıyor.
+        self._lock           = threading.RLock()
+        self._cleanup_thread = threading.Thread(target=self._auto_cleanup, daemon=True)
+        self._cleanup_thread.start()
+
+    def _auto_cleanup(self):
+        """Belirlenen aralıklarla cache içerisindeki süresi dolmuş entry'leri temizler."""
+        while True:
+            time.sleep(self._cleanup_interval)
+            with self._lock:
+                keys = list(self._data.keys())
+                for key in keys:
+                    self.remove_if_expired(key)
+
     def _is_expired(self, key):
-        """Belirtilen key'in süresi dolduysa True döner."""
+        """Belirtilen key'in süresi dolmuşsa True döner."""
         if self._ttl is UNLIMITED:
             return False
 
         timestamp = self._times.get(key)
 
-        return timestamp is not None and (time() - timestamp > self._ttl)
+        return timestamp is not None and (time.time() - timestamp > self._ttl)
 
     def remove_if_expired(self, key):
         """
         Eğer key'in cache süresi dolmuşsa, ilgili entry'yi temizler.
+        Thread güvenliği sağlamak için lock kullanılır.
         """
-        if self._is_expired(key):
-            self._data.pop(key, None)
-            self._times.pop(key, None)
+        with self._lock:
+            if self._is_expired(key):
+                self._data.pop(key, None)
+                self._times.pop(key, None)
+                # konsol.log(f"[red][-] {key}")
 
     def __getitem__(self, key):
-        self.remove_if_expired(key)
-        return self._data[key]
+        with self._lock:
+            self.remove_if_expired(key)
+            veri = self._data[key]
+            # konsol.log(f"[yellow][~] {key}")
+            return veri
 
     def __setitem__(self, key, value):
-        self._data[key] = value
-        if self._ttl is not UNLIMITED:
-            self._times[key] = time()
+        with self._lock:
+            self._data[key] = value
+            if self._ttl is not UNLIMITED:
+                self._times[key] = time.time()
 
+# -----------------------------------------------------
+# Asenkron Cache (In-Memory) ve Redis Hybrid Cache
+# -----------------------------------------------------
 
-class AsyncCache(Cache):
+class AsyncCache:
     """
-    Asenkron işlemleri destekleyen cache yapısı.
-    Aynı key için gelen eşzamanlı çağrılar, futures kullanılarak tek sonuç üzerinden paylaşılır.
-    Ek olarak, belirli aralıklarla cache’i kontrol edip, süresi dolmuş verileri temizleyen otomatik temizleme görevi çalışır.
+    Temel in-memory asenkron cache.
     """
     def __init__(self, ttl=UNLIMITED, cleanup_interval=60 * 60):
         """
         :param ttl: Her entry için geçerli süre (saniye). Örneğin 3600 saniye 1 saattir.
         :param cleanup_interval: Otomatik temizleme görevinin kaç saniyede bir çalışacağını belirler.
         """
-        super().__init__(ttl)
+        self._ttl    = ttl
+        self._data   = {}
+        self._times  = {}
         self.futures = {}
 
+        # TTL sınırsız değilse, cleanup_interval ile ttl'den büyük olanı kullanıyoruz.
         self._cleanup_interval = max(ttl, cleanup_interval) if ttl is not UNLIMITED else cleanup_interval
+
         # Aktif bir event loop varsa otomatik temizlik görevini başlatıyoruz.
         try:
             self._cleanup_task = asyncio.get_running_loop().create_task(self._auto_cleanup())
@@ -70,9 +178,7 @@ class AsyncCache(Cache):
         """Belirlenen aralıklarla cache içerisindeki süresi dolmuş entry'leri temizler."""
         while True:
             await asyncio.sleep(self._cleanup_interval)
-            # _data kopyasını almak, üzerinde dönüp silme yaparken hata almamak için.
-            keys = list(self._data.keys())
-            for key in keys:
+            for key in list(self._data.keys()):
                 self.remove_if_expired(key)
 
     def ensure_cleanup_task(self):
@@ -83,45 +189,137 @@ class AsyncCache(Cache):
             except RuntimeError:
                 pass  # Yine loop yoksa yapacak bir şey yok
 
+    def remove_if_expired(self, key):
+        """
+        Belirtilen key'in süresi dolduysa, cache ve futures içerisinden temizler.
+        """
+        if self._ttl is not UNLIMITED:
+            t = self._times.get(key)
+            if t is not None and (time.time() - t > self._ttl):
+                # konsol.log(f"[red][-] {key}")
+                self._data.pop(key, None)
+                self._times.pop(key, None)
+                self.futures.pop(key, None)
+
     async def get(self, key):
         """
         Belirtilen key için cache'de saklanan değeri asenkron olarak döndürür.
         Eğer key bulunamazsa, ilgili future üzerinden beklemeyi sağlar.
         """
+        # Cleanup task'in aktif olduğundan emin olun.
         self.ensure_cleanup_task()
+        # Eğer key'in süresi dolmuşsa, kaldırın.
         self.remove_if_expired(key)
 
         try:
-            return self._data[key]
-        except KeyError as e:
+            # Cache içerisinde key varsa direkt değeri döndür.
+            value = self._data[key]
+            # konsol.log(f"[yellow][~] {key}")
+            return value
+        except KeyError:
+            # Eğer key cache'de yoksa, aynı key ile başlatılmış future varsa onu bekle.
             future = self.futures.get(key)
             if future:
                 await future
-                return future.result()
+                # Future tamamlandığında sonucu döndür.
+                value = future.result()
+                # konsol.log(f"[yellow][?] {key}")
+                return value
+            # Eğer future da yoksa, key bulunamadığına dair hata fırlat.
+            raise KeyError(key)
+
+    async def set(self, key, value):
+        """Belirtilen key için cache'e değer ekler."""
+        self.ensure_cleanup_task()
+        self._data[key] = value
+        if self._ttl is not UNLIMITED:
+            self._times[key] = time.time()
 
-            raise e
+class HybridAsyncCache:
+    """
+    Öncelikle Redis cache kullanılmaya çalışılır.
+    Hata durumunda veya Redis erişilemiyorsa in-memory AsyncCache’e geçilir.
+    """
+    def __init__(self, ttl=UNLIMITED):
+        self._ttl = ttl
 
-    def remove_if_expired(self, key):
-        """
-        Belirtilen key'in süresi dolduysa, cache ve futures içerisinden temizler.
-        """
-        if self._ttl is not UNLIMITED and self._is_expired(key):
-            self._data.pop(key, None)
-            self._times.pop(key, None)
-            self.futures.pop(key, None)
+        try:
+            self.redis = redis.Redis(
+                host             = "127.0.0.1",
+                port             = 6379,
+                decode_responses = False
+            )
+        except Exception:
+            self.redis = None
+
+        self.memory  = AsyncCache(ttl)
+        self.futures = {}
+
+    async def get(self, key):
+        # Eşzamanlı istek yönetimi: aynı key için bir future varsa, direkt bekleyip sonucu döndür.
+        if key in self.futures:
+            # konsol.log(f"[yellow][?] {key}")
+            return await self.futures[key]
 
+        # İlk önce Redis ile deneyelim
+        if self.redis:
+            try:
+                data = await self.redis.get(key)
+            except Exception:
+                return await self.memory.get(key)
+            if data is not None:
+                try:
+                    result = pickle.loads(data)
+                    # konsol.log(f"[yellow][~] {key}")
+                    return result
+                except Exception:
+                    # Deserialize hatası durumunda in-memory cache'ten dene
+                    return await self.memory.get(key)
+            else:
+                # Redis'te veri yoksa, in-memory cache'e bak
+                return await self.memory.get(key)
+        else:
+            # Redis kullanılmıyorsa doğrudan in-memory cache'e bak
+            return await self.memory.get(key)
+
+    async def set(self, key, value):
+        # Önce veriyi pickle etmeyi deniyoruz.
+        try:
+            ser = pickle.dumps(value)
+        except Exception:
+            # Serialization hatası durumunda sadece in-memory cache'e yaz
+            await self.memory.set(key, value)
+            return
+
+        if self.redis:
+            try:
+                if self._ttl is not UNLIMITED:
+                    await self.redis.set(key, ser, ex=self._ttl)
+                else:
+                    await self.redis.set(key, ser)
+                return
+            except Exception:
+                # Redis yazma hatası durumunda in-memory fallback
+                await self.memory.set(key, value)
+                return
+        else:
+            # Redis yoksa in-memory cache'e yaz
+            await self.memory.set(key, value)
+
+# -----------------------------------------------------
+# Cache'e Hesaplanmış Sonucu Yazma Yardımcı Fonksiyonları
+# -----------------------------------------------------
 
 def _sync_maybe_cache(func, key, result, unless):
-    """Senkron sonuç için cache kaydını oluşturur (unless koşuluna bakarak)."""
+    """Senkron fonksiyon sonucu için cache kaydı oluşturur."""
     if unless is None or not unless(result):
         func.__cache[key] = result
-
+        # konsol.log(f"[green][+] {key}")
 
 async def _async_compute_and_cache(func, key, unless, *args, **kwargs):
     """
-    Asenkron fonksiyon sonucunu hesaplar ve cache'e ekler.
-    Aynı key için işlem devam ediyorsa, mevcut sonucu bekler.
-    Sonuç, unless(result) True değilse cache'e eklenir.
+    Asenkron fonksiyon sonucunu hesaplar ve cache'e yazar.
+    Aynı key için gelen eşzamanlı çağrılar future üzerinden bekletilir.
     """
     # __cache'den cache nesnesini alıyoruz.
     cache = func.__cache
@@ -138,11 +336,12 @@ async def _async_compute_and_cache(func, key, unless, *args, **kwargs):
         # Asenkron fonksiyonu çalıştır ve sonucu elde et.
         result = await func(*args, **kwargs)
         future.set_result(result)
-        
+
         # unless koşuluna göre cache'e ekleme yap.
         if unless is None or not unless(result):
-            cache[key] = result
-        
+            await cache.set(key, result)
+            # konsol.log(f"[green][+] {key}")
+
         return result
     except Exception as exc:
         future.cancel()
@@ -151,72 +350,39 @@ async def _async_compute_and_cache(func, key, unless, *args, **kwargs):
         # İşlem tamamlandığında future'ı temizle.
         cache.futures.pop(key, None)
 
-async def make_cache_key(args, kwargs, is_fastapi=False):
-    """
-    Cache key'ini oluşturur.
-    
-    :param is_fastapi (bool): Eğer True ise, ilk argümanın bir FastAPI Request nesnesi olduğu varsayılır.
-        Bu durumda, cache key, request nesnesinin URL yolunu (request.url.path) ve 
-        isteğe ait verilerden (GET istekleri için query parametreleri; diğer istekler için JSON veya form verileri)
-        elde edilen verinin URL uyumlu halinin md5 hash'inin birleşiminden oluşturulur.
-        Böylece, aynı URL ve aynı istek verileri için her seferinde aynı cache key üretilecektir.
-        Eğer False ise, cache key args ve kwargs değerlerinden, sıralı bir tuple olarak oluşturulur.
-    """
-    if not is_fastapi:
-        return (args, tuple(sorted(kwargs.items())))
-
-    request = args[0] if args else kwargs.get("request")
-
-    if request.method == "GET":
-        veri = dict(request.query_params) if request.query_params else None
-    else:
-        try:
-            veri = await request.json()
-        except Exception:
-            form_data = await request.form()
-            veri = dict(form_data.items())
-
-    args_hash = md5(urlencode(veri).encode()).hexdigest() if veri else ""
-    return f"{request.url.path}?{args_hash}"
-
+# -----------------------------------------------------
+# kekik_cache Dekoratörü (Senkrondan Asenkrona)
+# -----------------------------------------------------
 
-def kekik_cache(ttl=UNLIMITED, unless=None, is_fastapi=False):
+def kekik_cache(ttl=UNLIMITED, unless=None, is_fastapi=False, use_redis=True):
     """
-    Bir fonksiyon veya coroutine'in sonucunu cache'ler.
-
-    Args:
-        ttl (int, optional): Cache’in geçerlilik süresi (saniye). 
-                                       Eğer `UNLIMITED` ise süresizdir. Varsayılan olarak `UNLIMITED`'dir.
-        unless (callable, optional): Fonksiyonun sonucunu argüman olarak alan bir callable. 
-                                               Eğer `True` dönerse, sonuç cache'e alınmaz. Varsayılan olarak `None`'dır.
-        is_fastapi (bool, optional): Eğer `True` ise, cache key'i oluştururken FastAPI request nesnesine özel şekilde davranır.
-                                     Varsayılan olarak `False`'tır.
-
-    Notlar:
-    -------
-    Normalde yalnızca Redis cache kullanılmak istenir.
-    Ancak Redis'e ulaşılamayan durumlarda RAM fallback kullanılır.
-
-    ---
-
-    Örn.:
+    Bir fonksiyonun (senkron/asenkron) sonucunu cache'ler.
+    
+    Parametreler:
+      - ttl: Cache'in geçerlilik süresi (saniye). UNLIMITED ise süresizdir.
+      - unless: Sonuç alınmadan önce çağrılan, True dönerse cache'e alınmaz.
+      - is_fastapi: True ise, FastAPI Request nesnesine göre key oluşturur.
+      - use_redis: Asenkron fonksiyonlarda Redis kullanımı (Hybrid cache) için True verilebilir.
     
-        @kekik_cache(ttl=15, unless=lambda sonuc: bool(sonuc is None))
+    Örnek Kullanım:
+    
+        @kekik_cache(ttl=15, unless=lambda sonuc: sonuc is None)
         async def bakalim(param):
-            # Burada cache işlemi yapılır.
             return param
     """
-    # Parametresiz kullanıldığında
+    # Parametresiz kullanım durumunda
     if callable(ttl):
-        return kekik_cache(UNLIMITED, unless=unless, is_fastapi=is_fastapi)(ttl)
+        return kekik_cache(UNLIMITED, unless=unless, is_fastapi=is_fastapi, use_redis=use_redis)(ttl)
 
     def decorator(func):
-        func.__cache = AsyncCache(ttl)
-
         if asyncio.iscoroutinefunction(func):
+            # Asenkron fonksiyonlar için cache türünü seçelim:
+
+            func.__cache = HybridAsyncCache(ttl) if use_redis else AsyncCache(ttl)
+
             @wraps(func)
             async def async_wrapper(*args, **kwargs):
-                key = await make_cache_key(args, kwargs, is_fastapi)
+                key = await make_cache_key(func, args, kwargs, is_fastapi)
 
                 try:
                     return await func.__cache.get(key)
@@ -225,9 +391,12 @@ def kekik_cache(ttl=UNLIMITED, unless=None, is_fastapi=False):
 
             return async_wrapper
         else:
+            # Senkron fonksiyonlar için
+            func.__cache = SyncCache(ttl)
+
             @wraps(func)
             def sync_wrapper(*args, **kwargs):
-                key = (args, tuple(sorted(kwargs.items())))
+                key = simple_cache_key(func, args, kwargs)
 
                 try:
                     return func.__cache[key]

{Kekik-1.7.0.dist-info → Kekik-1.7.2.dist-info}/METADATA

@@ -1,6 +1,6 @@
 Metadata-Version: 2.2
 Name: Kekik
-Version: 1.7.0
+Version: 1.7.2
 Summary: İşlerimizi kolaylaştıracak fonksiyonların el altında durduğu kütüphane..
 Home-page: https://github.com/keyiflerolsun/Kekik
 Author: keyiflerolsun

{Kekik-1.7.0.dist-info → Kekik-1.7.2.dist-info}/RECORD

@@ -2,7 +2,7 @@ Kekik/BIST.py,sha256=gFvEFdLGgsxUq33AkqOr5pVGsSm9jR0v6DVwoSzhX7w,1375
 Kekik/Domain2IP.py,sha256=dMDatPElTMfLORzC_QN9znex8Se1eid3EPsxAe5S1aQ,4851
 Kekik/Nesne.py,sha256=33pp49cZkRCoa0aUFfzVMpx5FSJchSdiKhm97Nkol1Q,7020
 Kekik/__init__.py,sha256=Iy-O4c_DuY2ttQJv6j7xoVk3IS9EcC0Aqx3vhFvCgd8,1057
-Kekik/cache.py,sha256=oLzr1UrzQpeRSjW7MFfJuSRXH3m4aGq98_d_QgoLwfQ,8746
+Kekik/cache.py,sha256=vJ9b7eAyKH0Z2JCW5JIDsyLkNwXvWkS3vnJpv_mj0Us,14892
 Kekik/cli.py,sha256=I--MV8-okBSUYAaV4fRsMeB2n57OJITrgbEnK1OdTPY,3648
 Kekik/csv2dict.py,sha256=HO0AgREXE0yM7cL4OwqpkCGm2pz31RTb0mhnTg6gdwo,423
 Kekik/dict2csv.py,sha256=AcGvEg9i5MXtwMwg7WiDxOj8h9LldNjjcRiWFwA9XJU,560
@@ -34,9 +34,9 @@ Kekik/kisi_ver/__init__.py,sha256=gH613YZC3ziE7f67dViefRSuwDwsHyVvXHpM5CzZ2q4,13
 Kekik/kisi_ver/biyografiler.py,sha256=5Xv1ixaDGHGtl5Nf92jo9dPgF3jDXOGEPmWgoEsn9j8,189486
 Kekik/kisi_ver/isimler.py,sha256=zHVimWL_4TvoLE3qzWQslDBc8-IJZSB02s0vRwsVM1g,88066
 Kekik/kisi_ver/soyisimler.py,sha256=YQJYp2SjENgwOaCa9mmShxPYeeUll2cq8Vox-d8_kB8,78485
-Kekik-1.7.0.dist-info/LICENSE,sha256=OXLcl0T2SZ8Pmy2_dmlvKuetivmyPd5m1q-Gyd-zaYY,35149
-Kekik-1.7.0.dist-info/METADATA,sha256=XCZ7g4OpdRavkHS3lGruuViDHz3ktxXHWdwzIq2HhqQ,43959
-Kekik-1.7.0.dist-info/WHEEL,sha256=In9FTNxeP60KnTkGw7wk6mJPYd_dQSjEZmXdBdMCI-8,91
-Kekik-1.7.0.dist-info/entry_points.txt,sha256=yjBifxtRlqfg8lPkH4Bu-urSa5ecptCHsuth-DcyWcg,59
-Kekik-1.7.0.dist-info/top_level.txt,sha256=NotddscfgxawvuRyAa7xkgnMhyteFDcBxb5aU5GY3BM,6
-Kekik-1.7.0.dist-info/RECORD,,
+Kekik-1.7.2.dist-info/LICENSE,sha256=OXLcl0T2SZ8Pmy2_dmlvKuetivmyPd5m1q-Gyd-zaYY,35149
+Kekik-1.7.2.dist-info/METADATA,sha256=7RQJjD9uh3TDqIPkeRQ8bszs0gVcZJlFf8BMaP31r2U,43959
+Kekik-1.7.2.dist-info/WHEEL,sha256=In9FTNxeP60KnTkGw7wk6mJPYd_dQSjEZmXdBdMCI-8,91
+Kekik-1.7.2.dist-info/entry_points.txt,sha256=yjBifxtRlqfg8lPkH4Bu-urSa5ecptCHsuth-DcyWcg,59
+Kekik-1.7.2.dist-info/top_level.txt,sha256=NotddscfgxawvuRyAa7xkgnMhyteFDcBxb5aU5GY3BM,6
+Kekik-1.7.2.dist-info/RECORD,,