sunholo 0.82.0__tar.gz → 0.82.1__tar.gz

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (150) hide show
  1. {sunholo-0.82.0 → sunholo-0.82.1}/PKG-INFO +4 -4
  2. {sunholo-0.82.0 → sunholo-0.82.1}/setup.py +3 -3
  3. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/gcs/add_file.py +29 -1
  4. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/invoke/direct_vac_func.py +1 -1
  5. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/pubsub/process_pubsub.py +1 -1
  6. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/PKG-INFO +4 -4
  7. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/requires.txt +2 -2
  8. {sunholo-0.82.0 → sunholo-0.82.1}/LICENSE.txt +0 -0
  9. {sunholo-0.82.0 → sunholo-0.82.1}/MANIFEST.in +0 -0
  10. {sunholo-0.82.0 → sunholo-0.82.1}/README.md +0 -0
  11. {sunholo-0.82.0 → sunholo-0.82.1}/setup.cfg +0 -0
  12. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/__init__.py +0 -0
  13. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/__init__.py +0 -0
  14. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/chat_history.py +0 -0
  15. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/dispatch_to_qa.py +0 -0
  16. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/fastapi/__init__.py +0 -0
  17. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/fastapi/base.py +0 -0
  18. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/fastapi/qna_routes.py +0 -0
  19. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/flask/__init__.py +0 -0
  20. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/flask/base.py +0 -0
  21. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/flask/qna_routes.py +0 -0
  22. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/flask/vac_routes.py +0 -0
  23. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/langserve.py +0 -0
  24. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/pubsub.py +0 -0
  25. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/route.py +0 -0
  26. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/special_commands.py +0 -0
  27. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/agents/swagger.py +0 -0
  28. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/archive/__init__.py +0 -0
  29. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/archive/archive.py +0 -0
  30. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/auth/__init__.py +0 -0
  31. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/auth/gcloud.py +0 -0
  32. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/auth/refresh.py +0 -0
  33. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/auth/run.py +0 -0
  34. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/azure/__init__.py +0 -0
  35. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/azure/auth.py +0 -0
  36. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/azure/blobs.py +0 -0
  37. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/azure/event_grid.py +0 -0
  38. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/bots/__init__.py +0 -0
  39. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/bots/discord.py +0 -0
  40. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/bots/github_webhook.py +0 -0
  41. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/bots/webapp.py +0 -0
  42. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/__init__.py +0 -0
  43. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/azure.py +0 -0
  44. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/doc_handling.py +0 -0
  45. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/encode_metadata.py +0 -0
  46. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/images.py +0 -0
  47. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/loaders.py +0 -0
  48. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/message_data.py +0 -0
  49. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/pdfs.py +0 -0
  50. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/process_chunker_data.py +0 -0
  51. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/publish.py +0 -0
  52. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/pubsub.py +0 -0
  53. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/chunker/splitter.py +0 -0
  54. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/__init__.py +0 -0
  55. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/chat_vac.py +0 -0
  56. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/cli.py +0 -0
  57. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/cli_init.py +0 -0
  58. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/configs.py +0 -0
  59. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/deploy.py +0 -0
  60. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/embedder.py +0 -0
  61. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/merge_texts.py +0 -0
  62. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/run_proxy.py +0 -0
  63. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/sun_rich.py +0 -0
  64. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/swagger.py +0 -0
  65. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/cli/vertex.py +0 -0
  66. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/components/__init__.py +0 -0
  67. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/components/llm.py +0 -0
  68. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/components/retriever.py +0 -0
  69. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/components/vectorstore.py +0 -0
  70. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/custom_logging.py +0 -0
  71. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/__init__.py +0 -0
  72. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/alloydb.py +0 -0
  73. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/alloydb_client.py +0 -0
  74. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/database.py +0 -0
  75. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/lancedb.py +0 -0
  76. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/create_function.sql +0 -0
  77. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/create_function_time.sql +0 -0
  78. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/create_table.sql +0 -0
  79. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/delete_source_row.sql +0 -0
  80. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/return_sources.sql +0 -0
  81. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/sql/sb/setup.sql +0 -0
  82. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/static_dbs.py +0 -0
  83. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/database/uuid.py +0 -0
  84. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/discovery_engine/__init__.py +0 -0
  85. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/discovery_engine/chunker_handler.py +0 -0
  86. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/discovery_engine/create_new.py +0 -0
  87. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/discovery_engine/discovery_engine_client.py +0 -0
  88. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/discovery_engine/get_ai_search_chunks.py +0 -0
  89. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/embedder/__init__.py +0 -0
  90. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/embedder/embed_chunk.py +0 -0
  91. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/gcs/__init__.py +0 -0
  92. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/gcs/download_folder.py +0 -0
  93. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/gcs/download_url.py +0 -0
  94. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/gcs/metadata.py +0 -0
  95. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/invoke/__init__.py +0 -0
  96. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/invoke/invoke_vac_utils.py +0 -0
  97. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/langfuse/__init__.py +0 -0
  98. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/langfuse/callback.py +0 -0
  99. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/langfuse/prompts.py +0 -0
  100. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/llamaindex/__init__.py +0 -0
  101. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/llamaindex/get_files.py +0 -0
  102. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/llamaindex/import_files.py +0 -0
  103. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/llamaindex/llamaindex_class.py +0 -0
  104. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/llamaindex/user_history.py +0 -0
  105. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/lookup/__init__.py +0 -0
  106. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/lookup/model_lookup.yaml +0 -0
  107. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/patches/__init__.py +0 -0
  108. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/patches/langchain/__init__.py +0 -0
  109. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/patches/langchain/lancedb.py +0 -0
  110. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/patches/langchain/vertexai.py +0 -0
  111. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/pubsub/__init__.py +0 -0
  112. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/pubsub/pubsub_manager.py +0 -0
  113. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/qna/__init__.py +0 -0
  114. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/qna/parsers.py +0 -0
  115. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/qna/retry.py +0 -0
  116. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/streaming/__init__.py +0 -0
  117. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/streaming/content_buffer.py +0 -0
  118. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/streaming/langserve.py +0 -0
  119. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/streaming/stream_lookup.py +0 -0
  120. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/streaming/streaming.py +0 -0
  121. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/summarise/__init__.py +0 -0
  122. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/summarise/summarise.py +0 -0
  123. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/tools/__init__.py +0 -0
  124. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/tools/web_browser.py +0 -0
  125. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/__init__.py +0 -0
  126. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/api_key.py +0 -0
  127. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/big_context.py +0 -0
  128. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/config.py +0 -0
  129. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/config_class.py +0 -0
  130. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/config_schema.py +0 -0
  131. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/gcp.py +0 -0
  132. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/gcp_project.py +0 -0
  133. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/parsers.py +0 -0
  134. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/timedelta.py +0 -0
  135. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/user_ids.py +0 -0
  136. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/utils/version.py +0 -0
  137. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/__init__.py +0 -0
  138. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/extensions_call.py +0 -0
  139. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/extensions_class.py +0 -0
  140. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/genai_functions.py +0 -0
  141. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/init.py +0 -0
  142. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/memory_tools.py +0 -0
  143. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/safety.py +0 -0
  144. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo/vertex/type_dict_to_json.py +0 -0
  145. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/SOURCES.txt +0 -0
  146. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/dependency_links.txt +0 -0
  147. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/entry_points.txt +0 -0
  148. {sunholo-0.82.0 → sunholo-0.82.1}/sunholo.egg-info/top_level.txt +0 -0
  149. {sunholo-0.82.0 → sunholo-0.82.1}/tests/test_chat_history.py +0 -0
  150. {sunholo-0.82.0 → sunholo-0.82.1}/tests/test_config.py +0 -0
@@ -1,9 +1,9 @@
1
1
  Metadata-Version: 2.1
2
2
  Name: sunholo
3
- Version: 0.82.0
3
+ Version: 0.82.1
4
4
  Summary: Large Language Model DevOps - a package to help deploy LLMs to the Cloud.
5
5
  Home-page: https://github.com/sunholo-data/sunholo-py
6
- Download-URL: https://github.com/sunholo-data/sunholo-py/archive/refs/tags/v0.82.0.tar.gz
6
+ Download-URL: https://github.com/sunholo-data/sunholo-py/archive/refs/tags/v0.82.1.tar.gz
7
7
  Author: Holosun ApS
8
8
  Author-email: multivac@sunholo.com
9
9
  License: Apache License, Version 2.0
@@ -20,9 +20,9 @@ Description-Content-Type: text/markdown
20
20
  License-File: LICENSE.txt
21
21
  Requires-Dist: google-auth
22
22
  Requires-Dist: ruamel.yaml
23
- Requires-Dist: langchain>=0.2.5
23
+ Requires-Dist: langchain>=0.2.12
24
24
  Requires-Dist: langchain_experimental>0.0.60
25
- Requires-Dist: langchain-community
25
+ Requires-Dist: langchain-community>=0.2.11
26
26
  Provides-Extra: all
27
27
  Requires-Dist: asyncpg; extra == "all"
28
28
  Requires-Dist: azure-identity; extra == "all"
@@ -1,7 +1,7 @@
1
1
  from setuptools import setup, find_packages
2
2
 
3
3
  # Define your base version
4
- version = '0.82.0'
4
+ version = '0.82.1'
5
5
 
6
6
  setup(
7
7
  name='sunholo',
@@ -31,9 +31,9 @@ setup(
31
31
  "google-auth", # to check if on gcp
32
32
  #"tenacity==8.3.0", #TODO: remove soon
33
33
  "ruamel.yaml",
34
- "langchain>=0.2.5",
34
+ "langchain>=0.2.12",
35
35
  "langchain_experimental>0.0.60",
36
- "langchain-community",
36
+ "langchain-community>=0.2.11",
37
37
  ],
38
38
  extras_require={
39
39
  # Define optional dependencies with feature names
@@ -15,6 +15,7 @@ import datetime
15
15
  import os
16
16
  import base64
17
17
  import uuid
18
+ import time
18
19
 
19
20
  try:
20
21
  from google.cloud import storage
@@ -89,6 +90,33 @@ def resolve_bucket(vector_name):
89
90
 
90
91
  return bucket_name
91
92
 
93
+ def add_folder_to_gcs(
94
+ source_folder:str,
95
+ vector_name:str=None,
96
+ bucket_name:str=None,
97
+ metadata:dict=None,
98
+ bucket_folderpath:str=None):
99
+ """Uploads a folder and all its contents to a specified GCS bucket."""
100
+
101
+ uris = []
102
+ for root, dirs, files in os.walk(source_folder):
103
+ for file in files:
104
+ local_path = os.path.join(root, file)
105
+ # Create the relative path in the destination folder
106
+ relative_path = os.path.relpath(local_path, source_folder)
107
+ bucket_filepath = os.path.join(bucket_folderpath, relative_path)
108
+
109
+ uri = add_file_to_gcs(local_path,
110
+ vector_name=vector_name,
111
+ bucket_name=bucket_name,
112
+ metadata=metadata,
113
+ bucket_filepath=bucket_filepath)
114
+ uris.append(uri)
115
+
116
+ log.info(f"uploaded [{len(files)}] to GCS bucket")
117
+
118
+ return uris
119
+
92
120
  def add_file_to_gcs(filename: str,
93
121
  vector_name:str=None,
94
122
  bucket_name: str=None,
@@ -148,7 +176,7 @@ def add_file_to_gcs(filename: str,
148
176
 
149
177
  blob.metadata = the_metadata
150
178
 
151
- import time
179
+
152
180
 
153
181
  max_retries = 5
154
182
  base_delay = 1 # 1 second
@@ -41,7 +41,7 @@ def direct_vac(vac_input: dict, vac_name: str, chat_history=[]):
41
41
  override_endpoint = agent_url or override_endpoint
42
42
 
43
43
  print(f"Using {override_endpoint=}")
44
- log.warning(f'Batch invoke_vac_qa with {vac_input=}')
44
+ log.warning(f'Batch invoke_vac_qa {vac_name} with {vac_input=}')
45
45
  vac_response = send_to_qa(
46
46
  vac_input["user_input"],
47
47
  vector_name=vac_name,
@@ -16,7 +16,7 @@ from ..custom_logging import log
16
16
  from ..gcs.metadata import get_object_metadata
17
17
 
18
18
 
19
- def decode_pubsub_message(data: dict):
19
+ def decode_pubsub_message(data: dict) -> tuple:
20
20
  """Extracts message data and metadata from a Pub/Sub message.
21
21
 
22
22
  Args:
@@ -1,9 +1,9 @@
1
1
  Metadata-Version: 2.1
2
2
  Name: sunholo
3
- Version: 0.82.0
3
+ Version: 0.82.1
4
4
  Summary: Large Language Model DevOps - a package to help deploy LLMs to the Cloud.
5
5
  Home-page: https://github.com/sunholo-data/sunholo-py
6
- Download-URL: https://github.com/sunholo-data/sunholo-py/archive/refs/tags/v0.82.0.tar.gz
6
+ Download-URL: https://github.com/sunholo-data/sunholo-py/archive/refs/tags/v0.82.1.tar.gz
7
7
  Author: Holosun ApS
8
8
  Author-email: multivac@sunholo.com
9
9
  License: Apache License, Version 2.0
@@ -20,9 +20,9 @@ Description-Content-Type: text/markdown
20
20
  License-File: LICENSE.txt
21
21
  Requires-Dist: google-auth
22
22
  Requires-Dist: ruamel.yaml
23
- Requires-Dist: langchain>=0.2.5
23
+ Requires-Dist: langchain>=0.2.12
24
24
  Requires-Dist: langchain_experimental>0.0.60
25
- Requires-Dist: langchain-community
25
+ Requires-Dist: langchain-community>=0.2.11
26
26
  Provides-Extra: all
27
27
  Requires-Dist: asyncpg; extra == "all"
28
28
  Requires-Dist: azure-identity; extra == "all"
@@ -1,8 +1,8 @@
1
1
  google-auth
2
2
  ruamel.yaml
3
- langchain>=0.2.5
3
+ langchain>=0.2.12
4
4
  langchain_experimental>0.0.60
5
- langchain-community
5
+ langchain-community>=0.2.11
6
6
 
7
7
  [all]
8
8
  asyncpg
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes
File without changes