edu-rdm-integration 3.9.1__py3-none-any.whl → 3.9.2__py3-none-any.whl

edu_rdm_integration/export_data/export.py

@@ -28,6 +28,7 @@ from django.db.models.base import (
 )
 from django.db.models.functions import (
     Concat,
+    Substr,
 )
 from django.db.transaction import (
     atomic,
@@ -131,9 +132,7 @@ class BaseExportEntitiesData(BaseOperationData):
 
     @property
     def _log_file_path(self) -> str:
-        """
-        Путь до лог файла.
-        """
+        """Путь до лог файла."""
         return os.path.join(settings.MEDIA_ROOT, settings.RDM_EXPORT_LOG_DIR, f'{self.command_id}.log')
 
     def _has_stage_created_or_in_progress(self, manager_id: str, entity: str) -> bool:
@@ -149,14 +148,10 @@ class BaseExportEntitiesData(BaseOperationData):
         return stage_created_or_in_progress
 
     def _fill_manager_entities_map(self, entity_storage: RegionalDataMartEntityStorage) -> None:
-        """
-        Заполнение словаря данных с классами менеджеров и их сущностями.
-        """
+        """Заполнение словаря данных с классами менеджеров и их сущностями."""
 
     def _find_exporting_entities_data_managers(self):
-        """
-        Поиск менеджеров Функций выгрузки данных по сущностям РВД.
-        """
+        """Поиск менеджеров Функций выгрузки данных по сущностям РВД."""
         logger.info('find exporting entities data manager..')
 
         entity_storage = RegionalDataMartEntityStorage()
@@ -179,9 +174,7 @@ class BaseExportEntitiesData(BaseOperationData):
         logger.info('finding exporting entities data manager finished.')
 
     def _export_entities_data(self, *args, **kwargs):
-        """
-        Выгрузка данных по указанным сущностям.
-        """
+        """Выгрузка данных по указанным сущностям."""
         logger.info('start exporting entities data..')
 
         kwargs['period_started_at'] = self.period_started_at
@@ -201,9 +194,7 @@ class BaseExportEntitiesData(BaseOperationData):
         logger.info('exporting entities data finished.')
 
     def _export(self, *args, **kwargs):
-        """
-        Выполнение действий команды.
-        """
+        """Выполнение действий команды."""
         logger.info(f'start exporting data of entities - {", ".join([entity.key for entity in self.entities])}..')
 
         self._find_exporting_entities_data_managers()
@@ -212,9 +203,7 @@ class BaseExportEntitiesData(BaseOperationData):
         logger.info('exporting entities data finished.')
 
     def export(self, *args, **kwargs):
-        """
-        Запускает экспорт данных.
-        """
+        """Запускает экспорт данных."""
         try:
             self._export(*args, **kwargs)
         except Exception as err:
@@ -254,19 +243,18 @@ class BaseExportLatestEntitiesData(BaseExportEntitiesData):
     def _set_description_to_async_task(self, exported_entities: Iterable[str]) -> None:
         """Добавляет в описание асинхронной задачи список выгруженных сущностей."""
         if exported_entities and self.task_id:
-            self.async_task.objects.filter(
-                pk=self.task_id,
-            ).update(
-                description=Concat(
-                    'description',
-                    Value(f': {", ".join(exported_entities)}')
-                ),
+            entities_str = ', '.join(exported_entities)
+
+            self.async_task.objects.filter(pk=self.task_id).update(
+                description=Substr(
+                    Concat('description', Value(f': {entities_str}')),
+                    1,
+                    self.async_task._meta.get_field('description').max_length
+                )
             )
 
     def _fill_manager_entities_map(self, entity_storage: RegionalDataMartEntityStorage) -> None:
-        """
-        Заполнение словаря данных с классами менеджеров и их сущностями.
-        """
+        """Заполнение словаря данных с классами менеджеров и их сущностями."""
         self._manager_entities_map = entity_storage.prepare_manager_entities_map(
             tags={REGIONAL_DATA_MART_INTEGRATION_EXPORTING_DATA},
         )
@@ -300,7 +288,6 @@ class BaseExportLatestEntitiesData(BaseExportEntitiesData):
             not_exported_model_ids = queryset.values_list('id', flat=True).iterator()
 
             with atomic():
-
                 for model_ids in make_chunks(
                     iterable=not_exported_model_ids,
                     size=settings.RDM_UPDATE_NON_EXPORTED_CHUNK_SIZE,
@@ -308,17 +295,13 @@ class BaseExportLatestEntitiesData(BaseExportEntitiesData):
                     queryset.filter(id__in=model_ids).update(modified=now)
 
     def _export_entities_data(self, *args, **kwargs) -> None:
-        """
-        Запуск Функций по для экспорта данных.
-        """
+        """Запуск Функций по для экспорта данных."""
         logger.info('export entities data..')
 
         # Массив с выгружаемыми сущностями для поля "Описание" в асинхронной задаче
         exported_entities = []
 
-        managers_max_period_ended = get_exporting_managers_max_period_ended_dates(
-            self._exporting_data_managers
-        )
+        managers_max_period_ended = get_exporting_managers_max_period_ended_dates(self._exporting_data_managers)
 
         for manager_class in self._exporting_data_managers:
             manager_last_exported = managers_max_period_ended.get(manager_class.uuid)
@@ -381,19 +364,16 @@ class UploadData(BaseOperationData):
         self.result = {
             'total_file_size': 0,  # Общий размер отправленных файлов
             'queue_is_full': False,  # Признак переполнения очереди
-            'uploaded_entities': ''  # Список сущностей, попавших в выгрузку
+            'uploaded_entities': '',  # Список сущностей, попавших в выгрузку
         }
 
     @property
     def _log_file_path(self) -> Union[str, bytes]:
-        """
-        Путь до лог файла.
-        """
+        """Путь до лог файла."""
         return os.path.join(settings.MEDIA_ROOT, settings.RDM_UPLOAD_LOG_DIR, 'upload_entity.log')
 
     def _add_file_handler(self) -> None:
         """Добавляет обработчик логов."""
-
         self._file_handler = logging.FileHandler(self._log_file_path)
 
         logging.getLogger('info_logger').addHandler(self._file_handler)
@@ -402,9 +382,7 @@ class UploadData(BaseOperationData):
     # TODO https://jira.bars.group/browse/EDUSCHL-22492. Вынужденная мера, т.к. при запуске команды не производится
     #  проверка готовности конфигов приложений. Нужно переработать механизм конфигурирования клиента загрузчика.
     def _configure_agent_client(self):
-        """
-        Конфигурирование клиента загрузчика данных в Витрину.
-        """
+        """Конфигурирование клиента загрузчика данных в Витрину."""
         import uploader_client
         from django.core.cache import (
             DEFAULT_CACHE_ALIAS,
@@ -414,6 +392,7 @@ class UploadData(BaseOperationData):
             RegionalDataMartEmulationUploaderConfig,
             RegionalDataMartUploaderConfig,
         )
+
         if settings.RDM_UPLOADER_CLIENT_ENABLE_REQUEST_EMULATION:
             uploader_client.set_config(
                 RegionalDataMartEmulationUploaderConfig(
@@ -422,7 +401,7 @@ class UploadData(BaseOperationData):
                     datamart_name=settings.RDM_UPLOADER_CLIENT_DATAMART_NAME,
                     timeout=1,
                     request_retries=1,
-                    file_status=settings.RDM_RESPONSE_FILE_STATUS
+                    file_status=settings.RDM_RESPONSE_FILE_STATUS,
                 )
             )
         elif settings.RDM_UPLOADER_CLIENT_USE_PROXY_API:
@@ -461,13 +440,11 @@ class UploadData(BaseOperationData):
                     self.data_cache.set(
                         TOTAL_ATTACHMENTS_SIZE_KEY,
                         queue_total_file_size,
-                        timeout=settings.RDM_REDIS_CACHE_TIMEOUT_SECONDS
+                        timeout=settings.RDM_REDIS_CACHE_TIMEOUT_SECONDS,
                     )
 
     def upload_data(self, *args, **kwargs):
-        """
-        Запускает отправку данных в витрину.
-        """
+        """Запускает отправку данных в витрину."""
         try:
             exporter = ExportQueueSender(self.data_cache, self.queue, settings.RDM_UPLOAD_DATA_TASK_EXPORT_STAGES)
             exporter.run()

{edu_rdm_integration-3.9.1.dist-info → edu_rdm_integration-3.9.2.dist-info}/METADATA

@@ -1,6 +1,6 @@
 Metadata-Version: 2.4
 Name: edu-rdm-integration
-Version: 3.9.1
+Version: 3.9.2
 Summary: Интеграция с Региональной витриной данных
 Author-email: BARS Group <education_dev@bars.group>
 Project-URL: Homepage, https://stash.bars-open.ru/projects/EDUBASE/repos/edu_rdm_integration/browse

{edu_rdm_integration-3.9.1.dist-info → edu_rdm_integration-3.9.2.dist-info}/RECORD

@@ -96,7 +96,7 @@ edu_rdm_integration/export_data/__init__.py,sha256=47DEQpj8HBSa-_TImW-5JCeuQeRkm
 edu_rdm_integration/export_data/actions.py,sha256=z3qMJJbgsiOCW8A_Ac5ThVBijK4dU_8VuOGrxEBNKso,10377
 edu_rdm_integration/export_data/consts.py,sha256=ZEi1kXMs-54KFKxkyGIQVwZ4d8OrOF_vLFQIjjWdSPQ,441
 edu_rdm_integration/export_data/dataclasses.py,sha256=IhftRopP4lS-m3ygdBU5Bz0HF71VSBP4JQ6-8VIVgtY,260
-edu_rdm_integration/export_data/export.py,sha256=qKvFRTcy2ZgaBMn6mEi_OsueNXZ7j_v2neu2Lu99MEs,19447
+edu_rdm_integration/export_data/export.py,sha256=kL4d7KR3K7Vdr8f6AREihi10zfNuuawgMAZ5p770O0M,19340
 edu_rdm_integration/export_data/export_manager.py,sha256=ySAbrIiVo690HXGsEC_nxhF5FHCRl18rm5E4Ytr50VU,13285
 edu_rdm_integration/export_data/generators.py,sha256=UIoX49rQnUwwC9PL17te7Rb4WRDe_5ShYQ1Rygf36NQ,4010
 edu_rdm_integration/export_data/helpers.py,sha256=JKL4MC0IuoJv72NNnL8hG7HLy7kNHOXFp1uLCKF15AM,2900
@@ -191,8 +191,8 @@ edu_rdm_integration/uploader_log/enums.py,sha256=rgSO3BL2rh2xpfm0Pt4waQW8fB1VMJL
 edu_rdm_integration/uploader_log/managers.py,sha256=OFdToWV8qhdfeGNpd-UWAmSEISzixmVQ6LF75EW7gzA,3248
 edu_rdm_integration/uploader_log/ui.py,sha256=7O63XJJYnJBLVU9aGuSyMOxFYtcj_Kyf5u6HIiuxl9A,1788
 edu_rdm_integration/uploader_log/templates/ui-js/object-grid-buttons.js,sha256=2xyGe0wdVokM0RhpzRzcRvJPBkBmPe3SlZry4oP4Nzs,6201
-edu_rdm_integration-3.9.1.dist-info/licenses/LICENSE,sha256=uw43Gjjj-1vXWCItfSrNDpbejnOwZMrNerUh8oWbq8Q,3458
-edu_rdm_integration-3.9.1.dist-info/METADATA,sha256=ysbYJGTQJxfNV_7dWYSeBiMa7wELVKl8tSHIOBCK5LE,35263
-edu_rdm_integration-3.9.1.dist-info/WHEEL,sha256=1tXe9gY0PYatrMPMDd6jXqjfpz_B-Wqm32CPfRC58XU,91
-edu_rdm_integration-3.9.1.dist-info/top_level.txt,sha256=nRJV0O14UtNE-jGIYG03sohgFnZClvf57H5m6VBXe9Y,20
-edu_rdm_integration-3.9.1.dist-info/RECORD,,
+edu_rdm_integration-3.9.2.dist-info/licenses/LICENSE,sha256=uw43Gjjj-1vXWCItfSrNDpbejnOwZMrNerUh8oWbq8Q,3458
+edu_rdm_integration-3.9.2.dist-info/METADATA,sha256=GQWJCXP_NB6n9u7nzyctdaY3WjBMJPgRpukgjniFwxY,35263
+edu_rdm_integration-3.9.2.dist-info/WHEEL,sha256=1tXe9gY0PYatrMPMDd6jXqjfpz_B-Wqm32CPfRC58XU,91
+edu_rdm_integration-3.9.2.dist-info/top_level.txt,sha256=nRJV0O14UtNE-jGIYG03sohgFnZClvf57H5m6VBXe9Y,20
+edu_rdm_integration-3.9.2.dist-info/RECORD,,