edu-rdm-integration 3.9.2__py3-none-any.whl → 3.10.1__py3-none-any.whl

edu_rdm_integration/collect_data/calculated/base/helpers.py

@@ -1,32 +0,0 @@
-from edu_rdm_integration.collect_data.base.helpers import (
-    BaseCollectingDataFunctionHelper,
-    BaseCollectingDataRunnerHelper,
-)
-from edu_rdm_integration.collect_data.calculated.base.caches import (
-    BaseCollectingCalculatedExportedDataFunctionCacheStorage,
-    BaseCollectingCalculatedExportedDataRunnerCacheStorage,
-)
-
-
-class BaseCollectingCalculatedExportedDataRunnerHelper(BaseCollectingDataRunnerHelper):
-    """
-    Базовый класс помощников ранеров функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_cache_class(self) -> type[BaseCollectingCalculatedExportedDataRunnerCacheStorage]:
-        """
-        Возвращает класс кеша помощника ранера.
-        """
-        return BaseCollectingCalculatedExportedDataRunnerCacheStorage
-
-
-class BaseCollectingCalculatedExportedDataFunctionHelper(BaseCollectingDataFunctionHelper):
-    """
-    Базовый класс помощников функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_cache_class(self) -> type[BaseCollectingCalculatedExportedDataFunctionCacheStorage]:
-        """
-        Возвращает класс кеша помощника функции.
-        """
-        return BaseCollectingCalculatedExportedDataFunctionCacheStorage

edu_rdm_integration/collect_data/calculated/base/managers.py

@@ -1,23 +0,0 @@
-from abc import (
-    ABCMeta,
-)
-
-from edu_rdm_integration.collect_data.base.managers import (
-    BaseCollectingDataRunnerManager,
-)
-from edu_rdm_integration.collect_data.calculated.base.runners import (
-    BaseCollectingCalculatedExportedDataRunner,
-)
-
-
-class BaseCollectingCalculatedExportedDataRunnerManager(BaseCollectingDataRunnerManager, metaclass=ABCMeta):
-    """
-    Менеджер ранеров функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    @classmethod
-    def _prepare_runner_class(cls) -> type[BaseCollectingCalculatedExportedDataRunner]:
-        """
-        Возвращает класс ранера.
-        """
-        return BaseCollectingCalculatedExportedDataRunner

edu_rdm_integration/collect_data/calculated/base/results.py

@@ -1,16 +0,0 @@
-from edu_rdm_integration.adapters.results import (
-    WebEduFunctionResult,
-    WebEduRunnerResult,
-)
-
-
-class BaseCollectingCalculatedExportedDataRunnerResult(WebEduRunnerResult):
-    """
-    Базовый класс результатов работы ранеров функций сбора расчетных данных для "Региональной витрины данных".
-    """
-
-
-class BaseCollectingCalculatedExportedDataFunctionResult(WebEduFunctionResult):
-    """
-    Базовый класс результатов работы функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/collect_data/calculated/base/runners.py

@@ -1,36 +0,0 @@
-from edu_rdm_integration.collect_data.base.runners import (
-    BaseCollectingDataRunner,
-)
-from edu_rdm_integration.collect_data.calculated.base.helpers import (
-    BaseCollectingCalculatedExportedDataRunnerHelper,
-)
-from edu_rdm_integration.collect_data.calculated.base.results import (
-    BaseCollectingCalculatedExportedDataRunnerResult,
-)
-from edu_rdm_integration.collect_data.calculated.base.validators import (
-    BaseCollectingCalculatedExportedDataRunnerValidator,
-)
-
-
-class BaseCollectingCalculatedExportedDataRunner(BaseCollectingDataRunner):
-    """
-    Базовый класс ранеров функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_helper_class(self) -> type[BaseCollectingCalculatedExportedDataRunnerHelper]:
-        """
-        Возвращает класс помощника ранера функции.
-        """
-        return BaseCollectingCalculatedExportedDataRunnerHelper
-
-    def _prepare_validator_class(self) -> type[BaseCollectingCalculatedExportedDataRunnerValidator]:
-        """
-        Возвращает класс валидатора ранера функции.
-        """
-        return BaseCollectingCalculatedExportedDataRunnerValidator
-
-    def _prepare_result_class(self) -> type[BaseCollectingCalculatedExportedDataRunnerResult]:
-        """
-        Возвращает класс результата ранера функции.
-        """
-        return BaseCollectingCalculatedExportedDataRunnerResult

edu_rdm_integration/collect_data/calculated/base/validators.py

@@ -1,28 +0,0 @@
-from edu_rdm_integration.adapters.validators import (
-    WebEduFunctionValidator,
-    WebEduRunnerValidator,
-)
-
-
-class BaseCollectingCalculatedExportedDataRunnerValidator(WebEduRunnerValidator):
-    """
-    Базовый класс валидаторов ранеров функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Расширение метода валидации.
-        """
-        super().validate(runnable=runnable)
-
-
-class BaseCollectingCalculatedExportedDataFunctionValidator(WebEduFunctionValidator):
-    """
-    Базовый класс валидаторов функций сбора расчетных данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Расширение метода валидации.
-        """
-        super().validate(runnable=runnable)

edu_rdm_integration/collect_data/helpers.py

@@ -1,92 +0,0 @@
-from datetime import (
-    date,
-    datetime,
-    time,
-    timedelta,
-)
-
-from django.conf import (
-    settings,
-)
-from django.db.models import (
-    OuterRef,
-    Subquery,
-    Value,
-)
-from django.db.models.functions import (
-    Coalesce,
-)
-from django.db.transaction import (
-    atomic,
-)
-
-from educommon import (
-    logger,
-)
-
-from edu_rdm_integration.models import (
-    CollectingDataStageStatus,
-    CollectingDataSubStageStatus,
-    CollectingExportedDataStage,
-    CollectingExportedDataSubStage,
-)
-
-
-@atomic
-def set_failed_status_suspended_collecting_data_stages() -> dict[str, int]:
-    """Установить статус 'Завершено с ошибками' для зависших этапов и подэтапов сбора.
-
-    Сборка считается зависшей в случае если за определенное в параметре RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT время,
-    отсутствуют изменения в связанных подэтапах. Параметр RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT определяется
-    в настройках приложения.
-    """
-    changed_status_result = {
-        'change_stage_count': 0,
-        'change_sub_stage_count': 0,
-    }
-
-    current_datetime = datetime.now()
-    suspended_time_at = current_datetime - timedelta(minutes=settings.RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT)
-
-    suspended_stage_ids = set(
-        CollectingExportedDataStage.objects.annotate(
-            last_sub_stage_started_at=Coalesce(
-                Subquery(
-                    CollectingExportedDataSubStage.objects.filter(
-                        stage_id=OuterRef('pk')
-                    ).values('started_at').order_by('-started_at')[:1]
-                ),
-                Value(datetime.combine(date.min, time.min))
-            )
-        ).filter(
-            last_sub_stage_started_at__lt=suspended_time_at,
-            status__in=(
-                CollectingDataStageStatus.CREATED.key,
-                CollectingDataStageStatus.IN_PROGRESS.key,
-            ),
-        ).values_list('pk', flat=True)
-    )
-
-    if suspended_stage_ids:
-        logger.info(f'find suspended CollectingExportedDataStage: {", ".join(map(str, suspended_stage_ids))}..')
-
-        change_stage_count = CollectingExportedDataStage.objects.filter(
-            pk__in=suspended_stage_ids,
-        ).update(
-            status=CollectingDataStageStatus.FAILED.key,
-            ended_at=current_datetime,
-        )
-
-        change_sub_stage_count = CollectingExportedDataSubStage.objects.filter(
-            stage_id__in=suspended_stage_ids,
-        ).update(
-            status=CollectingDataSubStageStatus.FAILED.key,
-            ended_at=current_datetime,
-        )
-
-        changed_status_result.update({
-            'change_stage_count': change_stage_count,
-            'change_sub_stage_count': change_sub_stage_count,
-        })
-
-    return changed_status_result

edu_rdm_integration/collect_data/non_calculated/base/errors.py

@@ -1,9 +0,0 @@
-from edu_rdm_integration.adapters.errors import (
-    WebEduError,
-)
-
-
-class BaseCollectingExportedDataError(WebEduError):
-    """
-    Базовая ошибка функций сбора данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/collect_data/non_calculated/base/helpers.py

@@ -1,32 +0,0 @@
-from edu_rdm_integration.collect_data.base.helpers import (
-    BaseCollectingDataFunctionHelper,
-    BaseCollectingDataRunnerHelper,
-)
-from edu_rdm_integration.collect_data.non_calculated.base.caches import (
-    BaseCollectingExportedDataFunctionCacheStorage,
-    BaseCollectingExportedDataRunnerCacheStorage,
-)
-
-
-class BaseCollectingExportedDataRunnerHelper(BaseCollectingDataRunnerHelper):
-    """
-    Базовый класс помощников ранеров функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_cache_class(self) -> type[BaseCollectingExportedDataRunnerCacheStorage]:
-        """
-        Возвращает класс кеша помощника ранера.
-        """
-        return BaseCollectingExportedDataRunnerCacheStorage
-
-
-class BaseCollectingExportedDataFunctionHelper(BaseCollectingDataFunctionHelper):
-    """
-    Базовый класс помощников функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_cache_class(self) -> type[BaseCollectingExportedDataFunctionCacheStorage]:
-        """
-        Возвращает класс кеша помощника функции.
-        """
-        return BaseCollectingExportedDataFunctionCacheStorage

edu_rdm_integration/collect_data/non_calculated/base/managers.py

@@ -1,23 +0,0 @@
-from abc import (
-    ABCMeta,
-)
-
-from edu_rdm_integration.collect_data.base.managers import (
-    BaseCollectingDataRunnerManager,
-)
-from edu_rdm_integration.collect_data.non_calculated.base.runners import (
-    BaseCollectingExportedDataRunner,
-)
-
-
-class BaseCollectingExportedDataRunnerManager(BaseCollectingDataRunnerManager, metaclass=ABCMeta):
-    """
-    Менеджер ранеров функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    @classmethod
-    def _prepare_runner_class(cls) -> type[BaseCollectingExportedDataRunner]:
-        """
-        Возвращает класс ранера.
-        """
-        return BaseCollectingExportedDataRunner

edu_rdm_integration/collect_data/non_calculated/base/results.py

@@ -1,16 +0,0 @@
-from edu_rdm_integration.adapters.results import (
-    WebEduFunctionResult,
-    WebEduRunnerResult,
-)
-
-
-class BaseCollectingExportedDataRunnerResult(WebEduRunnerResult):
-    """
-    Базовый класс результатов работы ранеров функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-
-class BaseCollectingExportedDataFunctionResult(WebEduFunctionResult):
-    """
-    Базовый класс результатов работы функций сбора данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/collect_data/non_calculated/base/runners.py

@@ -1,36 +0,0 @@
-from edu_rdm_integration.collect_data.base.runners import (
-    BaseCollectingDataRunner,
-)
-from edu_rdm_integration.collect_data.non_calculated.base.helpers import (
-    BaseCollectingExportedDataRunnerHelper,
-)
-from edu_rdm_integration.collect_data.non_calculated.base.results import (
-    BaseCollectingExportedDataRunnerResult,
-)
-from edu_rdm_integration.collect_data.non_calculated.base.validators import (
-    BaseCollectingExportedDataRunnerValidator,
-)
-
-
-class BaseCollectingExportedDataRunner(BaseCollectingDataRunner):
-    """
-    Базовый класс ранеров функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    def _prepare_helper_class(self) -> type[BaseCollectingExportedDataRunnerHelper]:
-        """
-        Возвращает класс помощника ранера функции.
-        """
-        return BaseCollectingExportedDataRunnerHelper
-
-    def _prepare_validator_class(self) -> type[BaseCollectingExportedDataRunnerValidator]:
-        """
-        Возвращает класс валидатора ранера функции.
-        """
-        return BaseCollectingExportedDataRunnerValidator
-
-    def _prepare_result_class(self) -> type[BaseCollectingExportedDataRunnerResult]:
-        """
-        Возвращает класс результата ранера функции.
-        """
-        return BaseCollectingExportedDataRunnerResult

edu_rdm_integration/collect_data/non_calculated/base/validators.py

@@ -1,28 +0,0 @@
-from edu_rdm_integration.adapters.validators import (
-    WebEduFunctionValidator,
-    WebEduRunnerValidator,
-)
-
-
-class BaseCollectingExportedDataRunnerValidator(WebEduRunnerValidator):
-    """
-    Базовый класс валидаторов ранеров функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Выполнение валидации.
-        """
-        super().validate(runnable=runnable)
-
-
-class BaseCollectingExportedDataFunctionValidator(WebEduFunctionValidator):
-    """
-    Базовый класс валидаторов функций сбора данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Выполнение валидации.
-        """
-        super().validate(runnable=runnable)

edu_rdm_integration/enum_register/register.py

@@ -1,79 +0,0 @@
-import inspect
-import sys
-from importlib import (
-    import_module,
-)
-from operator import (
-    attrgetter,
-)
-from typing import (
-    Iterable,
-)
-
-from django.apps import (
-    apps,
-)
-from django.db import (
-    models,
-)
-
-from educommon.integration_entities.entities import (
-    BaseEntity,
-)
-from m3_db_utils.mixins import (
-    BaseEnumRegisterMixin,
-)
-
-from edu_rdm_integration.enum_register.mixins import (
-    EntityEnumRegisterMixin,
-    ModelEnumRegisterMixin,
-)
-
-
-def register_classes(classes: Iterable[type[BaseEnumRegisterMixin]]) -> None:
-    """Вызывает метод регистрации в модель-перечисление
-    у переданных классов.
-
-    Args:
-        classes: Классы, поддерживающие интерфейс регистрации.
-    """
-    classes = sorted(classes, key=attrgetter('order_number'))
-
-    for enum_class in classes:
-        enum_class.register()
-
-
-def is_register_model(model: models.Model) -> bool:
-    """Проверяет, является ли класс регистрируемой моделью."""
-    return issubclass(model, ModelEnumRegisterMixin)
-
-
-def is_register_entity(class_) -> bool:
-    """Проверяет, является ли класс регистрируемой сущностью."""
-    return (
-        inspect.isclass(class_) and
-        issubclass(class_, BaseEntity) and
-        issubclass(class_, EntityEnumRegisterMixin)
-    )
-
-
-def register_models() -> None:
-    """Регистрирует модели в RegionalDataMartModelEnum."""
-    register_classes([
-        m for m in apps.get_models() if is_register_model(m)
-    ])
-
-
-def register_entities(import_path: str) -> None:
-    """Находит регистрируемые сущности в модуле по переданному пути и
-    регистрирует в RegionalDataMartEntityEnum.
-
-    Args:
-        import_path: Путь до пакета, хранящего классы сущностей;
-    """
-    import_module(import_path)
-    entities_module = sys.modules[import_path]
-
-    register_classes([
-        c[1] for c in inspect.getmembers(entities_module, is_register_entity)
-    ])

edu_rdm_integration/export_data/base/errors.py

@@ -1,9 +0,0 @@
-from edu_rdm_integration.adapters.errors import (
-    WebEduError,
-)
-
-
-class BaseExportDataError(WebEduError):
-    """
-    Базовая ошибка функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/export_data/base/presenters.py

@@ -1,13 +0,0 @@
-from abc import (
-    ABCMeta,
-)
-
-from edu_rdm_integration.adapters.presenters import (
-    WebEduResultPresenter,
-)
-
-
-class BaseExportDataResultPresenter(WebEduResultPresenter, metaclass=ABCMeta):
-    """
-    Презентер результата работы функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/export_data/base/results.py

@@ -1,16 +0,0 @@
-from edu_rdm_integration.adapters.results import (
-    WebEduFunctionResult,
-    WebEduRunnerResult,
-)
-
-
-class BaseExportDataRunnerResult(WebEduRunnerResult):
-    """
-    Базовый класс результатов работы ранеров функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """
-
-
-class BaseExportDataFunctionResult(WebEduFunctionResult):
-    """
-    Базовый класс результатов работы функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """

edu_rdm_integration/export_data/base/validators.py

@@ -1,28 +0,0 @@
-from edu_rdm_integration.adapters.validators import (
-    WebEduFunctionValidator,
-    WebEduRunnerValidator,
-)
-
-
-class BaseExportDataRunnerValidator(WebEduRunnerValidator):
-    """
-    Базовый класс валидаторов ранеров функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Выполнение валидации.
-        """
-        super().validate(runnable=runnable)
-
-
-class BaseExportDataFunctionValidator(WebEduFunctionValidator):
-    """
-    Базовый класс валидаторов функций выгрузки данных для интеграции с "Региональная витрина данных".
-    """
-
-    def validate(self, runnable):
-        """
-        Выполнение валидации.
-        """
-        super().validate(runnable=runnable)

edu_rdm_integration/export_data/helpers.py

@@ -1,92 +0,0 @@
-from datetime import (
-    date,
-    datetime,
-    time,
-    timedelta,
-)
-
-from django.conf import (
-    settings,
-)
-from django.db.models import (
-    OuterRef,
-    Subquery,
-    Value,
-)
-from django.db.models.functions import (
-    Coalesce,
-)
-from django.db.transaction import (
-    atomic,
-)
-
-from educommon import (
-    logger,
-)
-
-from edu_rdm_integration.models import (
-    ExportingDataStage,
-    ExportingDataStageStatus,
-    ExportingDataSubStage,
-    ExportingDataSubStageStatus,
-)
-
-
-@atomic
-def set_failed_status_suspended_exporting_data_stages() -> dict[str, int]:
-    """Установить статус 'Завершено с ошибками' для зависших этапов и подэтапов экспорта.
-
-    Экспорт считается зависшим в случае если за определенное в параметре RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT время,
-    отсутствуют изменения в связанных подэтапах. Параметр RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT определяется
-    в настройках приложения.
-    """
-    changed_status_result = {
-        'change_stage_count': 0,
-        'change_sub_stage_count': 0,
-    }
-
-    current_datetime = datetime.now()
-    suspended_time_at = current_datetime - timedelta(minutes=settings.RDM_CHECK_SUSPEND_TASK_STAGE_TIMEOUT)
-
-    suspended_stage_ids = set(
-        ExportingDataStage.objects.annotate(
-            last_sub_stage_started_at=Coalesce(
-                Subquery(
-                    ExportingDataSubStage.objects.filter(
-                        stage_id=OuterRef('pk')
-                    ).values('started_at').order_by('-started_at')[:1]
-                ),
-                Value(datetime.combine(date.min, time.min))
-            )
-        ).filter(
-            last_sub_stage_started_at__lt=suspended_time_at,
-            status__in=(
-                ExportingDataStageStatus.CREATED.key,
-                ExportingDataStageStatus.IN_PROGRESS.key,
-            ),
-        ).values_list('pk', flat=True)
-    )
-
-    if suspended_stage_ids:
-        logger.info(f'find suspended ExportingDataStage: {", ".join(map(str, suspended_stage_ids))}..')
-
-        change_stage_count = ExportingDataStage.objects.filter(
-            pk__in=suspended_stage_ids,
-        ).update(
-            status=ExportingDataStageStatus.FAILED.key,
-            ended_at=current_datetime,
-        )
-
-        change_sub_stage_count = ExportingDataSubStage.objects.filter(
-            stage_id__in=suspended_stage_ids,
-        ).update(
-            status=ExportingDataSubStageStatus.FAILED.key,
-            ended_at=current_datetime,
-        )
-
-        changed_status_result.update({
-            'change_stage_count': change_stage_count,
-            'change_sub_stage_count': change_sub_stage_count,
-        })
-
-    return changed_status_result