edu-rdm-integration 3.4.9__py3-none-any.whl → 3.5.1__py3-none-any.whl

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (67) hide show
  1. edu_rdm_integration/adapters/functions.py +3 -6
  2. edu_rdm_integration/adapters/helpers.py +2 -5
  3. edu_rdm_integration/adapters/managers.py +1 -4
  4. edu_rdm_integration/adapters/runners.py +9 -13
  5. edu_rdm_integration/apps.py +1 -1
  6. edu_rdm_integration/collect_data/base/caches.py +5 -7
  7. edu_rdm_integration/collect_data/base/helpers.py +1 -5
  8. edu_rdm_integration/collect_data/base/managers.py +4 -7
  9. edu_rdm_integration/collect_data/base/mixins.py +5 -8
  10. edu_rdm_integration/collect_data/calculated/base/functions.py +3 -6
  11. edu_rdm_integration/collect_data/calculated/base/helpers.py +2 -6
  12. edu_rdm_integration/collect_data/calculated/base/managers.py +1 -4
  13. edu_rdm_integration/collect_data/calculated/base/runners.py +3 -7
  14. edu_rdm_integration/collect_data/calculated/strategies.py +1 -2
  15. edu_rdm_integration/collect_data/collect.py +6 -10
  16. edu_rdm_integration/collect_data/generators.py +4 -6
  17. edu_rdm_integration/collect_data/helpers.py +1 -4
  18. edu_rdm_integration/collect_data/non_calculated/base/caches.py +2 -4
  19. edu_rdm_integration/collect_data/non_calculated/base/functions.py +3 -6
  20. edu_rdm_integration/collect_data/non_calculated/base/helpers.py +2 -6
  21. edu_rdm_integration/collect_data/non_calculated/base/managers.py +1 -4
  22. edu_rdm_integration/collect_data/non_calculated/base/runners.py +3 -7
  23. edu_rdm_integration/collect_data/non_calculated/strategies.py +1 -2
  24. edu_rdm_integration/collect_data/tests.py +3 -5
  25. edu_rdm_integration/entities.py +21 -22
  26. edu_rdm_integration/enum_register/mixins.py +7 -10
  27. edu_rdm_integration/enum_register/register.py +1 -2
  28. edu_rdm_integration/export_data/base/caches.py +1 -5
  29. edu_rdm_integration/export_data/base/functions.py +5 -7
  30. edu_rdm_integration/export_data/base/helpers.py +9 -13
  31. edu_rdm_integration/export_data/base/managers.py +3 -6
  32. edu_rdm_integration/export_data/base/runners.py +3 -7
  33. edu_rdm_integration/export_data/export.py +5 -9
  34. edu_rdm_integration/export_data/export_manger.py +1 -2
  35. edu_rdm_integration/export_data/generators.py +2 -3
  36. edu_rdm_integration/export_data/helpers.py +1 -4
  37. edu_rdm_integration/export_data/queue.py +3 -6
  38. edu_rdm_integration/export_data/strategies.py +1 -2
  39. edu_rdm_integration/function_templates/function_collect_data_template/functions.py-tpl +8 -9
  40. edu_rdm_integration/function_templates/function_collect_data_template/helpers.py-tpl +4 -6
  41. edu_rdm_integration/function_templates/function_collect_data_template/managers.py-tpl +2 -4
  42. edu_rdm_integration/function_templates/function_collect_data_template/runners.py-tpl +5 -7
  43. edu_rdm_integration/function_templates/function_collect_data_template/tests.py-tpl +1 -6
  44. edu_rdm_integration/function_templates/function_export_data_template/caches.py-tpl +1 -2
  45. edu_rdm_integration/function_templates/function_export_data_template/functions.py-tpl +5 -7
  46. edu_rdm_integration/function_templates/function_export_data_template/helpers.py-tpl +2 -6
  47. edu_rdm_integration/function_templates/function_export_data_template/managers.py-tpl +3 -6
  48. edu_rdm_integration/function_templates/function_export_data_template/runners.py-tpl +5 -7
  49. edu_rdm_integration/helpers.py +8 -11
  50. edu_rdm_integration/management/commands/async_fix_attachment_size.py +3 -7
  51. edu_rdm_integration/management/commands/check_upload_status.py +4 -4
  52. edu_rdm_integration/mapping.py +2 -7
  53. edu_rdm_integration/migrations/0013_set_attachment_size.py +4 -3
  54. edu_rdm_integration/models.py +3 -5
  55. edu_rdm_integration/redis_cache.py +1 -2
  56. edu_rdm_integration/registry/ui.py +5 -3
  57. edu_rdm_integration/storages.py +9 -15
  58. edu_rdm_integration/tasks.py +5 -7
  59. edu_rdm_integration/typing.py +1 -1
  60. edu_rdm_integration/uploader_log/actions.py +1 -1
  61. edu_rdm_integration/utils.py +6 -14
  62. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/METADATA +184 -58
  63. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/RECORD +67 -67
  64. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/LICENSE +0 -0
  65. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/WHEEL +0 -0
  66. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/namespace_packages.txt +0 -0
  67. {edu_rdm_integration-3.4.9.dist-info → edu_rdm_integration-3.5.1.dist-info}/top_level.txt +0 -0
@@ -1,6 +1,6 @@
1
1
  Metadata-Version: 2.1
2
2
  Name: edu-rdm-integration
3
- Version: 3.4.9
3
+ Version: 3.5.1
4
4
  Summary: Интеграция с Региональной витриной данных
5
5
  Home-page:
6
6
  Download-URL:
@@ -11,8 +11,6 @@ Classifier: Development Status :: 3 - Alpha
11
11
  Classifier: License :: OSI Approved :: Apache Software License
12
12
  Classifier: Programming Language :: Python
13
13
  Classifier: Programming Language :: Python :: 3
14
- Classifier: Programming Language :: Python :: 3.7
15
- Classifier: Programming Language :: Python :: 3.8
16
14
  Classifier: Programming Language :: Python :: 3.9
17
15
  Classifier: Intended Audience :: Developers
18
16
  Classifier: Environment :: Console
@@ -73,7 +71,7 @@ Requires-Dist: uploader-client <1,>=0.2.1
73
71
 
74
72
  ## Требования к окружению
75
73
 
76
- Для работы требуется Python >=3.7. Так же в зависимостях есть внутренние пакеты:
74
+ Для работы требуется Python >=3.9. Так же в зависимостях есть внутренние пакеты:
77
75
 
78
76
  - educommon;
79
77
  - function-tools;
@@ -303,238 +301,319 @@ Requires-Dist: uploader-client <1,>=0.2.1
303
301
  ### Удалено
304
302
 
305
303
 
306
- ## 3.4.9 - 2024-12-28
304
+ ## [3.5.1] - 2025-02-04
305
+
306
+ Изменена очередность обновления моделей при сборе. Обработка связанных моделей производится ранее основной.
307
+
308
+ ### Изменено
309
+
310
+ - [EDUSCHL-23133](https://jira.bars.group/browse/EDUSCHL-23133)
311
+ Изменение в периодической задаче TransferLatestEntitiesDataPeriodicTask: добавление связанных моделей перед
312
+ основной моделью для обеспечения целостности данных при сборе и экспорте.
313
+
314
+
315
+ ## [3.5.0] - 2024-12-28
316
+
317
+ Внесены изменения в CHANGELOG.md для соответствия принятому формату.
318
+
319
+ ### Добавлено
320
+
321
+ - [EDUCLLG-8818](https://jira.bars.group/browse/EDUCLLG-8818)
322
+ В шаблонах добавлена типизация в `functions` для `helper`-а и в `helpers` - для `cache`.
307
323
 
308
324
  ### Исправлено
325
+
326
+ - [EDUCLLG-8818](https://jira.bars.group/browse/EDUCLLG-8818)
327
+ Добавлено использование встроенных типов для типизации вместо импортируемых из `typing`.
328
+
329
+ ### Удалено
330
+
331
+ - [EDUCLLG-8818](https://jira.bars.group/browse/EDUCLLG-8818)
332
+ Убран бесполезный `setUp` в шаблонах `tests.py`.
333
+
334
+
335
+ ## [3.4.9] - 2024-12-28
336
+
337
+ Повышение версии пакета до 3.4.9.
338
+
339
+ ### Исправлено
340
+
309
341
  - Исправлено отображение таблицы в `README.md`;
310
342
  - Из шаблонов убраны строки, состоящие из пробелов.
311
343
 
312
344
 
313
- ## 3.4.8 - 2024-11-14
345
+ ## [3.4.8] - 2024-11-14
346
+
314
347
  Повышение версии пакета до 3.4.8.
315
348
 
316
- ## Исправлено
349
+ ### Исправлено
350
+
317
351
  - [EDUKNDG-14586](https://jira.bars.group/browse/EDUKNDG-14586)
318
352
  Повышение версии пакета до 3.4.8.
319
353
 
320
354
 
321
- ## 3.4.7 - 2024-11-14
355
+ ## [3.4.7] - 2024-11-14
356
+
322
357
  Добавлена настройка отображения пункта меню "Региональная витрина данных"
323
358
 
324
- ## Добавлено
359
+ ### Добавлено
360
+
325
361
  - [EDUKNDG-14586](https://jira.bars.group/browse/EDUKNDG-14586)
326
362
  Добавлена настройка отображения пункта меню "Региональная витрина данных"
327
363
 
328
364
 
329
- ## 3.4.6 - 2024-11-12
365
+ ## [3.4.6] - 2024-11-12
366
+
330
367
  Исправлена ошибка формирования SQL-запроса с наименованиями таблиц (например, group),
331
368
  совпадающими с зарезервированными словами языка SQL.
332
369
 
333
- ## Исправлено
370
+ ### Исправлено
371
+
334
372
  - [EDUKNDG-14586](https://jira.bars.group/browse/EDUKNDG-14586)
335
373
  Наименование таблицы обернуто в двойные кавычки при формировании строки SQL-запроса.
336
374
 
337
375
 
338
- ## 3.4.5 - 2024-11-01
376
+ ## [3.4.5] - 2024-11-01
377
+
339
378
  Добавлена обработка ошибок чтения файла при отправке данных в РВД (UploadDataAsyncTask)
340
379
 
341
- ## Исправлено
380
+ ### Исправлено
381
+
342
382
  - [EDUSCHL-22734](https://jira.bars.group/browse/EDUSCHL-22734)
343
383
  Добавлена обработка ошибок чтения файла при отправке данных в РВД (UploadDataAsyncTask)
344
384
 
345
385
 
346
- ## 3.4.4 - 2024-10-23
386
+ ## [3.4.4] - 2024-10-23
387
+
347
388
  Добавлена ассинхронная менедж-команда простановки размеров файлов выгрузки в модель ExportingDataSubStageAttachment
348
389
 
349
- ## Исправлено
390
+ ### Исправлено
391
+
350
392
  - [EDUSCHL-22651](https://jira.bars.group/browse/EDUSCHL-22651)
351
393
  Добавлена ассинхронная менедж-команда простановки размеров файлов выгрузки в модель ExportingDataSubStageAttachment
352
394
 
353
395
 
354
- ## 3.4.3 - 2024-10-17
396
+ ## [3.4.3] - 2024-10-17
397
+
355
398
  Исправлена миграция простановки размеров файлов выгрузки в модель ExportingDataSubStageAttachment
356
399
 
400
+ ### Исправлено
357
401
 
358
- ## Исправлено
359
402
  - [EDUSCHL-22651](https://jira.bars.group/browse/EDUSCHL-22651)
360
403
  Исправлена миграция простановки размеров файлов выгрузки в модель ExportingDataSubStageAttachment
361
404
 
362
405
 
363
- ## 3.4.2 - 2024-10-15
406
+ ## [3.4.2 ]- 2024-10-15
407
+
364
408
  Добавлены отдельные параметры по управлению временем запуска UploadDataAsyncTask
365
409
 
366
- ## Добавлено
410
+ ### Добавлено
411
+
367
412
  - [EDUSCHL-22166](https://jira.bars.group/browse/EDUSCHL-22166)
368
413
  Добавлены отдельные параметры по управлению временем запуска UploadDataAsyncTask
369
414
 
370
415
 
371
- ## 3.4.1 - 2024-09-26
416
+ ## [3.4.1 ]- 2024-09-26
417
+
372
418
  Добавлена документация по сбору/выгрузке сущностей для ЭДС, ЭК
373
419
 
374
- ## Добавлено
420
+ ### Добавлено
421
+
375
422
  - [EDUKNDG-14518](https://jira.bars.group/browse/EDUKNDG-14518)
376
423
  Добавлена документация по сбору/выгрузке сущностей для ЭДС, ЭК
377
424
 
378
425
 
379
- ## 3.4.0 - 2024-09-25
426
+ ## [3.4.0] - 2024-09-25
427
+
380
428
  В базовый класс тестирования функций сбора добавлена поддержка формата PhoneNumber для формирования
381
429
  экземпляра модели AuditLog.
382
430
  Повышена версия зависимости educommon >= 3.11.0.
383
431
  Вынесены утилиты и базовый класс для логирования и сбора по модели в рамках сущности
384
432
 
385
- ## Добавлено
433
+ ### Добавлено
434
+
386
435
  - [EDUSCHL-22378](https://jira.bars.group/browse/EDUSCHL-22378)
387
436
  Реализация поля моделей Django содержащего номер телефона
388
437
 
389
438
  ### Изменено
439
+
390
440
  - [EDUKNDG-14516](https://jira.bars.group/browse/EDUKNDG-14516)
391
441
  PATCH Вынесены утилиты и базовый класс для логирования и сбора по модели в рамках сущности
392
442
 
393
443
 
394
- ## 3.3.8 - 2024-10-14
444
+ ## [3.3.8] - 2024-10-14
445
+
395
446
  Задача UploadDataAsyncTask изменена с PeriodicAsyncTask на UploadDataAsyncTask
447
+
448
+ ### Изменено
449
+
396
450
  - [EDUSCHL-22519]https://jira.bars.group/browse/EDUSCHL-22519
397
451
  PATCH Задача UploadDataAsyncTask изменена с PeriodicAsyncTask на UploadDataAsyncTask
398
452
 
399
453
 
400
- ## 3.3.7 - 2024-09-06
454
+ ## [3.3.7] - 2024-09-06
455
+
401
456
  Добавлены команда (UploadEntitiesData) и модель (UploadDataCommand) для логирования и запуска выгрузки данных в витрину
457
+
458
+ ### Добавлено
459
+
402
460
  - [EDUSCHL-22042](https://jira.bars.group/browse/EDUSCHL-22042)
403
461
  PATCH Добавлены команда (UploadEntitiesData) и модель (UploadDataCommand) для логирования и запуска выгрузки данных
404
- в витрину
462
+ в витрину
405
463
 
406
464
 
407
- ## 3.3.6 - 2024-09-02
465
+ ## [3.3.6] - 2024-09-02
466
+
408
467
  Добавлена фильтрация по дате выгрузки при обновлении данных на экспорт в BaseExportLatestEntitiesData
409
468
 
410
469
  ### Изменено
470
+
411
471
  - [EDUSCHL-22335](https://jira.bars.group/browse/EDUSCHL-22335)
412
472
  PATCH Добавлена фильтрация по дате выгрузки при обновлении данных на экспорт в BaseExportLatestEntitiesData
413
473
 
414
474
 
415
- ## 3.3.5 - 2024-08-26
475
+ ## [3.3.5] - 2024-08-26
476
+
416
477
  Классы UniquePeriodicAsyncTask, PeriodicTaskLocker перенесены в educommon.
417
478
 
418
479
  ### Удалено
480
+
419
481
  - [EDUSCHL-22267](https://jira.bars.group/browse/EDUSCHL-22267)
420
482
  MINOR Классы UniquePeriodicAsyncTask, PeriodicTaskLocker перенесены в educommon.
421
483
 
422
484
 
423
- ## 3.3.4 - 2024-08-16
485
+ ## [3.3.4] - 2024-08-16
486
+
424
487
  Поднята максимальная версия Django (<3.3)
425
488
 
426
489
  ### Изменено
490
+
427
491
  - [EDUKNDG-14560](https://jira.bars.group/browse/EDUKNDG-14560)
428
492
  MINOR Добавлена поддержка Django 3.2
429
493
 
430
494
 
431
- ## 3.3.3 - 2024-08-19
495
+ ## [3.3.3] - 2024-08-19
496
+
432
497
  Изменен порядок запуска сбора и экспорта по сущностям в периодической задаче TransferLatestEntitiesDataPeriodicTask
433
498
  с учетом многопоточности, скорректированы номера миграций
434
499
 
435
500
  ### Изменено
501
+
436
502
  - [EDUSCHL-21965](https://jira.bars.group/browse/EDUSCHL-21965)
437
503
  PATCH Добавлен параметр export_off в модель TransferredEntity и изменен порядок запуска сбора и экспорта в
438
504
  TransferLatestEntitiesDataPeriodicTask. Скорректированы номера миграций
439
505
 
440
506
 
441
- ## 3.3.2 - 2024-07-16
507
+ ## [3.3.2] - 2024-07-16
508
+
442
509
  Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
443
510
 
444
511
  ### Изменено
512
+
445
513
  - [EDUSCHL-22070](https://jira.bars.group/browse/EDUSCHL-22070)
446
514
  PATCH Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
447
515
 
448
516
 
449
- ## 3.3.1 - 2024-06-13
517
+ ## [3.3.1] - 2024-06-13
518
+
450
519
  Удалён устаревший параметр logs_sub_period_days у базового класса команды сбора данных BaseCollectModelsDataByGeneratingLogsCommand.
451
520
  Добавлен таймаут для сохранения информации об объемах файла в кеш.
452
521
 
453
522
  ### Изменено
523
+
454
524
  - [EDUSCHL-20649](https://jira.bars.group/browse/EDUSCHL-20649)
455
525
  MINOR Удалён устаревший параметр logs_sub_period_days у базового класса команды сбора данных BaseCollectModelsDataByGeneratingLogsCommand
456
526
 
457
527
  ### Исправлено
528
+
458
529
  - [EDUSCHL-21835](https://jira.bars.group/browse/EDUSCHL-21835)
459
530
  PATCH Реализация многопоточной выгрузки
460
531
 
461
532
 
462
- ## 3.3.0 - 2024-06-06
533
+ ## [3.3.0] - 2024-06-06
534
+
463
535
  Отправка файлов в РВД вынесена в отдельную задачу UploadDataAsyncTask, добавлен кеш файлов и очередь подэтапов отправки,
464
536
  а также расчет объемов отправляемых файлов
465
537
 
466
538
  ### Изменено
539
+
467
540
  - [EDUSCHL-21835](https://jira.bars.group/browse/EDUSCHL-21835)
468
541
  MINOR Реализация многопоточной выгрузки
469
542
 
470
543
 
471
- ## 3.2.8 - 2024-08-02
544
+ ## [3.2.8] - 2024-08-02
545
+
472
546
  Исправлена ошибка задвоения сборки и экспорта в периодической задаче TransferLatestEntitiesDataPeriodicTask.
473
547
 
474
548
  ### Изменено
549
+
475
550
  - [EDUSCHL-21965](https://jira.bars.group/browse/EDUSCHL-21965)
476
551
  PATCH Исправлена ошибка задвоения сборки и экспорта в периодической задаче TransferLatestEntitiesDataPeriodicTask.
477
552
 
478
553
 
479
- ## 3.2.7 - 2024-07-31
554
+ ## [3.2.7] - 2024-07-31
555
+
480
556
  Исправлен файл MANIFEST.in для включения в сборку js-шаблонов.
481
557
 
482
558
  ### Изменено
559
+
483
560
  - [EDUSCHL-21965](https://jira.bars.group/browse/EDUSCHL-21965)
484
561
  PATCH Добавлено включение js-шаблонов в сборку в файл MANIFEST.in
485
562
 
486
563
 
487
- ## 3.2.6 - 2024-07-23
564
+ ## [3.2.6] - 2024-07-23
565
+
488
566
  Добавлен параметр export_off (Отключение экспорта для сущности) в модель TransferredEntity
489
567
  Изменен порядок запуска сбора и экспорта по сущностям в периодической задаче TransferLatestEntitiesDataPeriodicTask
490
568
 
491
569
  ### Изменено
570
+
492
571
  - [EDUSCHL-21965](https://jira.bars.group/browse/EDUSCHL-21965)
493
572
  PATCH Добавлен параметр export_off в модель TransferredEntity и изменен порядок запуска сбора и экспорта в
494
573
  TransferLatestEntitiesDataPeriodicTask.
495
574
 
496
575
 
497
- ## 3.2.5 - 2024-07-16
498
- Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
576
+ ## [3.2.5] - 2024-07-16
499
577
 
500
- ### Изменено
501
- - [EDUSCHL-22070](https://jira.bars.group/browse/EDUSCHL-22070)
502
- PATCH Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
503
-
504
-
505
- ## 3.2.5 - 2024-07-16
506
578
  Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
507
579
 
508
580
  ### Изменено
581
+
509
582
  - [EDUSCHL-22070](https://jira.bars.group/browse/EDUSCHL-22070)
510
583
  PATCH Добавлен параметр use_times_limit в BaseCollectLatestModelsData для использования переданных параметров logs_period_started_at и logs_period_ended_at
511
584
 
512
585
 
513
- ## 3.2.4 - 2024-07-16
586
+ ## [3.2.4] - 2024-07-16
587
+
514
588
  Внесены корректировки в запросы используемые в функциях get_collecting_managers_max_period_ended_dates и get_exporting_managers_max_period_ended_dates.
515
589
 
516
590
  ### Изменено
591
+
517
592
  - [EDUSCHL-22217](https://jira.bars.group/browse/EDUSCHL-22217)
518
593
  PATCH Внесены корректировки в запросы используемые в функциях get_collecting_managers_max_period_ended_dates и get_exporting_managers_max_period_ended_dates.
519
594
  В подзапросах отсутствовало условие фильтрации по статусу.
520
595
 
521
596
 
522
- ## 3.2.3 - 2024-06-06
597
+ ## [3.2.3] - 2024-06-06
598
+
523
599
  Внесены корректировки в запросы используемые в функциях get_collecting_managers_max_period_ended_dates и get_exporting_managers_max_period_ended_dates.
524
600
 
525
601
  ### Изменено
602
+
526
603
  - [EDUSCHL-21804](https://jira.bars.group/browse/EDUSCHL-21804)
527
604
  PATCH Внесены корректировки в запросы используемые в функциях get_collecting_managers_max_period_ended_dates и get_exporting_managers_max_period_ended_dates.
528
605
  Дата и время окончания предыдущего сбора/экспорта могла быть не корректно определена.
529
606
 
530
607
 
531
- ## 3.2.2 - 2024-05-21
608
+ ## [3.2.2] - 2024-05-21
609
+
532
610
  Изменения в переодической задаче TransferLatestEntitiesDataPeriodicTask,
533
611
  Изменено определение даты последнего успешного этапа сбора у менеджеров Функций сбора и экспорта.
534
612
  Изменения получения крайней даты из переданного поля по указанным моделям в BaseCollectLatestModelsData.
535
613
  Удалён параметр RDM_TRANSFER_TASK_TIMEDELTA.
536
614
 
537
615
  ### Изменено
616
+
538
617
  - [EDUSCHL-21804](https://jira.bars.group/browse/EDUSCHL-21804)
539
618
  PATCH Изменение определения даты последнего успешного этапа сбора у менеджеров Функций сбора и экспорта
540
619
  Изменения получения крайней даты из переданного поля по указанным моделям в BaseCollectLatestModelsData.
@@ -542,75 +621,92 @@ Requires-Dist: uploader-client <1,>=0.2.1
542
621
  для получения даты времени успешного этапа сбора/экспорта.
543
622
 
544
623
 
545
- ## 3.2.1 - 2024-05-03
624
+ ## [3.2.1] - 2024-05-03
625
+
546
626
  Понижен уровень логирования при возникновении ошибки отправки запросов в РВД с ERROR до WARNING
547
627
 
548
628
  ### Изменено
629
+
549
630
  - [EDUSCHL-21903](https://jira.bars.group/browse/EDUSCHL-21903)
550
631
  PATCH Понижен уровень логирования при возникновении ошибки отправки запросов в РВД
551
632
 
552
633
 
553
- ## 3.2.0 - 2024-05-02
634
+ ## [3.2.0] - 2024-05-02
635
+
554
636
  Периодические задачи RDMCheckUploadStatus, CheckSuspendedExportedStagePeriodicTask,
555
637
  TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
556
638
 
557
639
  ### Изменено
640
+
558
641
  - [EDUSCHL-21891](https://jira.bars.group/browse/EDUSCHL-21891)
559
642
  MINOR Периодические задачи RDMCheckUploadStatus, CheckSuspendedExportedStagePeriodicTask,
560
643
  TransferLatestEntitiesDataPeriodicTask сделаны уникальными. Во время действия блокировки не будет возможности
561
644
  поставить новую подобную задачу.
562
645
 
563
646
 
564
- ## 3.1.1 - 2024-05-03
647
+ ## [3.1.1] - 2024-05-03
648
+
565
649
  Понижен уровень логирования при возникновении ошибки отправки запросов в РВД с ERROR до WARNING
566
650
 
567
651
  ### Изменено
652
+
568
653
  - [EDUSCHL-21903](https://jira.bars.group/browse/EDUSCHL-21903)
569
654
  PATCH Понижен уровень логирования при возникновении ошибки отправки запросов в РВД
570
655
 
571
656
 
572
- ## 3.1.0 - 2024-04-23
657
+ ## [3.1.0] - 2024-04-23
658
+
573
659
  Добавлена поддержка setuptools 69.*.
574
660
  Поднята минимальная версия пакета pip 23.2.1
575
661
 
576
662
  ### Изменено
663
+
577
664
  - [EDUSCHL-21761](https://jira.bars.group/browse/EDUSCHL-21761)
578
665
  MINOR Добавлена поддержка setuptools 69.*. Поднять минимальную версию pip до 23.2.1.
579
666
 
580
667
 
581
- ## 3.0.4 - 2024-04-17
668
+ ## [3.0.4] - 2024-04-17
669
+
582
670
  Возвращено проставление подэтапа выгрузки всем записям модели.
583
671
 
584
672
  ### Изменено
673
+
585
674
  - [EDUSCHL-21761](https://jira.bars.group/browse/EDUSCHL-21761)
586
675
  PATCH Возвращено проставление подэтапа выгрузки всем записям модели.
587
676
 
588
677
 
589
- ## 3.0.3 - 2024-04-11
678
+ ## [3.0.3] - 2024-04-11
679
+
590
680
  В классах примесей CollectCommandMixin и ExportCommandMixin указана очередь для celery используемая в рамках пакета.
591
681
  Указано базовое описание и тип задачи для отражения в реестре "Асинхронные задачи".
592
682
 
593
683
  ### Изменено
684
+
594
685
  - [EDUSCHL-21793](https://jira.bars.group/browse/EDUSCHL-21793)
595
686
  PATCH В классах примесей CollectCommandMixin и ExportCommandMixin указана очередь для celery
596
687
  используемая в рамках пакета.
597
688
 
598
689
 
599
- ## 3.0.2 - 2024-04-11
690
+ ## [3.0.2] - 2024-04-11
691
+
600
692
  Изменены типы полей ОГРН и ОКФС в сущности Organisations на строковые.
601
693
  Исправлен тип передаваемого параметра institute_ids при выполнении поставленной задачи.
602
694
  Исправлена ошибка проставления подэтапа выгрузки у неотправленных записей.
603
695
 
604
696
  ### Изменено
697
+
605
698
  - [EDUCLLG-8336](https://jira.bars.group/browse/EDUCLLG-8336)
606
699
  PATCH Изменены типы полей ОГРН и ОКФС в сущности Organisations на строковые.
700
+
607
701
  - [EDUSCHL-21743](https://jira.bars.group/browse/EDUSCHL-21743)
608
702
  PATCH Исправлен тип передаваемого параметра institute_ids при выполнении поставленной задачи.
703
+
609
704
  - [EDUSCHL-21761](https://jira.bars.group/browse/EDUSCHL-21761)
610
705
  PATCH Исправлена ошибка проставления подэтапа.
611
706
 
612
707
 
613
- ## 3.0.1 - 2024-04-03
708
+ ## [3.0.1] - 2024-04-03
709
+
614
710
  Убрано окружение кавычками пустых необязательных полей.
615
711
 
616
712
  ### Изменено
@@ -619,7 +715,8 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
619
715
  PATCH Убрано окружение кавычками пустых необязательных полей.
620
716
 
621
717
 
622
- ## 3.0.0 - 2024-04-02
718
+ ## [3.0.0] - 2024-04-02
719
+
623
720
  Расширены возможности кастомизации поведения метода `BaseExportDataFunctionHelper.prepare_record`.
624
721
 
625
722
  ### Добавлено
@@ -631,7 +728,8 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
631
728
 
632
729
 
633
730
  ## [2.2.1] - 2024-03-28
634
- Исправление наследования Meta в моделях EduRdmCollectDataCommandProgress и EduRdmExportDataCommandProgress
731
+
732
+ Исправление наследования Meta в моделях EduRdmCollectDataCommandProgress и EduRdmExportDataCommandProgress
635
733
 
636
734
  ### Исправлено
637
735
 
@@ -779,6 +877,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
779
877
 
780
878
  - [EDUSCHL-18051](https://jira.bars.group/browse/EDUSCHL-18051)
781
879
  MINOR Поднять версию Django до 3.0.14
880
+
782
881
  - [EDUSCHL-20550](https://jira.bars.group/browse/EDUSCHL-20550)
783
882
  MINOR В класс кеша BaseCollectingExportedDataFunctionCacheStorage добавлен метод _ignore_logs.
784
883
  Добавлена утилита build_related_model_graph. Добавлен миксин BaseIgnoreLogMixin.
@@ -873,6 +972,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
873
972
  - [EDUSCHL-21029](https://jira.bars.group/browse/EDUSCHL-21029)
874
973
  MINOR Создание базовых хэлперов.
875
974
 
975
+
876
976
  ## [0.8.3] - 2023-12-13
877
977
 
878
978
  Исправление ошибок и несоответствий в журнале логов
@@ -882,6 +982,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
882
982
  - [EDUCLLG-8103](https://jira.bars.group/browse/EDUCLLG-8103)
883
983
  MINOR Исправление ошибок и несоответствий в журнале логов .
884
984
 
985
+
885
986
  ## [0.8.2] - 2023-12-11
886
987
 
887
988
  Поднятие версии m3-db-utils,изменение UploaderClientLogManager
@@ -890,6 +991,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
890
991
  - [EDUCLLG-7736](https://jira.bars.group/browse/EDUCLLG-7736)
891
992
  MINOR Поднята версии m3-db-utils до 0.3.10, редактирован `UploaderClientLogManager`.
892
993
 
994
+
893
995
  ## [0.8.1] - 2023-12-08
894
996
 
895
997
  Исправлена ошибка внутри EntityEnumRegisterMixin
@@ -898,6 +1000,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
898
1000
  - [EDUCLLG-8098](https://jira.bars.group/browse/EDUCLLG-8098)
899
1001
  PATCH Добавлена проверка на наличие атрибута main_model_enum.
900
1002
 
1003
+
901
1004
  ## [0.8.0] - 2023-12-08
902
1005
 
903
1006
  Вынесен функционал просмотра логов РВД из ЭШ.
@@ -940,7 +1043,8 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
940
1043
 
941
1044
  - [EDUSCHL-19507](https://jira.bars.group/browse/EDUSCHL-19507)
942
1045
  PATCH В метод _clean_data класса BaseCollectingFunctionTestCase добавлена возможность обрабатывать поля относящиеся к
943
- временному типу.
1046
+ временному типу.
1047
+
944
1048
  - [EDUSCHL-19507](https://jira.bars.group/browse/EDUSCHL-19507)
945
1049
  PATCH Добавление обработки plugins_info при генерации списка данных формирования команд.
946
1050
 
@@ -1063,6 +1167,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
1063
1167
 
1064
1168
  - [EDUSCHL-20684](https://jira.bars.group/browse/EDUSCHL-20684)
1065
1169
  PATCH - Базовый класс для тестирования Функций сбора;
1170
+
1066
1171
  - [EDUSCHL-20684](https://jira.bars.group/browse/EDUSCHL-20684)
1067
1172
  PATCH - Добавлена зависимость Django.
1068
1173
 
@@ -1138,6 +1243,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
1138
1243
  - [EDUSCHL-20487](https://jira.bars.group/browse/EDUSCHL-20487)
1139
1244
  MINOR Добавлена функция ```set_failed_status_suspended_collecting_data_stages```.
1140
1245
 
1246
+
1141
1247
  ## [0.5.9] - 2023-09-25
1142
1248
 
1143
1249
  Повышена версия wheel
@@ -1147,6 +1253,7 @@ TransferLatestEntitiesDataPeriodicTask сделаны уникальными.
1147
1253
  - [EDUCLLG-7939](https://jira.bars.group/browse/EDUCLLG-7939)
1148
1254
  PATCH - Повышена версия wheel
1149
1255
 
1256
+
1150
1257
  ## [0.5.8] - 2023-09-13
1151
1258
 
1152
1259
  Исправлена ошибка добавления в описание асинхронной задачи списка выгруженных сущностей
@@ -1157,6 +1264,7 @@ BaseExportLatestEntitiesData._set_description_to_async_task.
1157
1264
  - [EDUSCHL-20334](https://jira.bars.group/browse/EDUSCHL-20334)
1158
1265
  PATCH - Баг с обновлением поля description в BaseExportLatestEntitiesData._set_description_to_async_task.
1159
1266
 
1267
+
1160
1268
  ## [0.5.7] - 2023-09-12
1161
1269
 
1162
1270
  Баг фикс и дополнение поведения BaseExportLatestEntitiesData.
@@ -1263,6 +1371,7 @@ split_by_days_count переименовал в split_by_quantity.
1263
1371
  - [EDUSCHL-19164](https://jira.bars.group/browse/EDUSCHL-19164)
1264
1372
  MINOR Изменено формирование очередности сбора/экспорта моделей/сущностей.
1265
1373
 
1374
+
1266
1375
  ## [0.4.6] - 2023-08-16
1267
1376
 
1268
1377
  Удален лишний вызов метода _prepare_logs
@@ -1272,6 +1381,7 @@ split_by_days_count переименовал в split_by_quantity.
1272
1381
  - [EDUSCHL-19991](https://jira.bars.group/browse/EDUSCHL-19991)
1273
1382
  PATCH удален лишний вызов метода ```_prepare_logs``` в методе ```__init__``` класса ```BaseCollectingCalculatedExportedDataFunctionCacheStorage```
1274
1383
 
1384
+
1275
1385
  ## [0.4.5] - 2023-08-09
1276
1386
 
1277
1387
  Объединение обрабатываемых логов относящихся к одному объекту
@@ -1281,6 +1391,7 @@ split_by_days_count переименовал в split_by_quantity.
1281
1391
  - [EDUSCHL-19991](https://jira.bars.group/browse/EDUSCHL-19991)
1282
1392
  PATCH Новый миксин ```ReformatLogsMixin``` , новое поле is_merge_logs и новый метод _merge_logs у класса ```BaseCollectingExportedDataFunctionCacheStorage```
1283
1393
 
1394
+
1284
1395
  ## [0.4.4] - 2023-08-12
1285
1396
 
1286
1397
  Исправлен баг с timedelta
@@ -1290,6 +1401,7 @@ split_by_days_count переименовал в split_by_quantity.
1290
1401
  - [EDUSCHL-20200](https://jira.bars.group/browse/EDUSCHL-20200)
1291
1402
  PATCH Исправлен баг с timedelta.
1292
1403
 
1404
+
1293
1405
  ## [0.4.3] - 2023-08-12
1294
1406
 
1295
1407
  Исправлен баг с timedelta
@@ -1299,6 +1411,7 @@ split_by_days_count переименовал в split_by_quantity.
1299
1411
  - [EDUSCHL-20200](https://jira.bars.group/browse/EDUSCHL-20200)
1300
1412
  PATCH Исправлен баг с timedelta.
1301
1413
 
1414
+
1302
1415
  ## [0.4.2] - 2023-08-11
1303
1416
 
1304
1417
  Исправление ошибки учета миллисекунд, при генерации скриптов сбора и выгрузки данных. В текущий момент chunk_size все
@@ -1315,6 +1428,7 @@ split_by_days_count переименовал в split_by_quantity.
1315
1428
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1316
1429
  PATCH В выборках моделей и логов не должна входить правая граница периода выборки.
1317
1430
 
1431
+
1318
1432
  ## [0.4.1] - 2023-08-09
1319
1433
 
1320
1434
  Доработки для реализации принудительного выполнения функций экспорта данных сущностей.
@@ -1324,6 +1438,7 @@ split_by_days_count переименовал в split_by_quantity.
1324
1438
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1325
1439
  PATCH Доработки для реализации принудительного выполнения функций экспорта данных сущностей.
1326
1440
 
1441
+
1327
1442
  ## [0.4.0] - 2023-08-09
1328
1443
 
1329
1444
  Реализованы общие классы для команд сбора/экспорта.
@@ -1338,6 +1453,7 @@ split_by_days_count переименовал в split_by_quantity.
1338
1453
  - [EDUSCHL-20200](https://jira.bars.group/browse/EDUSCHL-20200)
1339
1454
  MINOR Реализованы общие классы для команд сбора/экспорта.
1340
1455
 
1456
+
1341
1457
  ## [0.3.3] - 2023-08-08
1342
1458
 
1343
1459
  Добавлено принудительное выполнение функций в ранере для экономии памяти.
@@ -1347,6 +1463,7 @@ split_by_days_count переименовал в split_by_quantity.
1347
1463
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1348
1464
  PATCH Добавлено принудительное выполнение функций в ранере для экономии памяти.
1349
1465
 
1466
+
1350
1467
  ## [0.3.2] - 2023-08-08
1351
1468
 
1352
1469
  Откат к спискам необработанных логов. Исправлена ошибка бесконечного создания чанков логов.
@@ -1356,6 +1473,7 @@ split_by_days_count переименовал в split_by_quantity.
1356
1473
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1357
1474
  PATCH Откат к спискам необработанных логов.
1358
1475
 
1476
+
1359
1477
  ## [0.3.1] - 2023-08-08
1360
1478
 
1361
1479
  Организована передача необработанных логов в виде генератора.
@@ -1365,6 +1483,7 @@ split_by_days_count переименовал в split_by_quantity.
1365
1483
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1366
1484
  PATCH Организована передача необработанных логов в виде генератора.
1367
1485
 
1486
+
1368
1487
  ## [0.3.0] - 2023-08-06
1369
1488
 
1370
1489
  Добавление функциональности для отложенного заполнения кешей. Заполнение производится перед началом работы запускаемого
@@ -1378,6 +1497,7 @@ split_by_days_count переименовал в split_by_quantity.
1378
1497
  - [EDUSCHL-20235](https://jira.bars.group/browse/EDUSCHL-20235)
1379
1498
  MINOR Добавлено проставление подэтапа выгрузки данных у записей моделей.
1380
1499
 
1500
+
1381
1501
  ## [0.2.2] - 2023-08-06
1382
1502
 
1383
1503
  Для API РВД добавлена поддержка параметра типа операции для загрузки данных.
@@ -1387,6 +1507,7 @@ split_by_days_count переименовал в split_by_quantity.
1387
1507
  - [EDUSCHL-19920](https://jira.bars.group/browse/EDUSCHL-19920)
1388
1508
  PATCH Для API РВД добавлена поддержка параметра типа операции для загрузки данных.
1389
1509
 
1510
+
1390
1511
  ## [0.2.1] - 2023-08-05
1391
1512
 
1392
1513
  Восстановление сборки пакета после ухода с poetry.
@@ -1396,6 +1517,7 @@ split_by_days_count переименовал в split_by_quantity.
1396
1517
  - [EDUSCHL-19919](https://jira.bars.group/browse/EDUSCHL-19919)
1397
1518
  PATCH Восстановление сборки пакета после миграции с poetry.
1398
1519
 
1520
+
1399
1521
  ## [0.2.0] - 2023-08-04
1400
1522
 
1401
1523
  Перенос стратегий формирования Функций используемых в генерации исходников.
@@ -1405,6 +1527,7 @@ split_by_days_count переименовал в split_by_quantity.
1405
1527
  - [EDUSCHL-19919](https://jira.bars.group/browse/EDUSCHL-19919)
1406
1528
  MINOR Перенесены стратегии создания Функций из ЭШ.
1407
1529
 
1530
+
1408
1531
  ## [0.1.4] - 2023-08-03
1409
1532
 
1410
1533
  Возвращение ранее удаленных зависимостей миграции
@@ -1420,6 +1543,7 @@ split_by_days_count переименовал в split_by_quantity.
1420
1543
  - [EDUSCHL-20200](https://jira.bars.group/browse/EDUSCHL-20200)
1421
1544
  Закреплены версии зависимостей, добавлена ссылка на uploader-client
1422
1545
 
1546
+
1423
1547
  ## [0.1.3] - 2023-07-24
1424
1548
 
1425
1549
  Для раскатки миграций на ЭШ, пришлось закомментировать зависимости в initial-миграции.
@@ -1429,6 +1553,7 @@ split_by_days_count переименовал в split_by_quantity.
1429
1553
  - [EDUSCHL-19919](https://jira.bars.group/browse/EDUSCHL-19919)
1430
1554
  PATCH Вынести общую часть для работы с РВД из ЭШ для использования в ЭК.
1431
1555
 
1556
+
1432
1557
  ## [0.1.2] - 2023-07-23
1433
1558
 
1434
1559
  Внесены изменения в кодовую базу после переноса механизма логирования из ЭШ в educommon.
@@ -1438,6 +1563,7 @@ split_by_days_count переименовал в split_by_quantity.
1438
1563
  - [EDUSCHL-19919](https://jira.bars.group/browse/EDUSCHL-19919)
1439
1564
  PATCH Вынести общую часть для работы с РВД из ЭШ для использования в ЭК.
1440
1565
 
1566
+
1441
1567
  ## [0.1.0] - 2023-07-18
1442
1568
 
1443
1569
  Внесены изменения в кодовую базу после переноса механизма логирования из ЭШ в educommon.