wisent 0.7.901__py3-none-any.whl → 0.7.1116__py3-none-any.whl

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (101) hide show
  1. wisent/__init__.py +1 -1
  2. wisent/comparison/__init__.py +1 -0
  3. wisent/comparison/detect_bos_features.py +275 -0
  4. wisent/comparison/fgaa.py +465 -0
  5. wisent/comparison/lora.py +663 -0
  6. wisent/comparison/lora_dpo.py +604 -0
  7. wisent/comparison/main.py +444 -0
  8. wisent/comparison/ours.py +76 -0
  9. wisent/comparison/reft.py +690 -0
  10. wisent/comparison/sae.py +304 -0
  11. wisent/comparison/utils.py +381 -0
  12. wisent/core/activations/activations_collector.py +3 -2
  13. wisent/core/activations/extraction_strategy.py +8 -4
  14. wisent/core/cli/agent/apply_steering.py +7 -5
  15. wisent/core/cli/agent/train_classifier.py +4 -3
  16. wisent/core/cli/generate_vector_from_task.py +11 -20
  17. wisent/core/cli/get_activations.py +1 -1
  18. wisent/core/contrastive_pairs/lm_eval_pairs/lm_task_extractors/boolq.py +20 -3
  19. wisent/core/contrastive_pairs/lm_eval_pairs/lm_task_extractors/cb.py +8 -1
  20. wisent/core/contrastive_pairs/lm_eval_pairs/lm_task_extractors/truthfulqa_mc1.py +8 -1
  21. wisent/core/parser_arguments/generate_vector_from_task_parser.py +4 -11
  22. wisent/core/parser_arguments/get_activations_parser.py +5 -14
  23. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/METADATA +5 -1
  24. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/RECORD +28 -91
  25. wisent/examples/contrastive_pairs/humanization_human_vs_ai.json +0 -2112
  26. wisent/examples/scripts/1/test_basqueglue_evaluation.json +0 -51
  27. wisent/examples/scripts/1/test_basqueglue_pairs.json +0 -14
  28. wisent/examples/scripts/1/test_bec2016eu_evaluation.json +0 -51
  29. wisent/examples/scripts/1/test_bec2016eu_pairs.json +0 -14
  30. wisent/examples/scripts/1/test_belebele_evaluation.json +0 -51
  31. wisent/examples/scripts/1/test_belebele_pairs.json +0 -14
  32. wisent/examples/scripts/1/test_benchmarks_evaluation.json +0 -51
  33. wisent/examples/scripts/1/test_benchmarks_pairs.json +0 -14
  34. wisent/examples/scripts/1/test_bertaqa_evaluation.json +0 -51
  35. wisent/examples/scripts/1/test_bertaqa_pairs.json +0 -14
  36. wisent/examples/scripts/1/test_bhtc_v2_evaluation.json +0 -30
  37. wisent/examples/scripts/1/test_bhtc_v2_pairs.json +0 -8
  38. wisent/examples/scripts/1/test_boolq-seq2seq_evaluation.json +0 -30
  39. wisent/examples/scripts/1/test_boolq-seq2seq_pairs.json +0 -8
  40. wisent/examples/scripts/1/test_cabreu_evaluation.json +0 -30
  41. wisent/examples/scripts/1/test_cabreu_pairs.json +0 -8
  42. wisent/examples/scripts/1/test_careqa_en_evaluation.json +0 -30
  43. wisent/examples/scripts/1/test_careqa_en_pairs.json +0 -8
  44. wisent/examples/scripts/1/test_careqa_evaluation.json +0 -30
  45. wisent/examples/scripts/1/test_careqa_pairs.json +0 -8
  46. wisent/examples/scripts/1/test_catalanqa_evaluation.json +0 -30
  47. wisent/examples/scripts/1/test_catalanqa_pairs.json +0 -8
  48. wisent/examples/scripts/1/test_catcola_evaluation.json +0 -30
  49. wisent/examples/scripts/1/test_catcola_pairs.json +0 -8
  50. wisent/examples/scripts/1/test_chartqa_evaluation.json +0 -30
  51. wisent/examples/scripts/1/test_chartqa_pairs.json +0 -8
  52. wisent/examples/scripts/1/test_claim_stance_topic_evaluation.json +0 -30
  53. wisent/examples/scripts/1/test_claim_stance_topic_pairs.json +0 -8
  54. wisent/examples/scripts/1/test_cnn_dailymail_evaluation.json +0 -30
  55. wisent/examples/scripts/1/test_cnn_dailymail_pairs.json +0 -8
  56. wisent/examples/scripts/1/test_cocoteros_es_evaluation.json +0 -30
  57. wisent/examples/scripts/1/test_cocoteros_es_pairs.json +0 -8
  58. wisent/examples/scripts/1/test_coedit_gec_evaluation.json +0 -30
  59. wisent/examples/scripts/1/test_coedit_gec_pairs.json +0 -8
  60. wisent/examples/scripts/1/test_cola_evaluation.json +0 -30
  61. wisent/examples/scripts/1/test_cola_pairs.json +0 -8
  62. wisent/examples/scripts/1/test_coqcat_evaluation.json +0 -30
  63. wisent/examples/scripts/1/test_coqcat_pairs.json +0 -8
  64. wisent/examples/scripts/1/test_dbpedia_14_evaluation.json +0 -30
  65. wisent/examples/scripts/1/test_dbpedia_14_pairs.json +0 -8
  66. wisent/examples/scripts/1/test_epec_koref_bin_evaluation.json +0 -30
  67. wisent/examples/scripts/1/test_epec_koref_bin_pairs.json +0 -8
  68. wisent/examples/scripts/1/test_ethos_binary_evaluation.json +0 -30
  69. wisent/examples/scripts/1/test_ethos_binary_pairs.json +0 -8
  70. wisent/examples/scripts/2/test_afrimgsm_direct_amh_evaluation.json +0 -30
  71. wisent/examples/scripts/2/test_afrimgsm_direct_amh_pairs.json +0 -8
  72. wisent/examples/scripts/2/test_afrimmlu_direct_amh_evaluation.json +0 -30
  73. wisent/examples/scripts/2/test_afrimmlu_direct_amh_pairs.json +0 -8
  74. wisent/examples/scripts/2/test_afrixnli_en_direct_amh_evaluation.json +0 -30
  75. wisent/examples/scripts/2/test_afrixnli_en_direct_amh_pairs.json +0 -8
  76. wisent/examples/scripts/2/test_arc_ar_evaluation.json +0 -30
  77. wisent/examples/scripts/2/test_arc_ar_pairs.json +0 -8
  78. wisent/examples/scripts/2/test_atis_evaluation.json +0 -30
  79. wisent/examples/scripts/2/test_atis_pairs.json +0 -8
  80. wisent/examples/scripts/2/test_babi_evaluation.json +0 -30
  81. wisent/examples/scripts/2/test_babi_pairs.json +0 -8
  82. wisent/examples/scripts/2/test_babilong_evaluation.json +0 -30
  83. wisent/examples/scripts/2/test_babilong_pairs.json +0 -8
  84. wisent/examples/scripts/2/test_bangla_mmlu_evaluation.json +0 -30
  85. wisent/examples/scripts/2/test_bangla_mmlu_pairs.json +0 -8
  86. wisent/examples/scripts/2/test_basque-glue_pairs.json +0 -14
  87. wisent/examples/scripts/generate_paper_data.py +0 -384
  88. wisent/examples/scripts/intervention_validation.py +0 -626
  89. wisent/examples/scripts/results/test_AraDiCE_ArabicMMLU_lev_evaluation.json +0 -324
  90. wisent/examples/scripts/results/test_AraDiCE_ArabicMMLU_lev_pairs.json +0 -92
  91. wisent/examples/scripts/results/test_aexams_IslamicStudies_evaluation.json +0 -324
  92. wisent/examples/scripts/results/test_aexams_IslamicStudies_pairs.json +0 -92
  93. wisent/examples/scripts/results/test_afrimgsm_pairs.json +0 -92
  94. wisent/examples/scripts/results/test_afrimmlu_evaluation.json +0 -324
  95. wisent/examples/scripts/results/test_afrimmlu_pairs.json +0 -92
  96. wisent/examples/scripts/threshold_analysis.py +0 -434
  97. wisent/examples/scripts/visualization_gallery.py +0 -582
  98. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/WHEEL +0 -0
  99. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/entry_points.txt +0 -0
  100. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/licenses/LICENSE +0 -0
  101. {wisent-0.7.901.dist-info → wisent-0.7.1116.dist-info}/top_level.txt +0 -0
wisent/examples/scripts/2/test_atis_evaluation.json DELETED
@@ -1,30 +0,0 @@
1
- {
2
- "task_name": "atis",
3
- "model_name": "mock",
4
- "evaluator_name": "log_likelihoods",
5
- "num_pairs": 1,
6
- "all_correct": true,
7
- "pairs": [
8
- {
9
- "pair_id": 0,
10
- "prompt": "From the following Text, extract the objects for which the entity type expressed is one of aircraft_...",
11
- "positive_response": "charlotte: fromloc.city_name, las vegas: toloc.city_name, st. louis: stoploc.city_name",
12
- "negative_response": "st. louis: stoploc.city_name, las vegas: toloc.city_name, charlotte: fromloc.city_name",
13
- "positive_evaluation": {
14
- "ground_truth": "TRUTHFUL",
15
- "confidence": 1.0,
16
- "expected": "TRUTHFUL",
17
- "correct": true,
18
- "details": "Predicted: 'charlotte: fromloc.city_name, las vegas: toloc.city_name, st. louis: stoploc.city_name' (log_prob=-0.500), Expected: 'charlotte: fromloc.city_name, las vegas: toloc.city_name, st. louis: stoploc.city_name'"
19
- },
20
- "negative_evaluation": {
21
- "ground_truth": "UNTRUTHFUL",
22
- "confidence": 0.0,
23
- "expected": "UNTRUTHFUL",
24
- "correct": true,
25
- "details": "Predicted: 'charlotte: fromloc.city_name, las vegas: toloc.city_name, st. louis: stoploc.city_name' (log_prob=-0.500), Expected: 'st. louis: stoploc.city_name, las vegas: toloc.city_name, charlotte: fromloc.city_name'"
26
- },
27
- "both_correct": true
28
- }
29
- ]
30
- }
wisent/examples/scripts/2/test_atis_pairs.json DELETED
@@ -1,8 +0,0 @@
1
- [
2
- {
3
- "pair_id": 0,
4
- "prompt": "From the following Text, extract the objects for which the entity type expressed is one of aircraft_code, airline_code, airline_name, airport_code, airport_name, arrive_date.date_relative, arrive_date.day_name, arrive_date.day_number, arrive_date.month_name, arrive_date.today_relative, arrive_time.end_time, arrive_time.period_mod, arrive_time.period_of_day, arrive_time.start_time, arrive_time.time, arrive_time.time_relative, city_name, class_type, connect, cost_relative, day_name, day_number, days_code, depart_date.date_relative, depart_date.day_name, depart_date.day_number, depart_date.month_name, depart_date.today_relative, depart_date.year, depart_time.end_time, depart_time.period_mod, depart_time.period_of_day, depart_time.start_time, depart_time.time, depart_time.time_relative, economy, fare_amount, fare_basis_code, flight_days, flight_mod, flight_number, flight_stop, flight_time, fromloc.airport_code, fromloc.airport_name, fromloc.city_name, fromloc.state_code, fromloc.state_name, meal, meal_code, meal_description, mod, month_name, or, period_of_day, restriction_code, return_date.date_relative, return_date.day_name, return_date.day_number, return_date.month_name, return_date.today_relative, return_time.period_mod, return_time.period_of_day, round_trip, state_code, state_name, stoploc.airport_name, stoploc.city_name, stoploc.state_code, time, time_relative, today_relative, toloc.airport_code, toloc.airport_name, toloc.city_name, toloc.country_name, toloc.state_code, toloc.state_name, transport_type.\nText:\ni would like to find a flight from charlotte to las vegas that makes a stop in st. louis\nentity type:",
5
- "positive_response": "charlotte: fromloc.city_name, las vegas: toloc.city_name, st. louis: stoploc.city_name",
6
- "negative_response": "st. louis: stoploc.city_name, las vegas: toloc.city_name, charlotte: fromloc.city_name"
7
- }
8
- ]
wisent/examples/scripts/2/test_babi_evaluation.json DELETED
@@ -1,30 +0,0 @@
1
- {
2
- "task_name": "babi",
3
- "model_name": "mock",
4
- "evaluator_name": "log_likelihoods",
5
- "num_pairs": 1,
6
- "all_correct": true,
7
- "pairs": [
8
- {
9
- "pair_id": 0,
10
- "prompt": "Passage: John travelled to the hallway.\nMary journeyed to the bathroom.\n\nQuestion: Where is John?...",
11
- "positive_response": "hallway",
12
- "negative_response": "not hallway",
13
- "positive_evaluation": {
14
- "ground_truth": "TRUTHFUL",
15
- "confidence": 1.0,
16
- "expected": "TRUTHFUL",
17
- "correct": true,
18
- "details": "Predicted: 'hallway' (log_prob=-0.500), Expected: 'hallway'"
19
- },
20
- "negative_evaluation": {
21
- "ground_truth": "UNTRUTHFUL",
22
- "confidence": 0.0,
23
- "expected": "UNTRUTHFUL",
24
- "correct": true,
25
- "details": "Predicted: 'hallway' (log_prob=-0.500), Expected: 'not hallway'"
26
- },
27
- "both_correct": true
28
- }
29
- ]
30
- }
wisent/examples/scripts/2/test_babi_pairs.json DELETED
@@ -1,8 +0,0 @@
1
- [
2
- {
3
- "pair_id": 0,
4
- "prompt": "Passage: John travelled to the hallway.\nMary journeyed to the bathroom.\n\nQuestion: Where is John?",
5
- "positive_response": "hallway",
6
- "negative_response": "not hallway"
7
- }
8
- ]
wisent/examples/scripts/2/test_babilong_evaluation.json DELETED
@@ -1,30 +0,0 @@
1
- {
2
- "task_name": "babilong",
3
- "model_name": "mock",
4
- "evaluator_name": "log_likelihoods",
5
- "num_pairs": 1,
6
- "all_correct": true,
7
- "pairs": [
8
- {
9
- "pair_id": 0,
10
- "prompt": "Context: \u2013 \u0421\u043c\u043e\u0442\u0440\u0438, \u0414\u0436\u043e, \u2013 \u0441\u043a\u0430\u0437\u0430\u043b\u0430 \u0411\u043e\u043d\u0438\u0442\u0430, \u043f\u043e\u043a\u0430\u0437\u0430\u0432 \u043f\u0430\u043b\u044c\u0446\u0435\u043c. \u041a \u043a\u043e\u043d\u0432\u043e\u044e \u043f\u043e\u0434\u044a\u0435\u0445\u0430\u043b \u0433\u0440\u044f\u0437\u043d\u043e-\u0437\u0435\u043b\u0435\u043d\u044b\u0439 \u043f\u0438\u043a\u0430\u043f \"\u0448...",
11
- "positive_response": "\u0441\u043f\u0430\u043b\u044c\u043d\u044f",
12
- "negative_response": "\u0432\u0430\u043d\u043d\u0430\u044f",
13
- "positive_evaluation": {
14
- "ground_truth": "TRUTHFUL",
15
- "confidence": 1.0,
16
- "expected": "TRUTHFUL",
17
- "correct": true,
18
- "details": "Predicted: '\u0441\u043f\u0430\u043b\u044c\u043d\u044f' (log_prob=-0.500), Expected: '\u0441\u043f\u0430\u043b\u044c\u043d\u044f'"
19
- },
20
- "negative_evaluation": {
21
- "ground_truth": "UNTRUTHFUL",
22
- "confidence": 0.0,
23
- "expected": "UNTRUTHFUL",
24
- "correct": true,
25
- "details": "Predicted: '\u0441\u043f\u0430\u043b\u044c\u043d\u044f' (log_prob=-0.500), Expected: '\u0432\u0430\u043d\u043d\u0430\u044f'"
26
- },
27
- "both_correct": true
28
- }
29
- ]
30
- }
wisent/examples/scripts/2/test_babilong_pairs.json DELETED
@@ -1,8 +0,0 @@
1
- [
2
- {
3
- "pair_id": 0,
4
- "prompt": "Context: \u2013 \u0421\u043c\u043e\u0442\u0440\u0438, \u0414\u0436\u043e, \u2013 \u0441\u043a\u0430\u0437\u0430\u043b\u0430 \u0411\u043e\u043d\u0438\u0442\u0430, \u043f\u043e\u043a\u0430\u0437\u0430\u0432 \u043f\u0430\u043b\u044c\u0446\u0435\u043c. \u041a \u043a\u043e\u043d\u0432\u043e\u044e \u043f\u043e\u0434\u044a\u0435\u0445\u0430\u043b \u0433\u0440\u044f\u0437\u043d\u043e-\u0437\u0435\u043b\u0435\u043d\u044b\u0439 \u043f\u0438\u043a\u0430\u043f \"\u0448\u0435\u0432\u0440\u043e\u043b\u0435\" \u043d\u0430 \u043c\u043e\u0449\u043d\u044b\u0445 \u043a\u043e\u043b\u0435\u0441\u0430\u0445, \u0432\u043e\u0434\u0438\u0442\u0435\u043b\u044c\u0441\u043a\u0430\u044f \u0434\u0432\u0435\u0440\u044c \u0440\u0430\u0441\u043f\u0430\u0445\u043d\u0443\u043b\u0430\u0441\u044c \u0438 \u043e\u0442\u0442\u0443\u0434\u0430 \u0432\u044b\u0431\u0440\u0430\u043b\u0441\u044f \u0414\u0436\u043e \u2013 \u043d\u0430\u0448 \u0434\u0440\u0443\u0433, \u043f\u0430\u0440\u0442\u043d\u0435\u0440 \u043f\u043e \u0431\u0438\u0437\u043d\u0435\u0441\u0443, \u0434\u0430 \u0438 \u043f\u0440\u043e\u0441\u0442\u043e \u043a\u043e\u043b\u043b\u0435\u0433\u0430. \u0420\u043e\u0441\u043b\u044b\u0439, \u043a\u043e\u0440\u043e\u0442\u043a\u043e \u0441\u0442\u0440\u0438\u0436\u0435\u043d\u044b\u0439, \u0432 \u0441\u0432\u0435\u0442\u043b\u044b\u0445 \u0431\u0440\u044e\u043a\u0430\u0445 \u0445\u0430\u043a\u0438 \u0438 \u0447\u0435\u0440\u043d\u043e\u0439 \u0444\u0443\u0442\u0431\u043e\u043b\u043a\u0435. \u041a \u043d\u0435\u043c\u0443 \u043f\u043e\u0434\u043e\u0448\u0435\u043b \u043a\u0442\u043e-\u0442\u043e \u0438\u0437 \u043f\u0440\u0438\u0435\u0445\u0430\u0432\u0448\u0438\u0445 \u0441 \u043a\u043e\u043d\u0432\u043e\u0435\u043c, \u043e\u043d\u0438 \u0437\u0430\u0433\u043e\u0432\u043e\u0440\u0438\u043b\u0438, \u043d\u0435 \u0437\u0430\u0431\u044b\u0432 \u043f\u043e\u0445\u043b\u043e\u043f\u0430\u0442\u044c \u0434\u0440\u0443\u0433 \u0434\u0440\u0443\u0433\u0430 \u043f\u043e \u0441\u043f\u0438\u043d\u0430\u043c. \u2013 \u041e\u043d \u043a\u0430\u043a\u0438\u0435-\u0442\u043e \u0437\u0430\u043f\u0447\u0430\u0441\u0442\u0438 \u0436\u0434\u0430\u043b \u0442\u0430\u043a, \u0447\u0442\u043e \u0441\u043f\u0430\u0442\u044c \u043d\u0435 \u043c\u043e\u0433, \u043a\u0430\u0436\u0435\u0442\u0441\u044f, \u2013 \u043e\u0442\u043e\u0437\u0432\u0430\u043b\u0441\u044f \u044f. \u0421\u043e\u0431\u0435\u0441\u0435\u0434\u043d\u0438\u043a \u0414\u0436\u043e \u043e\u0442\u043a\u0438\u043d\u0443\u043b \u043f\u043e\u043b\u043e\u0433 \u0442\u0435\u043d\u0442\u0430 \u043d\u0430 \u0433\u0440\u0443\u0437\u043e\u0432\u0438\u043a\u0435, \u0437\u0430\u043b\u0435\u0437 \u0432\u043d\u0443\u0442\u0440\u044c \u0438 \u043d\u0430\u0447\u0430\u043b \u043f\u043e\u0434\u0430\u0432\u0430\u0442\u044c \u043e\u0442\u0442\u0443\u0434\u0430 \u043a\u0430\u0440\u0442\u043e\u043d\u043d\u044b\u0435 \u043a\u043e\u0440\u043e\u0431\u043a\u0438, \u0443\u0432\u0435\u0441\u0438\u0441\u0442\u044b\u0435 \u0441 \u0432\u0438\u0434\u0443, \u043a\u043e\u0442\u043e\u0440\u044b\u0435 \u0414\u0436\u043e \u0443\u043a\u043b\u0430\u0434\u044b\u0432\u0430\u043b \u0432 \u043f\u0438\u043a\u0430\u043f. \u2013 \u0422\u0435\u043f\u0435\u0440\u044c \u0443\u0441\u043d\u0435\u0442 \u0441\u043f\u043e\u043a\u043e\u0439\u043d\u043e? \u2013 \u041d\u0430\u0432\u0435\u0440\u043d\u043e\u0435. \u042f \u043e\u0431\u043d\u044f\u043b \u0435\u0435 \u0437\u0430 \u0442\u0430\u043b\u0438\u044e \u0438 \u043f\u0440\u0438\u0442\u044f\u043d\u0443\u043b \u043a \u0441\u0435\u0431\u0435 \u0431\u043b\u0438\u0436\u0435. \u0417\u0430 \u0441\u043f\u0438\u043d\u043e\u0439 \u043e\u0442\u043a\u0440\u044b\u043b\u0430\u0441\u044c \u0434\u0432\u0435\u0440\u044c \u0438 \u0433\u043e\u043b\u043e\u0441 \u043c\u0435\u0434\u0441\u0435\u0441\u0442\u0440\u044b \u0434\u043e\u043a\u0442\u043e\u0440\u0430 \u041c\u0430\u0440\u0442\u0438\u043d\u0435\u0441\u0430, \u0432\u044b\u0441\u043e\u043a\u043e\u0439 \u0438 \u0442\u043e\u0449\u0435\u0439 \u0431\u043b\u043e\u043d\u0434\u0438\u043d\u043a\u0438 \u0425\u044d\u0439\u0437\u0435\u043b, \u043f\u0440\u0438\u0433\u043b\u0430\u0441\u0438\u043b \u0411\u043e\u043d\u0438\u0442\u0443 \u0432\u043e\u0439\u0442\u0438. \u0410\u043b\u0435\u043a\u0441\u0430\u043d\u0434\u0440\u0430 \u043f\u0435\u0440\u0435\u043c\u0435\u0449\u0430\u0435\u0442\u0441\u044f \u0432 \u0441\u043f\u0430\u043b\u044c\u043d\u044e. \u0410 \u044f \u043e\u0441\u0442\u0430\u043b\u0441\u044f \u0436\u0434\u0430\u0442\u044c \u0432 \u043f\u0440\u0438\u0435\u043c\u043d\u043e\u0439, \u0443\u0441\u0435\u0432\u0448\u0438\u0441\u044c \u043d\u0430 \u0434\u0438\u0432\u0430\u043d \u0438 \u0434\u043e\u0441\u0442\u0430\u0432 \u0438\u0437 \u0441\u0443\u043c\u043a\u0438 \u043a\u043d\u0438\u0433\u0443. \u0414\u0443\u043c\u0430\u044e, \u0447\u0442\u043e \u043e\u0436\u0438\u0434\u0430\u043d\u0438\u0435 \u043d\u0435 \u043f\u044f\u0442\u044c \u043c\u0438\u043d\u0443\u0442 \u0437\u0430\u0439\u043c\u0435\u0442. \u041c\u043e\u0436\u043d\u043e \u0431\u044b \u043f\u043e\u0439\u0442\u0438 \u043f\u0440\u043e\u0433\u0443\u043b\u044f\u0442\u044c\u0441\u044f, \u0441 \u0442\u0435\u043c \u0436\u0435 \u0414\u0436\u043e \u043f\u043e\u043e\u0431\u0449\u0430\u0442\u044c\u0441\u044f, \u043d\u043e \u0432\u0434\u0440\u0443\u0433 \u043f\u043e\u043d\u0430\u0434\u043e\u0431\u043b\u044e\u0441\u044c \u0437\u0430\u0447\u0435\u043c-\u043d\u0438\u0431\u0443\u0434\u044c? \u0414\u0432\u0435\u0440\u044c \u0431\u044b\u043b\u0430 \u0442\u043e\u043b\u0441\u0442\u0430\u044f, \u0438\u0437-\u0437\u0430 \u043d\u0435\u0435 \u043d\u0438 \u0437\u0432\u0443\u043a\u0430 \u043d\u0435 \u0434\u043e\u043d\u043e\u0441\u0438\u043b\u043e\u0441\u044c. \u0427\u0438\u0442\u0430\u043b\u043e\u0441\u044c \u0438\u0437-\u0437\u0430 \u0432\u043e\u043b\u043d\u0435\u043d\u0438\u044f \u043f\u043b\u043e\u0445\u043e, \u0432\u0441\u0435 \u0432\u0440\u0435\u043c\u044f \u043b\u043e\u0432\u0438\u043b \u0441\u0435\u0431\u044f \u043d\u0430 \u0442\u043e\u043c, \u0447\u0442\u043e \u043a\u0430\u0436\u0434\u044b\u0439 \u0430\u0431\u0437\u0430\u0446 \u0447\u0438\u0442\u0430\u044e \u043f\u043e \u0434\u0432\u0430-\u0442\u0440\u0438 \u0440\u0430\u0437\u0430, \u0438 \u0432\u0441\u0435 \u0440\u0430\u0432\u043d\u043e \u043d\u0435 \u0437\u0430\u043f\u043e\u043c\u0438\u043d\u0430\u044e, \u043e \u0447\u0435\u043c \u0442\u0430\u043c \u0440\u0435\u0447\u044c. \u0417\u0430\u043a\u0440\u044b\u0432 \u043a\u043d\u0438\u0433\u0443, \u0432\u0441\u0442\u0430\u043b \u0443 \u043e\u043a\u043d\u0430, \u0440\u0430\u0441\u0441\u043c\u0430\u0442\u0440\u0438\u0432\u0430\u044f \u0441\u0443\u0435\u0442\u0443 \u0443 \u043a\u043e\u043d\u0432\u043e\u044f. \u0414\u0436\u043e \u0443\u0436\u0435 \u043d\u0435 \u0431\u044b\u043b\u043e, \u043d\u043e \u0431\u044b\u043b\u043e \u043c\u043d\u043e\u0433\u043e \u0434\u0440\u0443\u0433\u0438\u0445 \u0437\u043d\u0430\u043a\u043e\u043c\u044b\u0445 \u043b\u0438\u0446, \u0438 \u044f \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u043c\u0438\u043d\u0443\u0442 \u0438\u0433\u0440\u0430\u043b \u0441\u0430\u043c \u0441 \u0441\u043e\u0431\u043e\u0439 \u0432 \u0438\u0433\u0440\u0443, \u043f\u044b\u0442\u0430\u044f\u0441\u044c \u0443\u0433\u0430\u0434\u0430\u0442\u044c, \u0443 \u043a\u043e\u0433\u043e \u0442\u0430\u043c \u0441\u0435\u0439\u0447\u0430\u0441 \u043a\u0430\u043a\u0438\u0435 \u0434\u0435\u043b\u0430. \u041f\u043e\u0441\u0442\u0435\u043f\u0435\u043d\u043d\u043e \u0442\u043e\u043b\u043f\u0430 \u0440\u0430\u0441\u0441\u0430\u0441\u044b\u0432\u0430\u043b\u0430\u0441\u044c, \u0433\u0440\u0443\u0437\u043e\u0432\u0438\u043a\u0438 \u0440\u0430\u0437\u044a\u0435\u0445\u0430\u043b\u0438\u0441\u044c \u043a\u043e\u043c\u0443 \u043a\u0443\u0434\u0430 \u043d\u0443\u0436\u043d\u043e, \u043e\u0441\u0442\u0430\u043b\u043e\u0441\u044c \u0432\u0441\u0435\u0433\u043e \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e \u0447\u0435\u043b\u043e\u0432\u0435\u043a, \u0432 \u043f\u0435\u0448\u0435\u043c \u043f\u043e\u0440\u044f\u0434\u043a\u0435 \u043d\u0430\u043f\u0440\u0430\u0432\u0438\u0432\u0448\u0438\u0445\u0441\u044f \u0432 \"\u0414\u0436\u0438\u043c\u043c\u0438'\u0437\" \u2013 \u0431\u043b\u0438\u0436\u0430\u0439\u0448\u0438\u0439 \u0431\u0430\u0440. \u041e\u0431\u043c\u044b\u0442\u044c, \u0432\u0438\u0434\u0430\u0442\u044c, \"\u043f\u0440\u0438\u0445\u043e\u0434 \u0432\u0435\u0441\u043d\u044b\". \u0414\u0430, \u0442\u0435\u043f\u0435\u0440\u044c \u0436\u0438\u0437\u043d\u044c \u0441\u043d\u043e\u0432\u0430 \u043e\u0436\u0438\u0432\u0438\u0442\u0441\u044f, \u0430 \u0442\u043e \u043d\u0430 \u0432\u0440\u0435\u043c\u044f \u0441\u0435\u0437\u043e\u043d\u0430 \u0434\u043e\u0436\u0434\u0435\u0439 \u0410\u043b\u0430\u043c\u043e \u043f\u043e\u0433\u0440\u0443\u0437\u0438\u043b\u0441\u044f \u0432 \u0441\u043f\u044f\u0447\u043a\u0443. \u041d\u0435 \u0442\u0430\u043a \u0438 \u043f\u043b\u043e\u0445\u043e \u0431\u044b\u043b\u043e, \u0435\u0441\u043b\u0438 \u0447\u0435\u0441\u0442\u043d\u043e, \u044f \u043f\u0440\u0435\u043a\u0440\u0430\u0441\u043d\u043e \u043e\u0442\u0434\u043e\u0445\u043d\u0443\u043b \u043f\u043e\u0441\u043b\u0435 \u0432\u0441\u0435\u0445 \u0441\u043e\u0431\u044b\u0442\u0438\u0439 \u043f\u0440\u043e\u0448\u043b\u043e\u0433\u043e \u0436\u0430\u0440\u043a\u043e\u0433\u043e \u0441\u0435\u0437\u043e\u043d\u0430, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u0434\u043b\u044f \u043c\u0435\u043d\u044f \u043e\u043a\u0430\u0437\u0430\u043b\u0441\u044f \u0434\u0435\u0439\u0441\u0442\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0436\u0430\u0440\u043a\u0438\u043c, \u0442\u0430\u043a\u0438\u043c, \u0447\u0442\u043e \u0438 \u0441\u043f\u0435\u0447\u044c\u0441\u044f \u043d\u0435\u0434\u043e\u043b\u0433\u043e. \u041d\u043e \u0432\u0441\u0435 \u0437\u0430\u0432\u0435\u0440\u0448\u0438\u043b\u043e\u0441\u044c \u0431\u043b\u0430\u0433\u043e\u043f\u043e\u043b\u0443\u0447\u043d\u043e, \u0430 \u0432\u044b\u043d\u0443\u0436\u0434\u0435\u043d\u043d\u043e\u0435 \u0434\u043e\u043c\u043e\u0441\u0435\u0434\u0441\u0442\u0432\u043e \u043b\u0438\u0448\u044c \u043f\u0440\u0438\u0432\u0435\u043b\u043e \u043a \u0442\u043e\u043c\u0443, \u0447\u0442\u043e \u0441\u0435\u0439\u0447\u0430\u0441 \u0434\u0443\u0448\u0430 \u0436\u0430\u0436\u0434\u0430\u043b\u0430 \u0434\u0435\u044f\u0442\u0435\u043b\u044c\u043d\u043e\u0441\u0442\u0438. \u0414\u0430 \u0438 \u043f\u043b\u0430\u043d\u043e\u0432 \u043d\u0430 \u044d\u0442\u043e\u0442 \u0441\u0435\u0437\u043e\u043d \u0445\u0432\u0430\u0442\u0430\u043b\u043e, \u0434\u0430\u0436\u0435 \u0432 \u0438\u0445 \u0441\u043f\u0438\u0441\u043e\u043a \u0441\u0442\u0440\u0430\u0448\u043d\u043e \u0437\u0430\u0433\u043b\u044f\u0434\u044b\u0432\u0430\u0442\u044c. \u0414\u043b\u044f \u043d\u0430\u0447\u0430\u043b\u0430 \u043c\u043d\u0435 \u043d\u0430\u0434\u043e \u0432 \u041f\u041f\u0414 \u0441\u0433\u043e\u043d\u044f\u0442\u044c, \u043a\u0430\u043a \u0440\u0430\u0437 \u0441 \u043f\u0435\u0440\u0432\u044b\u043c \u043f\u043e\u043f\u0443\u0442\u043d\u044b\u043c \u043a\u043e\u043d\u0432\u043e\u0435\u043c. \u041f\u043e\u0441\u043a\u043e\u043b\u044c\u043a\u0443 \u044f \"\u0441\u043b\u0443\u0433\u0430 \u0434\u0432\u0443\u0445 \u0433\u043e\u0441\u043f\u043e\u0434\", \u043c\u043d\u0435 \u043d\u0430\u0434\u043e \u0431\u0443\u0434\u0435\u0442 \u0435\u0449\u0435 \u044d\u0442\u0438 \u0441\u0430\u043c\u044b\u0435 \u043f\u043b\u0430\u043d\u044b \u043a\u0430\u043a \u0441 \u043e\u0434\u043d\u0438\u043c \u043d\u0430\u0447\u0430\u043b\u044c\u0441\u0442\u0432\u043e\u043c \u0443\u0442\u0440\u044f\u0441\u0442\u0438, \u0442\u0430\u043a \u0438 \u0441\u043e \u0432\u0442\u043e\u0440\u044b\u043c. \u0410 \u0443\u0447\u0438\u0442\u044b\u0432\u0430\u044f, \u0447\u0442\u043e \u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u044f \u043c\u0435\u0436\u0434\u0443 \u044d\u0442\u0438\u043c\u0438 \"\u0433\u043e\u0441\u043f\u043e\u0434\u0430\u043c\u0438\" \u0441\u043b\u043e\u0436\u043d\u044b\u0435, \u0443\u0442\u0440\u044f\u0441\u0430\u0442\u044c \u0442\u043e\u0436\u0435 \u0431\u0443\u0434\u0435\u0442 \u043d\u0435\u043b\u0435\u0433\u043a\u043e. \u0418 \u0433\u043b\u0430\u0432\u043d\u043e\u0435, \u0442\u043e\u0442 \u0444\u0430\u043a\u0442, \u0447\u0442\u043e \u044f \u0441\u0438\u0436\u0443 \u043c\u0435\u0436\u0434\u0443 \u0434\u0432\u0443\u0445 \u0441\u0442\u0443\u043b\u044c\u0435\u0432, \u043c\u043e\u0435 \u043d\u0430\u0447\u0430\u043b\u044c\u0441\u0442\u0432\u043e \u0441 \u043e\u0431\u0435\u0438\u0445 \u0441\u0442\u043e\u0440\u043e\u043d \u0443\u0434\u043e\u0432\u043b\u0435\u0442\u0432\u043e\u0440\u044f\u0435\u0442. \u041f\u043e\u0445\u043e\u0436\u0435, \u0447\u0442\u043e \u0438\u043c \u043a\u0430\u0436\u0435\u0442\u0441\u044f, \u0447\u0442\u043e \u0442\u0430\u043a\u043e\u0435 \u043f\u043e\u043b\u043e\u0436\u0435\u043d\u0438\u0435 \u0434\u0435\u043b \u043f\u043e\u0437\u0432\u043e\u043b\u0438\u0442 \u0438\u0437\u0431\u0435\u0436\u0430\u0442\u044c \u043a\u043e\u043d\u0444\u043b\u0438\u043a\u0442\u043e\u0432 \u0442\u0430\u043c, \u0433\u0434\u0435 \u0438\u0445 \u043c\u043e\u0436\u043d\u043e \u0438\u0437\u0431\u0435\u0433\u0430\u0442\u044c. \u041d\u0435 \u043b\u0438\u0448\u0435\u043d\u043e \u0441\u043c\u044b\u0441\u043b\u0430, \u043d\u043e \u0438 \u0440\u0438\u0441\u043a\u0438 \u0434\u043b\u044f \u043c\u0435\u043d\u044f \u0438 \u043c\u043e\u0435\u0439 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043e\u0442 \u044d\u0442\u043e\u0433\u043e \u043f\u043e\u0432\u044b\u0448\u0430\u044e\u0442\u0441\u044f. \u041f\u043e\u043d\u044f\u0442\u043d\u043e, \u0440\u0430\u0431\u043e\u0442\u0430 \u0443 \u043d\u0430\u0441 \u0442\u0430\u043a\u0430\u044f, \u0447\u0442\u043e \u0431\u0435\u0437 \u0440\u0438\u0441\u043a\u0430 \u043d\u0438\u043a\u0430\u043a, \u043d\u043e \u0445\u043e\u0442\u0435\u043b\u043e\u0441\u044c \u0431\u044b \u0435\u0433\u043e \u043c\u0438\u043d\u0438\u043c\u0438\u0437\u0438\u0440\u043e\u0432\u0430\u0442\u044c \u043f\u043e \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u0438. \u0412 \u043a\u043e\u043d\u0446\u0435-\u043a\u043e\u043d\u0446\u043e\u0432, \u044f \u0436\u0435\u043d\u0430\u0442, \u0438 \u043c\u043d\u0435 \u0435\u0441\u0442\u044c \u0434\u043b\u044f \u043a\u043e\u0433\u043e \u0436\u0438\u0442\u044c. \u0414\u0430, \u0432 \u0441\u0435\u0437\u043e\u043d \u0434\u043e\u0436\u0434\u0435\u0439 \u043c\u044b \u0437\u0430\u0440\u0435\u0433\u0438\u0441\u0442\u0440\u0438\u0440\u043e\u0432\u0430\u043b\u0438 \u0431\u0440\u0430\u043a, \u0442\u043e \u0435\u0441\u0442\u044c \u0432\u0441\u0435 \u0436\u0435 \u043f\u043e\u0436\u0435\u043d\u0438\u043b\u0438\u0441\u044c. \u041f\u043e\u0448\u043b\u0438 \u043a \u043f\u0440\u0435\u043f\u043e\u0434\u043e\u0431\u043d\u043e\u043c\u0443 \u041a\u0443\u0438\u043c\u0431\u0438, \u0438 \"\u0440\u0430\u0441\u043f\u0438\u0441\u0430\u043b\u0438\u0441\u044c\", \u043f\u0440\u0438\u0437\u0432\u0430\u0432 \u0432 \u0441\u0432\u0438\u0434\u0435\u0442\u0435\u043b\u0438 \u0414\u0436\u043e \u0438 \u0435\u0433\u043e \u0434\u043e\u0447\u044c \u0414\u0436\u0435\u0439-\u0414\u0436\u0435\u0439. \u041d\u0435 \u043f\u043e \u0446\u0435\u0440\u043a\u043e\u0432\u043d\u043e\u043c\u0443 \u0440\u0438\u0442\u0443\u0430\u043b\u0443, \u0430 \u043f\u043e \u0433\u0440\u0430\u0436\u0434\u0430\u043d\u0441\u043a\u043e\u043c\u0443, \u043d\u043e \u044d\u0442\u043e \u0442\u043e\u0436\u0435 \u0437\u0434\u0435\u0441\u044c \u0441\u0447\u0438\u0442\u0430\u0435\u0442\u0441\u044f. \u0418 \u043c\u044b \u0437\u0434\u0435\u0441\u044c \u0432\u0441\u0435 \u0436\u0435 \u043d\u0435 \u0441\u043e\u0432\u0441\u0435\u043c \u043c\u0435\u0441\u0442\u043d\u044b\u0435, \u0442\u0430\u043a \u0447\u0442\u043e \u043f\u0440\u0435\u043f\u043e\u0434\u043e\u0431\u043d\u044b\u0439 \u043e\u0442\u043d\u0435\u0441\u0441\u044f \u0441 \u043f\u043e\u043d\u0438\u043c\u0430\u043d\u0438\u0435\u043c. \u0422\u0430\u043a \u0447\u0442\u043e \u043e\u0442\u043d\u043e\u0448\u0435\u043d\u0438\u044f \u043c\u043e\u0438 \u0441 \u0411\u043e\u043d\u0438\u0442\u043e\u0439 \u0442\u0435\u043f\u0435\u0440\u044c \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u0437\u0430\u043a\u043e\u043d\u043d\u044b, \u0438 \u043e\u0442 \u043e\u0431\u044f\u0437\u0430\u043d\u043d\u043e\u0441\u0442\u0435\u0439 \u0441\u0443\u043f\u0440\u0443\u0433\u0430, \u043a\u0430\u043a\u0438\u043c\u0438 \u0431\u044b \u043e\u043d\u0438 \u043d\u0438 \u0431\u044b\u043b\u0438, \u043c\u043d\u0435 \u0443\u0436\u0435 \u043d\u0435 \u043e\u0442\u0432\u0435\u0440\u0442\u0435\u0442\u044c\u0441\u044f. \u0414\u0432\u0435\u0440\u044c \u0437\u0430 \u0441\u043f\u0438\u043d\u043e\u0439 \u0440\u0430\u0441\u043f\u0430\u0445\u043d\u0443\u043b\u0430\u0441\u044c \u0438 \u0432 \u043f\u0440\u0438\u0435\u043c\u043d\u043e\u0439 \u043c\u0430\u0442\u0435\u0440\u0438\u0430\u043b\u0438\u0437\u043e\u0432\u0430\u043b\u0430\u0441\u044c \u041c\u0430\u0440\u0438\u044f \u041f\u0438\u043b\u0430\u0440 \u0420\u043e\u0434\u0440\u0438\u0433\u0435\u0441, \u043e\u043d\u0430 \u0436\u0435 \u0411\u043e\u043d\u0438\u0442\u0430, \u0441 \u0432\u0438\u0434\u043e\u043c \u0442\u0430\u0438\u043d\u0441\u0442\u0432\u0435\u043d\u043d\u044b\u043c \u0438 \u044f\u0432\u043d\u043e \u0434\u043e\u0432\u043e\u043b\u044c\u043d\u044b\u043c. \u2013 \u041d\u0443? \u2013 \u0427\u0435\u0442\u044b\u0440\u0435 \u043d\u0435\u0434\u0435\u043b\u0438. \u2013 \u0417\u043e\u043b\u043e\u0442\u0430\u044f! \u2013 \u0440\u0430\u0441\u043a\u0438\u043d\u0443\u043b \u044f \u0440\u0443\u043a\u0438 \u0434\u043b\u044f \u043e\u0431\u044a\u044f\u0442\u0438\u0439. \u2013 \u0414\u0430\u0439 \u043e\u0431\u043d\u0438\u043c\u0443! \u0410 \u043a\u043e\u0433\u0434\u0430 \u043f\u043e\u043b \u0443\u0437\u043d\u0430\u0435\u043c? \u041e\u0442\u0432\u0435\u0442\u0438\u043b \u043f\u043e\u044f\u0432\u0438\u0432\u0448\u0438\u0439\u0441\u044f \u0441\u043b\u0435\u0434\u043e\u043c \u0437\u0430 \u0411\u043e\u043d\u0438\u0442\u043e\u0439 \u0434\u043e\u043a\u0442\u043e\u0440 \u2013 \u043d\u0435\u0432\u044b\u0441\u043e\u043a\u0438\u0439 \u043f\u043e\u043b\u043d\u043e\u0432\u0430\u0442\u044b\u0439 \u043c\u0435\u043a\u0441\u0438\u043a\u0430\u043d\u0435\u0446, \u0432\u044b\u0440\u043e\u0441\u0448\u0438\u0439, \u0432\u043f\u0440\u043e\u0447\u0435\u043c, \u0432 \u0448\u0442\u0430\u0442\u0435 \u041d\u044c\u044e-\u041c\u0435\u043a\u0441\u0438\u043a\u043e \u0438 \u043f\u043e\u043b\u0443\u0447\u0438\u0432\u0448\u0438\u0439 \u0441\u0432\u043e\u0439 \u0434\u0438\u043f\u043b\u043e\u043c \u0432\u0440\u0430\u0447\u0430 \u0432 \u0443\u043d\u0438\u0432\u0435\u0440\u0441\u0438\u0442\u0435\u0442\u0435 \u0410\u0440\u0438\u0437\u043e\u043d\u0430 \u0421\u0442\u044d\u0439\u0442: \u2013 \u041d\u0430\u0434\u043e \u043f\u0440\u0438\u043c\u0435\u0440\u043d\u043e \u0434\u043e \u0434\u0432\u0430\u0434\u0446\u0430\u0442\u044c \u0442\u0440\u0435\u0442\u044c\u0435\u0439 \u043d\u0435\u0434\u0435\u043b\u0438 \u043f\u043e\u0434\u043e\u0436\u0434\u0430\u0442\u044c. \u041f\u043e\u0442\u0435\u0440\u043f\u0438\u0448\u044c? \u2013 \u0414\u043e\u043a, \u0430 \u043a\u0443\u0434\u0430 \u044f \u0434\u0435\u043d\u0443\u0441\u044c? \u2013 \u043e\u0431\u0435\u0440\u043d\u0443\u043b\u0441\u044f \u044f \u043a \u043d\u0435\u043c\u0443, \u043f\u0440\u043e\u0434\u043e\u043b\u0436\u0430\u044f \u043e\u0431\u043d\u0438\u043c\u0430\u0442\u044c \u0443\u0436\u0435 \u043d\u0430\u0447\u0430\u0432\u0448\u0443\u044e \u0432\u044b\u0440\u044b\u0432\u0430\u0442\u044c\u0441\u044f \u0411\u043e\u043d\u0438\u0442\u0443. \u2013 \u0415\u0441\u0442\u044c \u0434\u0440\u0443\u0433\u0438\u0435 \u043e\u043f\u0446\u0438\u0438? \u0422\u043e\u0442 \u043b\u0438\u0448\u044c \u0440\u0430\u0437\u0432\u0435\u043b \u0440\u0443\u043a\u0430\u043c\u0438. \u0410 \u043d\u0430 \u043d\u0435\u0442 \u0438 \u0441\u0443\u0434\u0430 \u043d\u0435\u0442. \u0414\u0430 \u043c\u043d\u0435 \u0432\u0441\u0435 \u0440\u0430\u0432\u043d\u043e, \u0435\u0441\u043b\u0438 \u0447\u0435\u0441\u0442\u043d\u043e, \u043a\u0442\u043e \u0431\u044b \u043d\u0438 \u0431\u044b\u043b. \u0414\u043e \u0441\u043e\u0440\u043e\u043a\u0430 \u043e\u0434\u043d\u043e\u0433\u043e \u0433\u043e\u0434\u0430 \u0434\u043e\u0436\u0438\u043b, \u0430 \u0432\u0441\u0435 \u0432 \u0445\u043e\u043b\u043e\u0441\u0442\u044f\u043a\u0430\u0445 \u0438 \u0431\u0435\u0437 \u0434\u0435\u0442\u0435\u0439. \u041f\u043e \u043c\u043d\u0435 \u0442\u0430\u043a \u0443\u0436\u0435 \u043a\u0440\u0438\u0442\u0438\u0447\u0435\u0441\u043a\u0438\u0439 \u0441\u0440\u043e\u043a, \u043f\u043e\u0437\u0434\u043d\u0435\u0435 \u0438 \u043d\u0435\u043b\u044c\u0437\u044f. \u0412\u043e\u0442 \u0442\u0430\u043a \u043f\u0440\u0438\u043a\u0438\u043d\u0443\u0442\u044c \u0435\u0441\u043b\u0438, \u0447\u0442\u043e \u0432\u043e\u0434\u0438\u0448\u044c \u0442\u044b \u0440\u0435\u0431\u0435\u043d\u043a\u0430 \u0432 \u0448\u043a\u043e\u043b\u0443. \u0423 \u0432\u0441\u0435\u0445 \u043e\u0442\u0446\u044b \u043a\u0430\u043a \u043e\u0442\u0446\u044b, \u0430 \u0443 \u0442\u0432\u043e\u0435\u0433\u043e \u2013 \u0441\u0442\u0430\u0440\u044b\u0439 \u043f\u0435\u0440\u0434\u0443\u043d. \u041e\u043d, \u043f\u043e\u043d\u0438\u043c\u0430\u0435\u0448\u044c, \u0436\u0438\u043b \u0434\u043b\u044f \u0441\u0435\u0431\u044f, \u0430 \u043d\u0430 \u0441\u0442\u0430\u0440\u043e\u0441\u0442\u0438 \u043b\u0435\u0442 \u0441\u043e\u043e\u0431\u0440\u0430\u0437\u0438\u043b, \u0447\u0442\u043e \u0434\u0435\u0442\u0435\u0439 \u0445\u043e\u0447\u0435\u0442. \u2013 \u0422\u044b \u0441\u0447\u0430\u0441\u0442\u043b\u0438\u0432? \u2013 \u0442\u0440\u0435\u0431\u043e\u0432\u0430\u0442\u0435\u043b\u044c\u043d\u043e \u0441\u043f\u0440\u043e\u0441\u0438\u043b\u0430 \u041c\u0430\u0440\u0438\u044f \u041f\u0438\u043b\u0430\u0440 \u0432\u0441\u0435 \u0436\u0435 \u0432\u044b\u0440\u0432\u0430\u0432\u0448\u0438\u0441\u044c. \u2013 \u041d\u0435\u0442, \u0442\u044b \u0432\u0441\u043b\u0443\u0445 \u0441\u043a\u0430\u0436\u0438! \u2013 \u0421\u0447\u0430\u0441\u0442\u043b\u0438\u0432! \u2013 \u0421\u0435\u0437\u043e\u043d \u0434\u043e\u0436\u0434\u0435\u0439 \u0443 \u043d\u0430\u0441 \u0432\u0441\u0435\u0433\u0434\u0430 \u0438\u0437\u043e\u0431\u0438\u043b\u0438\u0435 \u0431\u0435\u0440\u0435\u043c\u0435\u043d\u043d\u043e\u0441\u0442\u0435\u0439 \u0434\u0430\u0435\u0442, \u2013 \u0441\u043a\u0430\u0437\u0430\u043b, \u0443\u043b\u044b\u0431\u043d\u0443\u0432\u0448\u0438\u0441\u044c, \u0434\u043e\u043a\u0442\u043e\u0440. \u0422\u0435\u043f\u0435\u0440\u044c \u0443 \u043c\u0435\u043d\u044f \u043d\u0430\u043f\u043b\u044b\u0432 \u043f\u0430\u0446\u0438\u0435\u043d\u0442\u043e\u0432. \u041d\u0430 \u0443\u043b\u0438\u0446\u0435 \u0441\u043a\u0440\u0438\u043f\u043d\u0443\u043b\u0438 \u0442\u043e\u0440\u043c\u043e\u0437\u0430, \u0443\u043c\u043e\u043b\u043a \u0442\u0430\u0440\u0430\u0445\u0442\u0435\u0432\u0448\u0438\u0439 \u043c\u043e\u0442\u043e\u0440. \u0414\u0432\u0435\u0440\u044c \u0440\u0430\u0441\u043f\u0430\u0445\u043d\u0443\u043b\u0430\u0441\u044c \u0438 \u0432 \u043f\u0440\u0438\u0435\u043c\u043d\u0443\u044e \u0432\u043e\u0448\u043b\u0430 \u0441\u043c\u0443\u0442\u043d\u043e \u0437\u043d\u0430\u043a\u043e\u043c\u0430\u044f \u0436\u0435\u043d\u0449\u0438\u043d\u0430 \u0441 \u0431\u043e\u043b\u044c\u0448\u0438\u043c \u0436\u0438\u0432\u043e\u0442\u043e\u043c. \u042d\u0442\u0430 \u0443\u0436\u0435 \u0442\u043e\u0447\u043d\u043e \u043f\u043e\u043b \u0441\u0432\u043e\u0435\u0433\u043e \u043c\u043b\u0430\u0434\u0435\u043d\u0446\u0430 \u043e\u043f\u0440\u0435\u0434\u0435\u043b\u0438\u043b\u0430, \u0441\u0443\u0434\u044f \u043f\u043e \u0433\u0430\u0431\u0430\u0440\u0438\u0442\u0430\u043c. \u0418 \u043d\u0435 \u0441\u0435\u0437\u043e\u043d \u0434\u043e\u0436\u0434\u0435\u0439 \u043f\u0440\u0438\u0447\u0438\u043d\u043e\u0439 \u0431\u044b\u043b. \u0414\u0430, \u043e\u043d\u0430, \u043a\u0430\u0436\u0435\u0442\u0441\u044f, \u0432 \u0442\u0430\u0443\u043d\u0445\u043e\u043b\u043b\u0435 \u0440\u0430\u0431\u043e\u0442\u0430\u0435\u0442, \u0441\u0435\u043a\u0440\u0435\u0442\u0430\u0440\u0435\u043c, \u044f \u0435\u0435 \u0442\u0430\u043c \u0432\u0438\u0434\u0435\u043b. \u041c\u044b \u043f\u043e\u043f\u0440\u043e\u0449\u0430\u043b\u0438\u0441\u044c \u0441 \u0434\u043e\u043a\u0442\u043e\u0440\u043e\u043c, \u0437\u0430\u0432\u043e\u0434\u0438\u0432\u0448\u0438\u043c \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0443\u044e \u043f\u0430\u0446\u0438\u0435\u043d\u0442\u043a\u0443 \u0432 \u043a\u0430\u0431\u0438\u043d\u0435\u0442, \u0438 \u0432\u044b\u0448\u043b\u0438 \u043d\u0430 \u0443\u043b\u0438\u0446\u0443. \u2013 \u041d\u0443, \u0432\u043e\u0442 \u0442\u0430\u043a, \u2013 \u0441\u043a\u0430\u0437\u0430\u043b\u0430 \u041c\u0430\u0440\u0438\u044f \u041f\u0438\u043b\u0430\u0440, \u043e\u0431\u0435\u0440\u043d\u0443\u0432\u0448\u0438\u0441\u044c \u043a\u043e \u043c\u043d\u0435. \u2013 \u0422\u0435\u043f\u0435\u0440\u044c \u0432\u0441\u0435 \u0430\u0442\u0440\u0438\u0431\u0443\u0442\u044b \u0441\u0435\u043c\u044c\u0438 \u043d\u0430\u043b\u0438\u0446\u043e. \u041f\u0440\u043e\u0449\u0430\u0439\u0441\u044f \u0441\u043e \u0441\u0432\u043e\u0435\u0439 \u0441\u0432\u043e\u0431\u043e\u0434\u043e\u0439 \u043e\u043a\u043e\u043d\u0447\u0430\u0442\u0435\u043b\u044c\u043d\u043e. \u2013 \u0410\u0433\u0430, \u0441\u0432\u043e\u0431\u043e\u0434\u044b \u0443 \u043c\u0435\u043d\u044f \u0441 \u0442\u043e\u0431\u043e\u0439 \u043f\u0440\u044f\u043c\u043e \u0436\u0443\u0442\u044c \u0441\u043a\u043e\u043b\u044c\u043a\u043e, \u2013 \u0432\u0437\u0434\u043e\u0445\u043d\u0443\u043b \u044f. \u2013 \u041d\u0430 \u043c\u043e\u0439 \u0432\u0437\u0433\u043b\u044f\u0434, \u0442\u0430\u043a \u0441\u043b\u0438\u0448\u043a\u043e\u043c \u043c\u043d\u043e\u0433\u043e. \u041d\u043e \u044d\u0442\u043e \u043c\u044b \u0438\u0441\u043f\u0440\u0430\u0432\u0438\u043c. \u2013 \u041c\u044b? \u2013 \u041a\u043e\u0433\u0434\u0430 \u0440\u0435\u0431\u0435\u043d\u043e\u043a \u0440\u043e\u0434\u0438\u0442\u0441\u044f. \u2013 \u0431\u0443\u0434\u0435\u043c \u0443\u0436\u0435 \"\u043c\u044b\". \u0418 \u0441\u0440\u0430\u0437\u0443 \u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0435\u0433\u043e, \u0447\u0442\u043e\u0431\u044b \u0443\u0436\u0435 \u0440\u0435\u0448\u0438\u0442\u0435\u043b\u044c\u043d\u044b\u0439 \u0447\u0438\u0441\u043b\u0435\u043d\u043d\u044b\u0439 \u043f\u0435\u0440\u0435\u0432\u0435\u0441 \u043d\u0430 \u043d\u0430\u0448\u0435\u0439 \u0441\u0442\u043e\u0440\u043e\u043d\u0435 \u0431\u044b\u043b. \u042f \u043d\u0438\u0447\u0435\u0433\u043e \u043d\u0435 \u043e\u0442\u0432\u0435\u0442\u0438\u043b, \u043b\u0438\u0448\u044c \u0440\u0430\u0437\u0432\u0435\u043b \u0440\u0443\u043a\u0430\u043c\u0438 \u0438 \u0440\u0430\u0441\u043f\u0430\u0445\u043d\u0443\u043b \u043f\u0435\u0440\u0435\u0434 \u043d\u0435\u0439 \u043f\u0430\u0441\u0441\u0430\u0436\u0438\u0440\u0441\u043a\u0443\u044e \u0434\u0432\u0435\u0440\u0446\u0443 \"\u0438\u043b\u0442\u0438\u0441\u0430\" \u2013 \u043d\u0435\u043c\u0435\u0446\u043a\u043e\u0433\u043e \u0432\u043e\u0435\u043d\u043d\u043e\u0433\u043e \u0432\u043d\u0435\u0434\u043e\u0440\u043e\u0436\u043d\u0438\u043a\u0430, \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u043e\u0433\u043e \u0438 \u043d\u0435\u0432\u0437\u0440\u0430\u0447\u043d\u043e\u0433\u043e, \u043a\u043e\u0442\u043e\u0440\u044b\u0439 \u043f\u0440\u0438 \u044d\u0442\u043e\u043c \u043e\u0442\u043b\u0438\u0447\u0430\u043b\u0441\u044f \u0440\u0435\u0434\u043a\u043e\u0439 \u043f\u0440\u043e\u0445\u043e\u0434\u0438\u043c\u043e\u0441\u0442\u044c\u044e \u0438 \u043d\u0435 \u043f\u043e\u0440\u0430\u0436\u0430\u044e\u0449\u0438\u043c \u0432\u043e\u043e\u0431\u0440\u0430\u0436\u0435\u043d\u0438\u0435 \u0430\u043f\u043f\u0435\u0442\u0438\u0442\u043e\u043c \u043a \u0441\u043e\u043b\u044f\u0440\u043a\u0435. \u041a\u0441\u0442\u0430\u0442\u0438, \u043c\u043e\u0436\u043d\u043e \u0443\u0436\u0435. \u041f\u043e\u0436\u0430\u043b\u0443\u0439, \u0438 \u0442\u0435\u043d\u0442 \u0441\u043d\u0438\u043c\u0430\u0442\u044c, \u0434\u043e\u0436\u0434\u0438 \u0437\u0430\u043a\u043e\u043d\u0447\u0438\u043b\u0438\u0441\u044c. \u041a \u0442\u0430\u043a\u043e\u043c\u0443 \u0432\u044b\u0432\u043e\u0434\u0443 \u044f \u043f\u0440\u0438\u0448\u0435\u043b, \u0443\u0441\u0435\u0432\u0448\u0438\u0441\u044c \u0437\u0430 \u0440\u0443\u043b\u044c \u0438 \u043e\u0431\u043d\u0430\u0440\u0443\u0436\u0438\u0432, \u0447\u0442\u043e \u0432\u043e\u0437\u0434\u0443\u0445 \u043f\u043e\u0434 \u0442\u0435\u043d\u0442\u043e\u043c \u0443\u0441\u043f\u0435\u043b \u0440\u0430\u0441\u043a\u0430\u043b\u0438\u0442\u044c\u0441\u044f. \u0425\u043e\u0440\u043e\u0448\u043e \u0431\u044b\u043b\u043e \u0431\u044b \u043e\u043a\u043d\u0430 \u043e\u0442\u043a\u0440\u044b\u0442\u044b\u043c\u0438 \u043e\u0441\u0442\u0430\u0432\u0438\u0442\u044c, \u043d\u043e \u043d\u0435 \u043e\u0442\u043a\u0440\u044b\u0432\u0430\u044e\u0442\u0441\u044f \u0437\u0434\u0435\u0441\u044c \u043e\u043d\u0438, \u043d\u0430\u0434\u043e \u0432\u0441\u044e \u0432\u0435\u0440\u0445\u043d\u044e\u044e \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u043a\u0443 \u0434\u0432\u0435\u0440\u0438 \u0441\u043d\u0438\u043c\u0430\u0442\u044c. \u0427\u0435\u043c \u0434\u043e\u043c\u0430 \u0438 \u0437\u0430\u0439\u043c\u0443\u0441\u044c, \u043f\u043e\u0436\u0430\u043b\u0443\u0439. \u041c\u0430\u0440\u0438\u044f \u0432\u043e\u0437\u0432\u0440\u0430\u0449\u0430\u0435\u0442\u0441\u044f \u043d\u0430 \u043a\u0443\u0445\u043d\u044e. \u041d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0434\u0438\u0437\u0435\u043b\u0435\u043a \u0440\u044b\u043a\u043d\u0443\u043b \u043f\u043e\u0434 \u043f\u043b\u043e\u0441\u043a\u0438\u043c \u0440\u0435\u0431\u0440\u0438\u0441\u0442\u044b\u043c \u043a\u0430\u043f\u043e\u0442\u043e\u043c \u0432\u0435\u0437\u0434\u0435\u0445\u043e\u0434\u0430, \u043c\u0430\u0448\u0438\u043d\u0430 \u043d\u0435\u0442\u043e\u0440\u043e\u043f\u043b\u0438\u0432\u043e \u0442\u0440\u043e\u043d\u0443\u043b\u0430\u0441\u044c \u0441 \u043c\u0435\u0441\u0442\u0430, \u0445\u0440\u0443\u0441\u0442\u043d\u0443\u043b \u043f\u043e\u0434 \u043f\u043e\u043a\u0440\u044b\u0448\u043a\u0430\u043c\u0438 \u0433\u0440\u0430\u0432\u0438\u0439. \u2013 \u0414\u0430\u0432\u0430\u0439 \u043a \u0423\u0438\u043b\u0441\u043e\u043d\u0443 \u0437\u0430\u0435\u0434\u0435\u043c, \u0445\u043e\u0447\u0443 \u043c\u044f\u0441\u0430 \u043a\u0443\u043f\u0438\u0442\u044c, \u2013 \u0441\u043a\u0430\u0437\u0430\u043b\u0430 \u0411\u043e\u043d\u0438\u0442\u0430. \u2013 \u0421\u0442\u0435\u0439\u043a\u0438 \u043f\u043e\u0436\u0430\u0440\u0438\u043c. \u2013 \u041d\u0435 \u0432\u043e\u043f\u0440\u043e\u0441. \u0427\u0430\u043a \u0423\u0438\u043b\u0441\u043e\u043d \u2013 \u044d\u0442\u043e \u043c\u044f\u0441\u043d\u0438\u043a \u043c\u0435\u0441\u0442\u043d\u044b\u0439. \u0423 \u043d\u0435\u0433\u043e \u0438 \u0441\u0430\u043c\u043e\u0433\u043e \u0444\u0435\u0440\u043c\u0430 \u0435\u0441\u0442\u044c, \u0438 \u0441\u043a\u0443\u043f\u0430\u0435\u0442 \u043e\u043d \u043c\u044f\u0441\u043e \u0443 \u0434\u0440\u0443\u0433\u0438\u0445. \u0412\u044b\u0431\u043e\u0440 \u0443 \u043d\u0435\u0433\u043e \u0445\u043e\u0440\u043e\u0448\u0438\u0439, \u0430 \u043a\u0440\u043e\u043c\u0435 \u0442\u043e\u0433\u043e, \u043c\u043e\u0436\u043d\u043e \u043a\u0443\u043f\u0438\u0442\u044c \u0435\u0449\u0435 \u043c\u043d\u043e\u0433\u043e \u0447\u0435\u0433\u043e \u043f\u043e\u043b\u0435\u0437\u043d\u043e\u0433\u043e. \u0421\u0443\u043f\u0435\u0440\u043c\u0430\u0440\u043a\u0435\u0442\u043e\u0432 \u0437\u0434\u0435\u0441\u044c \u043d\u0435\u0442, \u043d\u0435 \u0434\u043e\u0440\u043e\u0441\u043b\u0438 \u043c\u044b \u0434\u043e \u043d\u0438\u0445, \u0442\u0430\u043a \u0447\u0442\u043e \u0432\u043e\u0442 \u0442\u0430\u043a \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u044b \u0438 \u043f\u043e\u043a\u0443\u043f\u0430\u0435\u043c: \u0447\u0442\u043e \u043f\u0440\u044f\u043c\u043e \u0441 \u0444\u0435\u0440\u043c \u0431\u0435\u0440\u0435\u043c, \u0447\u0442\u043e \u0443 \u043c\u044f\u0441\u043d\u0438\u043a\u0430, \u0447\u0442\u043e \u0443 \u043f\u0435\u043a\u0430\u0440\u044f, \u0447\u0442\u043e \u043c\u043e\u043b\u043e\u0447\u043d\u0438\u043a \u043f\u0440\u0438\u0432\u0435\u0437\u0435\u0442. \u0417\u0430\u0442\u043e \u0441\u0432\u0435\u0436\u0435\u0435 \u0432\u0441\u0435, \u043a\u0430\u043a \u0432\u0441\u043f\u043e\u043c\u043d\u0438\u0448\u044c \u043f\u043e\u0441\u043b\u0435 \u044d\u0442\u043e\u0439 \u0435\u0434\u0443 \u0442\u0443, \u0447\u0442\u043e \"\u0438\u0437 \u043f\u0440\u043e\u0448\u043b\u043e\u0439 \u0436\u0438\u0437\u043d\u0438\", \u0442\u0430\u043a \u0434\u0430\u0436\u0435 \u043f\u043b\u0435\u0432\u0430\u0442\u044c\u0441\u044f \u0445\u043e\u0447\u0435\u0442\u0441\u044f. \u041d\u0430 \u043f\u0435\u0440\u0432\u043e\u043c \u0436\u0435 \u043f\u0435\u0440\u0435\u043a\u0440\u0435\u0441\u0442\u043a\u0435 \u0441\u0432\u0435\u0440\u043d\u0443\u043b \u043d\u0430\u043f\u0440\u0430\u0432\u043e, \u043f\u043e\u043c\u0430\u0445\u0430\u0432 \u0440\u0443\u043a\u043e\u0439 \u0448\u0435\u0434\u0448\u0435\u043c\u0443 \u043d\u0430\u0432\u0441\u0442\u0440\u0435\u0447\u0443 \"\u0421\u044b\u043d\u0443 \u0421\u044d\u043c\u0430\" \u2013 \u043f\u043e\u0434\u0440\u043e\u0441\u0442\u043a\u0443, \u0441\u044b\u043d\u0443 \u043c\u043e\u0435\u0433\u043e \u043f\u0440\u0438\u044f\u0442\u0435\u043b\u044f, \u0430 \u0437\u0430\u043e\u0434\u043d\u043e \u0438 \u043a\u043e\u043d\u043a\u0443\u0440\u0435\u043d\u0442\u0430, \u0432\u043b\u0430\u0434\u0435\u043b\u044c\u0446\u0430 \u0432\u0442\u043e\u0440\u043e\u0433\u043e \u0432 \u044d\u0442\u043e\u043c \u0433\u043e\u0440\u043e\u0434\u0435 \u043e\u0440\u0443\u0436\u0435\u0439\u043d\u043e\u0433\u043e \u043c\u0430\u0433\u0430\u0437\u0438\u043d\u0430. \u0422\u043e\u0442 \u0442\u043e\u0436\u0435 \u043c\u0430\u0445\u043d\u0443\u043b \u0440\u0443\u043a\u043e\u0439 \u0438 \u043f\u0435\u0440\u0435\u0431\u0435\u0436\u0430\u043b \u0434\u043e\u0440\u043e\u0433\u0443 \u0437\u0430 \u043d\u0430\u0448\u0435\u0439 \u043c\u0430\u0448\u0438\u043d\u043e\u0439. \u0414\u043e\u0440\u043e\u0433\u0430 \u0432\u0435\u043b\u0430 \u043d\u0430\u0441 \u043c\u0435\u0436\u0434\u0443 \u0440\u044f\u0434\u0430\u043c\u0438 \u0432\u044b\u0441\u0442\u0440\u043e\u0438\u0432\u0448\u0438\u0445\u0441\u044f \u0432\u0434\u043e\u043b\u044c \u0443\u043b\u0438\u0446\u044b \u0449\u0438\u0442\u043e\u0432\u044b\u0445 \u0434\u043e\u043c\u043e\u0432, \u0432\u044b\u0441\u0442\u0440\u043e\u0435\u043d\u043d\u044b\u0445 \u0432 \u0442\u0438\u043f\u0438\u0447\u043d\u043e \u0430\u043c\u0435\u0440\u0438\u043a\u0430\u043d\u0441\u043a\u043e\u043c \u0441\u0442\u0438\u043b\u0435 \"\u0432\u0435\u0441\u0442\u0435\u0440\u043d\" \u0438 \u043f\u043e \u0442\u0438\u043f\u0438\u0447\u043d\u043e \u0430\u043c\u0435\u0440\u0438\u043a\u0430\u043d\u0441\u043a\u043e\u0439 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438, \u0442\u043e \u0435\u0441\u0442\u044c \u0434\u0435\u0448\u0435\u0432\u043e \u0438 \u0431\u044b\u0441\u0442\u0440\u043e, \u0437\u0430\u0442\u043e \u043d\u0435 \u044d\u043a\u043e\u043d\u043e\u043c\u044f \u043c\u0435\u0442\u0440\u0430\u0436. \u041f\u0435\u0440\u0432\u044b\u0435 \u044d\u0442\u0430\u0436\u0438 \u0431\u044b\u043b\u0438 \u0437\u0430\u043d\u044f\u0442\u044b \u043c\u0430\u0433\u0430\u0437\u0438\u043d\u0447\u0438\u043a\u0430\u043c\u0438, \u043a\u0430\u0444\u0435\u0448\u043a\u0430\u043c\u0438, \u043e\u0442\u0434\u0435\u043b\u0435\u043d\u0438\u044f\u043c\u0438 \u0431\u0430\u043d\u043a\u043e\u0432, \u043f\u0430\u0440\u0438\u043a\u043c\u0430\u0445\u0435\u0440\u0441\u043a\u0438\u043c\u0438 \u2013 \u043c\u044b \u043a\u0430\u043a \u0440\u0430\u0437 \u0431\u044b\u043b\u0438 \u0432 \"\u0434\u0435\u043b\u043e\u0432\u043e\u043c \u0446\u0435\u043d\u0442\u0440\u0435\" \u0433\u043e\u0440\u043e\u0434\u043a\u0430 \u0410\u043b\u0430\u043c\u043e. \u041c\u0435\u043b\u044c\u043a\u043d\u0443\u043b\u0438 \u0437\u0434\u0430\u043d\u0438\u044f \u0443\u043f\u0440\u0430\u0432\u043b\u0435\u043d\u0438\u044f \u0448\u0435\u0440\u0438\u0444\u0430 \u0441 \u0432\u044b\u0441\u0442\u0440\u043e\u0438\u0432\u0448\u0438\u043c\u0438\u0441\u044f \u0432\u043e\u0437\u043b\u0435 \u043d\u0435\u0433\u043e \u0447\u0435\u0440\u043d\u043e-\u0431\u0435\u043b\u044b\u043c\u0438 \u0432\u043d\u0435\u0434\u043e\u0440\u043e\u0436\u043d\u0438\u043a\u0430\u043c\u0438, \u0438 \u043c\u0435\u0441\u0442\u043d\u043e\u0433\u043e \u043f\u043e\u0436\u0430\u0440\u043d\u043e\u0433\u043e \u0434\u0435\u043f\u0430\u0440\u0442\u0430\u043c\u0435\u043d\u0442\u0430, \u0441\u0442\u043e\u044f\u043d\u043a\u0430 \u0443 \u043a\u043e\u0442\u043e\u0440\u043e\u0433\u043e \u0431\u044b\u043b\u0430 \u043f\u0443\u0441\u0442\u0430, \u0437\u0430\u0442\u0435\u043c \u043f\u0440\u043e\u0435\u0445\u0430\u043b\u0438 \u0434\u0432\u0443\u0445\u044d\u0442\u0430\u0436\u043d\u043e\u0435 \u0437\u0434\u0430\u043d\u0438\u0435 \u0442\u0430\u0443\u043d-\u0445\u043e\u043b\u043b\u0430 \u0441 \u0440\u0430\u0437\u0432\u0435\u0432\u0430\u044e\u0449\u0438\u043c\u0441\u044f \u043d\u0430\u0434 \u0444\u0430\u0441\u0430\u0434\u043e\u043c \u0444\u043b\u0430\u0433\u043e\u043c \u0441 \u043e\u0434\u0438\u043d\u043e\u043a\u043e\u0439 \u0437\u0432\u0435\u0437\u0434\u043e\u0439. \u0418, \u0432 \u043e\u0431\u0449\u0435\u043c, \u0432\u0435\u0441\u044c \u0446\u0435\u043d\u0442\u0440 \u0433\u043e\u0440\u043e\u0434\u043a\u0430 \u0438 \u043f\u0440\u043e\u0441\u043a\u043e\u0447\u0438\u043b\u0438. \u0410 \u0432\u043e\u043e\u0431\u0449\u0435 \u044f \u0443\u0436\u0435 \u043f\u0440\u0438\u0432\u044b\u043a. \u0418 \u0441\u0432\u043e\u044e \u0431\u044b\u0432\u0448\u0443\u044e \u043c\u043e\u0441\u043a\u043e\u0432\u0441\u043a\u0443\u044e \u0436\u0438\u0437\u043d\u044c \u0432\u0441\u043f\u043e\u043c\u0438\u043d\u0430\u044e \u0441 \u0443\u0436\u0430\u0441\u043e\u043c. \u041e\u0433\u0440\u043e\u043c\u043d\u044b\u0439 \u0433\u043e\u0440\u043e\u0434, \u0448\u0443\u043c, \u0441\u043c\u043e\u0433, \u0433\u0440\u044f\u0437\u044c... \u0434\u0430, \u0442\u0430\u043c \u043a\u0440\u0443\u0433\u043e\u043c \u0430\u0441\u0444\u0430\u043b\u044c\u0442 \u0438 \u043d\u0430 \u043f\u0435\u0440\u0432\u044b\u0439, \u043d\u0435\u0438\u0441\u043a\u0443\u0448\u0435\u043d\u043d\u044b\u0439 \u0432\u0437\u0433\u043b\u044f\u0434, \u0441\u0430\u043c\u0430\u044f \u0433\u0440\u044f\u0437\u044c \u043a\u0430\u043a \u0440\u0430\u0437 \u0437\u0434\u0435\u0441\u044c, \u043f\u043e\u0434 \u043d\u043e\u0433\u0430\u043c\u0438 \u2013 \u043d\u043e \u043f\u043e\u0436\u0438\u0432 \u043d\u0435\u043c\u043d\u043e\u0433\u043e \u0432 \u0410\u043b\u0430\u043c\u043e, \u0438\u043b\u0438 \u0431\u043e\u043b\u044c\u0448\u0438\u043d\u0441\u0442\u0432\u0435 \u0434\u0440\u0443\u0433\u0438\u0445 \u043c\u0430\u043b\u0435\u043d\u044c\u043a\u0438\u0445 \u0433\u043e\u0440\u043e\u0434\u043a\u043e\u0432 \u041d\u043e\u0432\u043e\u0439 \u0417\u0435\u043c\u043b\u0438, \u0442\u044b \u043f\u043e\u043d\u0438\u043c\u0430\u0435\u0448\u044c, \u043a\u0430\u043a \u0442\u044b \u0441 \u044d\u0442\u0438\u043c \u043e\u0448\u0438\u0431\u0430\u043b\u0441\u044f. \u0413\u0440\u044f\u0437\u044c \u2013 \u043e\u043d\u0430 \u0432\u0441\u0435 \u0436\u0435 \u0442\u0430\u043c. \u0410 \u0437\u0434\u0435\u0441\u044c... \u0437\u0434\u0435\u0441\u044c \u043f\u0440\u043e\u0441\u0442\u043e \u043d\u0435\u0442 \u043f\u043e\u043a\u0430 \u0432\u043e\u0437\u043c\u043e\u0436\u043d\u043e\u0441\u0442\u0438 \u0432\u0441\u0435 \u0437\u0430\u043c\u043e\u0441\u0442\u0438\u0442\u044c. \u041d\u043e \u043a\u043e\u0433\u0434\u0430-\u043d\u0438\u0431\u0443\u0434\u044c \u0431\u0443\u0434\u0435\u0442. \u0410 \u043d\u0435 \u0431\u0443\u0434\u0435\u0442 \u2013 \u0442\u0430\u043a \u0438 \u0447\u0435\u0440\u0442 \u0441 \u043d\u0435\u0439, \u043c\u044b \u0432 \u0434\u043e\u0436\u0434\u0438 \u0438 \u0431\u043e\u0442\u0438\u043d\u043a\u0438 \u043d\u0430\u0434\u0435\u043d\u0435\u043c \u043f\u043e\u0432\u044b\u0448\u0435, \u0438 \u0432\u044b\u0442\u0440\u0435\u043c \u0438\u0445 \u0445\u043e\u0440\u043e\u0448\u043e \u043f\u0435\u0440\u0435\u0434 \u0442\u0435\u043c, \u043a\u0430\u043a \u043a\u0443\u0434\u0430-\u0442\u043e \u0432\u043e\u0439\u0442\u0438. \u041c\u0430\u0433\u0430\u0437\u0438\u043d\u0447\u0438\u043a \u0423\u0438\u043b\u0441\u043e\u043d\u0430 \u0437\u0430\u043d\u0438\u043c\u0430\u043b \u043f\u043e\u043b\u043e\u0432\u0438\u043d\u0443 \u043f\u0435\u0440\u0432\u043e\u0433\u043e \u044d\u0442\u0430\u0436\u0430 \u0443\u0433\u043b\u043e\u0432\u043e\u0433\u043e \u0434\u043e\u043c\u0430, \u0447\u0442\u043e \u0440\u0430\u0441\u043f\u043e\u043b\u043e\u0436\u0438\u043b\u0441\u044f \u043d\u0430 \u043f\u0435\u0440\u0435\u0441\u0435\u0447\u0435\u043d\u0438\u0438 \u0443\u043b\u0438\u0446\u044b \u041f\u0438\u043e\u043d\u0435\u0440\u043e\u0432 (\u043d\u0435 \u043f\u0443\u0442\u0430\u0442\u044c \u0441 \u044e\u043d\u044b\u043c\u0438 \u043b\u0435\u043d\u0438\u043d\u0446\u0430\u043c\u0438) \u0438 \u0423\u0438\u043b\u044c\u044f\u043c\u0430 \u041f\u0435\u0440\u0440\u0438, \u043d\u0430\u0437\u0432\u0430\u043d\u043d\u043e\u0439 \u0432 \u0447\u0435\u0441\u0442\u044c \u043c\u0435\u0441\u0442\u043d\u043e\u0433\u043e \u0436\u0438\u0442\u0435\u043b\u044f, \u043e\u0442\u043b\u0438\u0447\u0438\u0432\u0448\u0435\u0433\u043e\u0441\u044f \u043a\u043e\u0433\u0434\u0430-\u0442\u043e \u0432 \u043e\u0431\u043e\u0440\u043e\u043d\u0435 \u0433\u043e\u0440\u043e\u0434\u043a\u0430 \u0432\u043e \u0432\u0440\u0435\u043c\u044f \u043d\u0430\u0431\u0435\u0433\u0430 \u0431\u043e\u043b\u044c\u0448\u043e\u0439 \u0431\u0430\u043d\u0434\u044b. \u0423 \u0432\u0445\u043e\u0434\u0430 \u0432 \u043c\u0430\u0433\u0430\u0437\u0438\u043d \u0441\u0442\u043e\u044f\u043b\u0438 \u0434\u0432\u0430 \u0432\u0435\u043b\u043e\u0441\u0438\u043f\u0435\u0434\u0430 \u0441 \u043a\u043e\u0440\u0437\u0438\u043d\u043a\u0430\u043c\u0438, \u0438 \u0441\u0442\u0430\u0440\u0435\u043d\u044c\u043a\u0438\u0439 \u0444\u043e\u0440\u0434\u043e\u0432\u0441\u043a\u0438\u0439 \u043f\u0438\u043a\u0430\u043f\u0447\u0438\u043a, \u0432\u043f\u0440\u043e\u0447\u0435\u043c, \u043f\u0435\u0440\u0435\u0434\u0435\u043b\u0430\u043d\u043d\u044b\u0439\n\nQuestion: \u0413\u0434\u0435 \u0410\u043b\u0435\u043a\u0441\u0430\u043d\u0434\u0440\u0430?",
5
- "positive_response": "\u0441\u043f\u0430\u043b\u044c\u043d\u044f",
6
- "negative_response": "\u0432\u0430\u043d\u043d\u0430\u044f"
7
- }
8
- ]
wisent/examples/scripts/2/test_bangla_mmlu_evaluation.json DELETED
@@ -1,30 +0,0 @@
1
- {
2
- "task_name": "bangla_mmlu",
3
- "model_name": "mock",
4
- "evaluator_name": "log_likelihoods",
5
- "num_pairs": 1,
6
- "all_correct": true,
7
- "pairs": [
8
- {
9
- "pair_id": 0,
10
- "prompt": "Question: \u09b8\u09cd\u09a8\u09be\u0995\u09c7\u09a8\u09ac\u09be\u09b0\u09cd\u0997 \u098f\u09ac\u0982 \u099f\u09ae\u09b2\u09bf\u09a8\u09b8\u09a8 (2014)-\u098f\u09b0 \u09ae\u09a4\u09be\u09a8\u09c1\u09b8\u09be\u09b0\u09c7 \u09b8\u0982\u09b8\u09cd\u09a5\u09be\u0997\u09a4 \u09b8\u09cd\u09ac\u099a\u09cd\u099b\u09a4\u09be\u09b0 \u0997\u09c1\u09a3\u09ae\u09be\u09a8 \u09ae\u09c2\u09b2\u09cd\u09af\u09be\u09af\u09bc\u09a8\u09c7\u09b0 \u099c\u09a8\u09cd\u09af \u0995\u09cb...",
11
- "positive_response": "\u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be",
12
- "negative_response": "\u09aa\u09cd\u09b0\u09b8\u09cd\u09a5, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be",
13
- "positive_evaluation": {
14
- "ground_truth": "TRUTHFUL",
15
- "confidence": 1.0,
16
- "expected": "TRUTHFUL",
17
- "correct": true,
18
- "details": "Predicted: '\u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be' (log_prob=-0.500), Expected: '\u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be'"
19
- },
20
- "negative_evaluation": {
21
- "ground_truth": "UNTRUTHFUL",
22
- "confidence": 0.0,
23
- "expected": "UNTRUTHFUL",
24
- "correct": true,
25
- "details": "Predicted: '\u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be' (log_prob=-0.500), Expected: '\u09aa\u09cd\u09b0\u09b8\u09cd\u09a5, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be'"
26
- },
27
- "both_correct": true
28
- }
29
- ]
30
- }
wisent/examples/scripts/2/test_bangla_mmlu_pairs.json DELETED
@@ -1,8 +0,0 @@
1
- [
2
- {
3
- "pair_id": 0,
4
- "prompt": "Question: \u09b8\u09cd\u09a8\u09be\u0995\u09c7\u09a8\u09ac\u09be\u09b0\u09cd\u0997 \u098f\u09ac\u0982 \u099f\u09ae\u09b2\u09bf\u09a8\u09b8\u09a8 (2014)-\u098f\u09b0 \u09ae\u09a4\u09be\u09a8\u09c1\u09b8\u09be\u09b0\u09c7 \u09b8\u0982\u09b8\u09cd\u09a5\u09be\u0997\u09a4 \u09b8\u09cd\u09ac\u099a\u09cd\u099b\u09a4\u09be\u09b0 \u0997\u09c1\u09a3\u09ae\u09be\u09a8 \u09ae\u09c2\u09b2\u09cd\u09af\u09be\u09af\u09bc\u09a8\u09c7\u09b0 \u099c\u09a8\u09cd\u09af \u0995\u09cb\u09a8 \u09a4\u09bf\u09a8\u099f\u09bf \u09ae\u09be\u09a8\u09a6\u09a3\u09cd\u09a1 \u09ac\u09cd\u09af\u09ac\u09b9\u09be\u09b0 \u0995\u09b0\u09be \u09af\u09c7\u09a4\u09c7 \u09aa\u09be\u09b0\u09c7?\nA. \u09aa\u09cd\u09b0\u09b8\u09cd\u09a5, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be\nB. \u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be",
5
- "positive_response": "\u09aa\u09cd\u09b0\u0995\u09be\u09b6, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be",
6
- "negative_response": "\u09aa\u09cd\u09b0\u09b8\u09cd\u09a5, \u09b8\u09cd\u09aa\u09b7\u09cd\u099f\u09a4\u09be, \u09a8\u09bf\u09b0\u09cd\u09ad\u09c1\u09b2\u09a4\u09be"
7
- }
8
- ]
wisent/examples/scripts/2/test_basque-glue_pairs.json DELETED
@@ -1,14 +0,0 @@
1
- [
2
- {
3
- "pair_id": 0,
4
- "prompt": "Question: Zer egin? Nori deitu? Zalantza horrekin geratu zen.\nAlegia:\nA. Zer egin eta nori deitu ez zekielakoan geratu zen.\nB. Zer egin eta nori deitu ez zekiela geratu zen.",
5
- "positive_response": "Zer egin eta nori deitu ez zekiela geratu zen.",
6
- "negative_response": "Zer egin eta nori deitu ez zekielakoan geratu zen."
7
- },
8
- {
9
- "pair_id": 1,
10
- "prompt": "Decide the relationship of the hypothesis 'Mary Traillek badaki hori.'' to the premise 'Mary Traillek emango dizu horren berri.'\nA. neutral\nB. entailment",
11
- "positive_response": "entailment",
12
- "negative_response": "neutral"
13
- }
14
- ]