indicate 0.1.0__tar.gz → 0.2.1__tar.gz

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (56) hide show
  1. {indicate-0.1.0/indicate.egg-info → indicate-0.2.1}/PKG-INFO +17 -10
  2. {indicate-0.1.0 → indicate-0.2.1}/README.rst +1 -3
  3. indicate-0.2.1/docs/source/conf.py +29 -0
  4. indicate-0.2.1/indicate/data/get_affidavits/crawler/__init__.py +0 -0
  5. indicate-0.2.1/indicate/data/get_affidavits/crawler/items.py +36 -0
  6. indicate-0.2.1/indicate/data/get_affidavits/crawler/middlewares.py +103 -0
  7. indicate-0.2.1/indicate/data/get_affidavits/crawler/pipelines.py +13 -0
  8. indicate-0.2.1/indicate/data/get_affidavits/crawler/settings.py +88 -0
  9. indicate-0.2.1/indicate/data/get_affidavits/crawler/spiders/__init__.py +4 -0
  10. indicate-0.2.1/indicate/data/get_affidavits/crawler/spiders/crawler_spider.py +88 -0
  11. indicate-0.2.1/indicate/data/get_espncricinfo/find_hindi_scorecards.py +30 -0
  12. indicate-0.2.1/indicate/data/get_espncricinfo/parse_hindi_scorecards.py +26 -0
  13. indicate-0.2.1/indicate/data/model/hindi_to_english/english_tokens.json +1 -0
  14. indicate-0.2.1/indicate/data/model/hindi_to_english/hindi_tokens.json +1 -0
  15. indicate-0.1.0/indicate/data/model/hindi_to_english/saved_weights/decoder.data-00000-of-00001 → indicate-0.2.1/indicate/data/model/hindi_to_english/saved_weights/decoder.weights.h5 +0 -0
  16. indicate-0.1.0/indicate/data/model/hindi_to_english/saved_weights/encoder.data-00000-of-00001 → indicate-0.2.1/indicate/data/model/hindi_to_english/saved_weights/encoder.weights.h5 +0 -0
  17. indicate-0.2.1/indicate/decoder.py +62 -0
  18. indicate-0.2.1/indicate/encoder.py +24 -0
  19. indicate-0.2.1/indicate/hindi2english.py +138 -0
  20. indicate-0.2.1/indicate/notebooks/Inference_latest.ipynb +2331 -0
  21. indicate-0.2.1/indicate/notebooks/Train_latest.ipynb +1746 -0
  22. indicate-0.2.1/indicate/tests/__init__.py +12 -0
  23. indicate-0.2.1/indicate/tests/test_010_hindi_translate.py +20 -0
  24. indicate-0.2.1/indicate/utils.py +86 -0
  25. {indicate-0.1.0 → indicate-0.2.1/indicate.egg-info}/PKG-INFO +17 -10
  26. indicate-0.2.1/indicate.egg-info/SOURCES.txt +39 -0
  27. {indicate-0.1.0 → indicate-0.2.1}/indicate.egg-info/requires.txt +2 -2
  28. indicate-0.2.1/indicate.egg-info/top_level.txt +4 -0
  29. indicate-0.2.1/pyproject.toml +56 -0
  30. indicate-0.2.1/setup.cfg +4 -0
  31. indicate-0.1.0/MANIFEST.in +0 -4
  32. indicate-0.1.0/indicate/base.py +0 -72
  33. indicate-0.1.0/indicate/data/model/hindi_to_english/english_tokens.json +0 -1
  34. indicate-0.1.0/indicate/data/model/hindi_to_english/hindi_tokens.json +0 -1
  35. indicate-0.1.0/indicate/data/model/hindi_to_english/saved_weights/checkpoint +0 -2
  36. indicate-0.1.0/indicate/data/model/hindi_to_english/saved_weights/decoder.index +0 -0
  37. indicate-0.1.0/indicate/data/model/hindi_to_english/saved_weights/encoder.index +0 -0
  38. indicate-0.1.0/indicate/decoder.py +0 -151
  39. indicate-0.1.0/indicate/encoder.py +0 -22
  40. indicate-0.1.0/indicate/hindi2english.py +0 -115
  41. indicate-0.1.0/indicate/utils.py +0 -39
  42. indicate-0.1.0/indicate.egg-info/SOURCES.txt +0 -31
  43. indicate-0.1.0/indicate.egg-info/top_level.txt +0 -1
  44. indicate-0.1.0/setup.cfg +0 -8
  45. indicate-0.1.0/setup.py +0 -138
  46. {indicate-0.1.0 → indicate-0.2.1}/LICENSE +0 -0
  47. {indicate-0.1.0 → indicate-0.2.1}/indicate/__init__.py +0 -0
  48. {indicate-0.1.0 → indicate-0.2.1}/indicate/logging.py +0 -0
  49. {indicate-0.1.0 → indicate-0.2.1}/indicate/notebooks/Data_Preparation.ipynb +0 -0
  50. {indicate-0.1.0 → indicate-0.2.1}/indicate/notebooks/Inference.ipynb +0 -0
  51. {indicate-0.1.0 → indicate-0.2.1}/indicate/notebooks/Train.ipynb +0 -0
  52. {indicate-0.1.0 → indicate-0.2.1}/indicate/notebooks/Transliterate.ipynb +0 -0
  53. {indicate-0.1.0 → indicate-0.2.1}/indicate/notebooks/transliterate_cricket.ipynb +0 -0
  54. {indicate-0.1.0 → indicate-0.2.1}/indicate/transliterate.py +0 -0
  55. {indicate-0.1.0 → indicate-0.2.1}/indicate.egg-info/dependency_links.txt +0 -0
  56. {indicate-0.1.0 → indicate-0.2.1}/indicate.egg-info/entry_points.txt +0 -0
@@ -1,12 +1,12 @@
1
- Metadata-Version: 2.1
1
+ Metadata-Version: 2.4
2
2
  Name: indicate
3
- Version: 0.1.0
3
+ Version: 0.2.1
4
4
  Summary: Transliterations to/from Indian languages
5
- Home-page: https://github.com/in-rolls/indicate
6
- Author: Rajashekar Chintalapati, Gaurav Sood
7
- Author-email: rajshekar.ch@gmail.com, gsood07@gmail.com
5
+ Author-email: Rajashekar Chintalapati <rajshekar.ch@gmail.com>, Gaurav Sood <gsood07@gmail.com>
8
6
  License: MIT
9
- Keywords: transliterate indic hindi english
7
+ Project-URL: Homepage, https://github.com/in-rolls/indicate
8
+ Project-URL: Repository, https://github.com/in-rolls/indicate
9
+ Keywords: transliterate,indic,hindi,english
10
10
  Classifier: Development Status :: 3 - Alpha
11
11
  Classifier: Intended Audience :: Developers
12
12
  Classifier: License :: OSI Approved :: MIT License
@@ -16,9 +16,18 @@ Classifier: Programming Language :: Python :: 3.8
16
16
  Classifier: Topic :: Scientific/Engineering :: Information Analysis
17
17
  Classifier: Topic :: Software Development :: Libraries :: Python Modules
18
18
  Classifier: Topic :: Utilities
19
+ Requires-Python: >=3.6
20
+ Description-Content-Type: text/x-rst
21
+ License-File: LICENSE
22
+ Requires-Dist: tqdm
23
+ Requires-Dist: func-timeout
24
+ Requires-Dist: tensorflow==2.18.0
19
25
  Provides-Extra: dev
26
+ Requires-Dist: check-manifest; extra == "dev"
20
27
  Provides-Extra: test
21
- License-File: LICENSE
28
+ Requires-Dist: coverage; extra == "test"
29
+ Requires-Dist: tox; extra == "test"
30
+ Dynamic: license-file
22
31
 
23
32
  ==================================================
24
33
  Indicate: Transliterate Indic Languages to English
@@ -26,14 +35,12 @@ Indicate: Transliterate Indic Languages to English
26
35
 
27
36
  .. image:: https://app.travis-ci.com/in-rolls/indicate.svg?branch=master
28
37
  :target: https://travis-ci.org/in-rolls/indicate
29
- .. image:: https://ci.appveyor.com/api/projects/status/5wkr850yy3f6sg6a?svg=true
30
- :target: https://ci.appveyor.com/project/soodoku/indicate
31
38
  .. image:: https://img.shields.io/pypi/v/indicate.svg
32
39
  :target: https://pypi.python.org/pypi/indicate
33
40
  .. image:: https://readthedocs.org/projects/indicate/badge/?version=latest
34
41
  :target: http://notnews.readthedocs.io/en/latest/?badge=latest
35
42
  :alt: Documentation Status
36
- .. image:: https://pepy.tech/badge/indicate
43
+ .. image:: https://static.pepy.tech/badge/indicate
37
44
  :target: https://pepy.tech/project/indicate
38
45
 
39
46
  Transliterations to/from Indian languages are still generally low quality. One problem is access to data. Another is that there is no standard transliteration.
@@ -4,14 +4,12 @@ Indicate: Transliterate Indic Languages to English
4
4
 
5
5
  .. image:: https://app.travis-ci.com/in-rolls/indicate.svg?branch=master
6
6
  :target: https://travis-ci.org/in-rolls/indicate
7
- .. image:: https://ci.appveyor.com/api/projects/status/5wkr850yy3f6sg6a?svg=true
8
- :target: https://ci.appveyor.com/project/soodoku/indicate
9
7
  .. image:: https://img.shields.io/pypi/v/indicate.svg
10
8
  :target: https://pypi.python.org/pypi/indicate
11
9
  .. image:: https://readthedocs.org/projects/indicate/badge/?version=latest
12
10
  :target: http://notnews.readthedocs.io/en/latest/?badge=latest
13
11
  :alt: Documentation Status
14
- .. image:: https://pepy.tech/badge/indicate
12
+ .. image:: https://static.pepy.tech/badge/indicate
15
13
  :target: https://pepy.tech/project/indicate
16
14
 
17
15
  Transliterations to/from Indian languages are still generally low quality. One problem is access to data. Another is that there is no standard transliteration.
@@ -0,0 +1,29 @@
1
+ # Configuration file for the Sphinx documentation builder.
2
+ #
3
+ # For the full list of built-in configuration values, see the documentation:
4
+ # https://www.sphinx-doc.org/en/master/usage/configuration.html
5
+
6
+ import os
7
+ import sys
8
+ sys.path.insert(0, os.path.abspath('../'))
9
+ sys.path.insert(1, os.path.abspath('../../'))
10
+
11
+ # -- Project information -----------------------------------------------------
12
+ # https://www.sphinx-doc.org/en/master/usage/configuration.html#project-information
13
+
14
+ project = 'indicate'
15
+ copyright = '2023, rajashekar chintalapati and gaurav sood'
16
+ author = 'rajashekar chintalapati and gaurav sood'
17
+ release = '0.1.0'
18
+
19
+ # -- General configuration ---------------------------------------------------
20
+ # https://www.sphinx-doc.org/en/master/usage/configuration.html#general-configuration
21
+
22
+ templates_path = ['_templates']
23
+ exclude_patterns = []
24
+
25
+ # -- Options for HTML output -------------------------------------------------
26
+ # https://www.sphinx-doc.org/en/master/usage/configuration.html#options-for-html-output
27
+
28
+ html_theme = 'sphinx_rtd_theme'
29
+ html_static_path = ['_static']
@@ -0,0 +1,36 @@
1
+ # Define here the models for your scraped items
2
+ #
3
+ # See documentation in:
4
+ # https://docs.scrapy.org/en/latest/topics/items.html
5
+
6
+ import scrapy
7
+
8
+
9
+ class CrawlerItem(scrapy.Item):
10
+ # define the fields for your item here like:
11
+ # name = scrapy.Field()
12
+ User = scrapy.Field()
13
+ Comment = scrapy.Field()
14
+ Time = scrapy.Field()
15
+
16
+
17
+ class Fixture(scrapy.Item):
18
+
19
+ unique_id = scrapy.Field()
20
+ dropdown_value = scrapy.Field()
21
+ party_name = scrapy.Field()
22
+ name_english = scrapy.Field()
23
+ name_hindi = scrapy.Field()
24
+ assembly_constituency = scrapy.Field()
25
+ state = scrapy.Field()
26
+ application_uploaded = scrapy.Field()
27
+ current_status = scrapy.Field()
28
+ fathers_or_husbands_name_english = scrapy.Field()
29
+ name = scrapy.Field()
30
+ fathers_or_husbands_name_hindi = scrapy.Field()
31
+ address = scrapy.Field()
32
+ age = scrapy.Field()
33
+ url = scrapy.Field()
34
+ photo_url = scrapy.Field()
35
+ photo_filename_with_unique_id = scrapy.Field()
36
+ affidavit_filename_with_unique_id = scrapy.Field()
@@ -0,0 +1,103 @@
1
+ # Define here the models for your spider middleware
2
+ #
3
+ # See documentation in:
4
+ # https://docs.scrapy.org/en/latest/topics/spider-middleware.html
5
+
6
+ from scrapy import signals
7
+
8
+ # useful for handling different item types with a single interface
9
+ from itemadapter import is_item, ItemAdapter
10
+
11
+
12
+ class CrawlerSpiderMiddleware:
13
+ # Not all methods need to be defined. If a method is not defined,
14
+ # scrapy acts as if the spider middleware does not modify the
15
+ # passed objects.
16
+
17
+ @classmethod
18
+ def from_crawler(cls, crawler):
19
+ # This method is used by Scrapy to create your spiders.
20
+ s = cls()
21
+ crawler.signals.connect(s.spider_opened, signal=signals.spider_opened)
22
+ return s
23
+
24
+ def process_spider_input(self, response, spider):
25
+ # Called for each response that goes through the spider
26
+ # middleware and into the spider.
27
+
28
+ # Should return None or raise an exception.
29
+ return None
30
+
31
+ def process_spider_output(self, response, result, spider):
32
+ # Called with the results returned from the Spider, after
33
+ # it has processed the response.
34
+
35
+ # Must return an iterable of Request, or item objects.
36
+ for i in result:
37
+ yield i
38
+
39
+ def process_spider_exception(self, response, exception, spider):
40
+ # Called when a spider or process_spider_input() method
41
+ # (from other spider middleware) raises an exception.
42
+
43
+ # Should return either None or an iterable of Request or item objects.
44
+ pass
45
+
46
+ def process_start_requests(self, start_requests, spider):
47
+ # Called with the start requests of the spider, and works
48
+ # similarly to the process_spider_output() method, except
49
+ # that it doesn’t have a response associated.
50
+
51
+ # Must return only requests (not items).
52
+ for r in start_requests:
53
+ yield r
54
+
55
+ def spider_opened(self, spider):
56
+ spider.logger.info('Spider opened: %s' % spider.name)
57
+
58
+
59
+ class CrawlerDownloaderMiddleware:
60
+ # Not all methods need to be defined. If a method is not defined,
61
+ # scrapy acts as if the downloader middleware does not modify the
62
+ # passed objects.
63
+
64
+ @classmethod
65
+ def from_crawler(cls, crawler):
66
+ # This method is used by Scrapy to create your spiders.
67
+ s = cls()
68
+ crawler.signals.connect(s.spider_opened, signal=signals.spider_opened)
69
+ return s
70
+
71
+ def process_request(self, request, spider):
72
+ # Called for each request that goes through the downloader
73
+ # middleware.
74
+
75
+ # Must either:
76
+ # - return None: continue processing this request
77
+ # - or return a Response object
78
+ # - or return a Request object
79
+ # - or raise IgnoreRequest: process_exception() methods of
80
+ # installed downloader middleware will be called
81
+ return None
82
+
83
+ def process_response(self, request, response, spider):
84
+ # Called with the response returned from the downloader.
85
+
86
+ # Must either;
87
+ # - return a Response object
88
+ # - return a Request object
89
+ # - or raise IgnoreRequest
90
+ return response
91
+
92
+ def process_exception(self, request, exception, spider):
93
+ # Called when a download handler or a process_request()
94
+ # (from other downloader middleware) raises an exception.
95
+
96
+ # Must either:
97
+ # - return None: continue processing this exception
98
+ # - return a Response object: stops process_exception() chain
99
+ # - return a Request object: stops process_exception() chain
100
+ pass
101
+
102
+ def spider_opened(self, spider):
103
+ spider.logger.info('Spider opened: %s' % spider.name)
@@ -0,0 +1,13 @@
1
+ # Define your item pipelines here
2
+ #
3
+ # Don't forget to add your pipeline to the ITEM_PIPELINES setting
4
+ # See: https://docs.scrapy.org/en/latest/topics/item-pipeline.html
5
+
6
+
7
+ # useful for handling different item types with a single interface
8
+ from itemadapter import ItemAdapter
9
+
10
+
11
+ class CrawlerPipeline:
12
+ def process_item(self, item, spider):
13
+ return item
@@ -0,0 +1,88 @@
1
+ # Scrapy settings for crawler project
2
+ #
3
+ # For simplicity, this file contains only settings considered important or
4
+ # commonly used. You can find more settings consulting the documentation:
5
+ #
6
+ # https://docs.scrapy.org/en/latest/topics/settings.html
7
+ # https://docs.scrapy.org/en/latest/topics/downloader-middleware.html
8
+ # https://docs.scrapy.org/en/latest/topics/spider-middleware.html
9
+
10
+ BOT_NAME = 'crawler'
11
+
12
+ SPIDER_MODULES = ['crawler.spiders']
13
+ NEWSPIDER_MODULE = 'crawler.spiders'
14
+
15
+
16
+ # Crawl responsibly by identifying yourself (and your website) on the user-agent
17
+ USER_AGENT = 'crawler (+https://affidavit.eci.gov.in)'
18
+
19
+ # Obey robots.txt rules
20
+ ROBOTSTXT_OBEY = True
21
+
22
+ # Configure maximum concurrent requests performed by Scrapy (default: 16)
23
+ #CONCURRENT_REQUESTS = 32
24
+
25
+ # Configure a delay for requests for the same website (default: 0)
26
+ # See https://docs.scrapy.org/en/latest/topics/settings.html#download-delay
27
+ # See also autothrottle settings and docs
28
+ #DOWNLOAD_DELAY = 3
29
+ # The download delay setting will honor only one of:
30
+ #CONCURRENT_REQUESTS_PER_DOMAIN = 16
31
+ #CONCURRENT_REQUESTS_PER_IP = 16
32
+
33
+ # Disable cookies (enabled by default)
34
+ #COOKIES_ENABLED = False
35
+
36
+ # Disable Telnet Console (enabled by default)
37
+ #TELNETCONSOLE_ENABLED = False
38
+
39
+ # Override the default request headers:
40
+ #DEFAULT_REQUEST_HEADERS = {
41
+ # 'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
42
+ # 'Accept-Language': 'en',
43
+ #}
44
+
45
+ # Enable or disable spider middlewares
46
+ # See https://docs.scrapy.org/en/latest/topics/spider-middleware.html
47
+ #SPIDER_MIDDLEWARES = {
48
+ # 'crawler.middlewares.CrawlerSpiderMiddleware': 543,
49
+ #}
50
+
51
+ # Enable or disable downloader middlewares
52
+ # See https://docs.scrapy.org/en/latest/topics/downloader-middleware.html
53
+ #DOWNLOADER_MIDDLEWARES = {
54
+ # 'crawler.middlewares.CrawlerDownloaderMiddleware': 543,
55
+ #}
56
+
57
+ # Enable or disable extensions
58
+ # See https://docs.scrapy.org/en/latest/topics/extensions.html
59
+ #EXTENSIONS = {
60
+ # 'scrapy.extensions.telnet.TelnetConsole': None,
61
+ #}
62
+
63
+ # Configure item pipelines
64
+ # See https://docs.scrapy.org/en/latest/topics/item-pipeline.html
65
+ #ITEM_PIPELINES = {
66
+ # 'crawler.pipelines.CrawlerPipeline': 300,
67
+ #}
68
+
69
+ # Enable and configure the AutoThrottle extension (disabled by default)
70
+ # See https://docs.scrapy.org/en/latest/topics/autothrottle.html
71
+ #AUTOTHROTTLE_ENABLED = True
72
+ # The initial download delay
73
+ #AUTOTHROTTLE_START_DELAY = 5
74
+ # The maximum download delay to be set in case of high latencies
75
+ #AUTOTHROTTLE_MAX_DELAY = 60
76
+ # The average number of requests Scrapy should be sending in parallel to
77
+ # each remote server
78
+ #AUTOTHROTTLE_TARGET_CONCURRENCY = 1.0
79
+ # Enable showing throttling stats for every response received:
80
+ #AUTOTHROTTLE_DEBUG = False
81
+
82
+ # Enable and configure HTTP caching (disabled by default)
83
+ # See https://docs.scrapy.org/en/latest/topics/downloader-middleware.html#httpcache-middleware-settings
84
+ #HTTPCACHE_ENABLED = True
85
+ #HTTPCACHE_EXPIRATION_SECS = 0
86
+ #HTTPCACHE_DIR = 'httpcache'
87
+ #HTTPCACHE_IGNORE_HTTP_CODES = []
88
+ #HTTPCACHE_STORAGE = 'scrapy.extensions.httpcache.FilesystemCacheStorage'
@@ -0,0 +1,4 @@
1
+ # This package will contain the spiders of your Scrapy project
2
+ #
3
+ # Please refer to the documentation for information on how to create and manage
4
+ # your spiders.
@@ -0,0 +1,88 @@
1
+ from scrapy import Spider, Request
2
+ from scrapy.selector import Selector
3
+ from crawler.items import CrawlerItem, Fixture
4
+ from scrapy.spiders import CrawlSpider, Rule
5
+ from scrapy.linkextractors import LinkExtractor
6
+ import re
7
+
8
+
9
+
10
+ class CrawlerSpider(Spider):
11
+ name = "crawler"
12
+ allowed_domains = ["affidavit.eci.gov.in"]
13
+ start_urls = [
14
+ "https://affidavit.eci.gov.in",
15
+ ]
16
+ rules = [
17
+ Rule(LinkExtractor(allow=r'show-profile'), callback='parse_product'),
18
+ ]
19
+ unique_id = 0
20
+
21
+ def parse(self, response):
22
+ # questions = Selector(response).xpath('//ul[@class="table"]/li')
23
+ questions = response.selector
24
+ print ('11111111111111111111', questions)
25
+ # get next page
26
+ for p in questions.css(".pagination"):
27
+ detail_link = p.xpath('li[@class="page-item"]')
28
+ # print ('------------------', detail_link)
29
+ for link in detail_link:
30
+ n = link.extract()
31
+ # print ('_____________________',n)
32
+ matches = re.findall('rel="next"', n)
33
+ # print(matches)
34
+ if matches:
35
+ next_link = link.xpath('a/@href').extract()
36
+ print ('kakakakakakak', next_link)
37
+ yield Request(next_link[0], callback=self.parse)
38
+
39
+ # item['name_english'] = tr.xpath('td[2]/div[@class="details-name"]/h4/text()').extract()
40
+
41
+ for tr in questions.css("table#data-tab>tbody>tr"):
42
+ item = Fixture()
43
+ detail_link = tr.xpath('td[1]/div[@class="img-bx"]/a/@href').extract()
44
+ # print ('=======================', detail_link)
45
+ item['name_english'] = tr.xpath('td[2]/div[@class="details-name"]/h4/text()').extract()
46
+ # item['link'] =detail_link
47
+ # yield item
48
+ yield Request(detail_link[0], callback=self.parse_product)
49
+
50
+ def parse_product(self, response):
51
+ # questions = Selector(response).xpath('//ul[@class="table"]/li')
52
+ questions = response.selector
53
+ print ('2222222222222222', questions)
54
+ # for sec in questions.css('section'):
55
+ # print ('3333333333333333',sec)
56
+ can_details = questions.css('section')[0]
57
+ # can_per_details = questions.css('section')[1]
58
+ can_details = can_details.xpath('div/div/div/div/div[@class="card-body"]/div/div')
59
+ can_details = can_details[1].xpath('div')
60
+ # name = can_details[3]
61
+
62
+ item = Fixture()
63
+ self.unique_id +=1
64
+ item['unique_id'] = self.unique_id
65
+ item['party_name'] = can_details[0].xpath('div[2]/text()').extract()[0].strip('\n').strip()
66
+ item['name_english'] = can_details[2].xpath('div[2]/div/p/b/text()').extract()[0].strip('\n').strip()
67
+ item['name_hindi'] = can_details[3].xpath('div[2]/div/p/b/text()').extract()[0].strip('\n').strip()
68
+ item['assembly_constituency'] = can_details[4].xpath('div[2]/div/p/text()').extract()[0].strip('\n').strip()
69
+ item['state'] = can_details[5].xpath('div[2]/div/p/text()').extract()[0].strip('\n').strip()
70
+ item['application_uploaded'] = can_details[6].xpath('div[2]/div/p/text()').extract()
71
+ item['current_status'] = can_details[7].xpath('div[2]/div/p/text()').extract()
72
+
73
+ can_per_details = questions.css('section')[1]
74
+ can_per_details = can_per_details.xpath('div/div[@class="row"]/div/div/div/div/div/form/div/div[1]/div')
75
+
76
+ item['fathers_or_husbands_name_english'] = can_per_details[0].xpath('div/p/text()').extract()
77
+ item['fathers_or_husbands_name_hindi'] = can_per_details[1].xpath('div/p/text()').extract()
78
+ item['name'] = can_per_details[2].xpath('div/p/text()').extract()
79
+
80
+ item['address'] = can_per_details[4].xpath('div/p/text()').extract()
81
+ item['age'] = can_per_details[6].xpath('div/p/text()').extract()
82
+ # item['url'] = can_per_details[0].xpath('div[2]/text()').extract()[0].strip('\n').strip()
83
+ # item['photo_url'] = can_per_details[0].xpath('div[2]/text()').extract()[0].strip('\n').strip()
84
+ # item['photo_filename_with_unique_id'] = can_per_details[0].xpath('div[2]/text()').extract()[0].strip('\n').strip()
85
+ # item['affidavit_filename_with_unique_id'] = can_per_details[0].xpath('div[2]/text()').extract()[0].strip(
86
+ #'\n').strip()
87
+
88
+ yield item
@@ -0,0 +1,30 @@
1
+ import json
2
+ import datetime
3
+ import requests
4
+ from espncricinfo.match import Match
5
+
6
+ hindi_matches = []
7
+ players = []
8
+
9
+ with open("all-matches.json", "r") as matches_file:
10
+ matches = json.load(matches_file)
11
+ possible_matches = [x for x in matches if x > 1230000]
12
+ print(len(possible_matches))
13
+ for match_id in possible_matches:
14
+ try:
15
+ match = Match(match_id)
16
+ except Exception:
17
+ continue
18
+ y, m, d = [int(x) for x in match.date.split("-")]
19
+ if datetime.datetime(y, m, d) > datetime.datetime(2021, 4, 8):
20
+ print(match_id)
21
+ r = requests.get(match.match_url)
22
+ hindi_url = r.url.replace("/series/", "/hindi/series/").replace("live-cricket-score", "full-scorecard")
23
+ r = requests.get(hindi_url)
24
+ if r.status_code == 404:
25
+ hindi_url = None
26
+ if hindi_url:
27
+ hindi_matches.append(match_id)
28
+
29
+ with open("hindi_matches.json", "w") as outfile:
30
+ json.dump(hindi_matches, outfile)
@@ -0,0 +1,26 @@
1
+ import json
2
+ import datetime
3
+ import requests
4
+ from bs4 import BeautifulSoup
5
+ from espncricinfo.match import Match
6
+
7
+ players = []
8
+
9
+ with open('hindi_matches.json', 'r') as matches_file:
10
+ hindi_matches = json.load(matches_file)
11
+ for match in hindi_matches:
12
+ print(match)
13
+ m = Match(match)
14
+ r = requests.get(m.match_url)
15
+ hindi_url = r.url.replace('/series/','/hindi/series/').replace('live-cricket-score','full-scorecard')
16
+ hindi_content = requests.get(hindi_url).text
17
+ soup = BeautifulSoup(hindi_content, 'html.parser')
18
+ text = soup.find('script', id='__NEXT_DATA__').string
19
+ hindi_json = json.loads(text)
20
+ if 'data' in hindi_json['props']['pageProps']:
21
+ for team_players in hindi_json['props']['pageProps']['data']['pageData']['content']['matchPlayers']['teamPlayers']:
22
+ for player in team_players['players']:
23
+ players.append({'id': player['player']['id'], 'hindi_name': player['player']['name'], 'hindi_long_name': player['player']['longName'], 'english_name': player['player']['indexName'], 'gender': player['player']['gender'], 'date_of_birth': player['player']['dateOfBirth'], 'country_id': player['player']['countryTeamId'], 'slug': player['player']['slug']})
24
+
25
+ with open('players_with_hindi_names.json', 'w') as outfile:
26
+ json.dump(players, outfile)
@@ -0,0 +1 @@
1
+ "{\"class_name\": \"Tokenizer\", \"config\": {\"num_words\": null, \"filters\": \"\", \"lower\": true, \"split\": \" \", \"char_level\": true, \"oov_token\": null, \"document_count\": 371035, \"word_counts\": \"{\\\"^\\\": 371037, \\\"l\\\": 97394, \\\"a\\\": 566344, \\\"t\\\": 105572, \\\"e\\\": 127758, \\\" \\\": 13427, \\\"s\\\": 125548, \\\"u\\\": 88436, \\\"b\\\": 63551, \\\"o\\\": 86032, \\\"d\\\": 115107, \\\"h\\\": 165603, \\\"c\\\": 38730, \\\"n\\\": 174122, \\\"r\\\": 187969, \\\"$\\\": 371035, \\\"p\\\": 51055, \\\"i\\\": 198549, \\\"k\\\": 90447, \\\"m\\\": 90714, \\\"w\\\": 16948, \\\"y\\\": 59782, \\\"j\\\": 37472, \\\"g\\\": 55940, \\\"-\\\": 56, \\\"f\\\": 10867, \\\"q\\\": 1414, \\\"z\\\": 5302, \\\"v\\\": 53230, \\\":\\\": 8, \\\"(\\\": 106, \\\")\\\": 106, \\\"x\\\": 1128, \\\"/\\\": 42, \\\"@\\\": 25, \\\"\\\\u012b\\\": 1068, \\\"\\\\u0101\\\": 2775, \\\"'\\\": 95, \\\"\\\\u200c\\\": 99, \\\"\\\\u1e0d\\\": 580, \\\"\\\\u1e47\\\": 207, \\\"\\\\u0113\\\": 174, \\\"\\\\u1e6d\\\": 390, \\\"\\\\u016b\\\": 169, \\\"0\\\": 201, \\\"\\\\u1e45\\\": 116, \\\"\\\\u010d\\\": 1, \\\"\\\\u0962\\\": 1, \\\"\\\\u1e5b\\\": 113, \\\"\\\\u0442\\\": 1, \\\"\\\\u0438\\\": 1, \\\"\\\\u043f\\\": 1, \\\"\\\\u200d\\\": 2, \\\".\\\": 100, \\\"\\\\u1e63\\\": 64, \\\"\\\\u1e43\\\": 28, \\\"\\\\u015b\\\": 76, \\\"8\\\": 65, \\\"\\\\u1e35\\\": 2, \\\"\\\\u1e96\\\": 2, \\\"\\\\u0323\\\": 57, \\\"\\\\u1e49\\\": 1, \\\"\\\\u1e41\\\": 45, \\\"\\\\u0308\\\": 2, \\\"3\\\": 3, \\\"[\\\": 7, \\\"\\\\u0304\\\": 264, \\\"\\\\u094c\\\": 1, \\\"!\\\": 1, \\\"\\\\u2019\\\": 3, \\\"4\\\": 19, \\\"\\\\\\\"\\\": 33, \\\"\\\\u0341\\\": 2, \\\"\\\\u0942\\\": 1, \\\"\\\\u1ea1\\\": 2, \\\"\\\\u0303\\\": 12, \\\"\\\\u0310\\\": 20, \\\"\\\\u032e\\\": 2, \\\"\\\\u0951\\\": 1, \\\"]\\\": 4, \\\"*\\\": 7, \\\">\\\": 3, \\\"9\\\": 9, \\\"\\\\u014d\\\": 57, \\\"\\\\u0970\\\": 2, \\\"1\\\": 1, \\\"7\\\": 11, \\\"5\\\": 4, \\\"\\\\u0966\\\": 5, \\\"\\\\u0131\\\": 1, \\\"\\\\u00bb\\\": 4, \\\",\\\": 19, \\\"\\\\u1ebd\\\": 3, \\\"\\\\u00a3\\\": 1, \\\"\\\\u00e9\\\": 18, \\\"\\\\u0930\\\": 3, \\\"\\\\u0947\\\": 3, \\\"\\\\u030a\\\": 21, \\\"\\\\u0167\\\": 1, \\\"\\\\u0302\\\": 1, \\\"\\\\u0331\\\": 2, \\\"\\\\u1e33\\\": 5, \\\"\\\\u1e11\\\": 1, \\\"\\\\u1e25\\\": 7, \\\"\\\\u0921\\\": 1, \\\"\\\\u093f\\\": 1, \\\"\\\\u092f\\\": 1, \\\"\\\\u093e\\\": 1, \\\"\\\\u096e\\\": 2, \\\"\\\\u096f\\\": 1, \\\"\\\\u01f0\\\": 1, \\\"\\\\u0307\\\": 20, \\\"\\\\u0306\\\": 2, \\\"\\\\u02bc\\\": 14, \\\"\\\\u1e95\\\": 2, \\\"\\\\u0121\\\": 1, \\\"\\\\u1eb9\\\": 2, \\\"\\\\u0301\\\": 6, \\\"\\\\u1e37\\\": 2, \\\"\\\\u1e61\\\": 2, \\\"_\\\": 10, \\\"~\\\": 1, \\\"6\\\": 3, \\\"\\\\u0309\\\": 1, \\\"2\\\": 3, \\\"\\\\u0965\\\": 1, \\\"\\\\u0902\\\": 1, \\\"\\\\u0314\\\": 2, \\\"\\\\u0312\\\": 2, \\\"|\\\": 2, \\\"\\\\u00f1\\\": 2, \\\"\\\\u030d\\\": 1, \\\"\\\\u0324\\\": 1, \\\"\\\\u0952\\\": 1, \\\"\\\\u200b\\\": 2, \\\"\\\\u0325\\\": 2}\", \"word_docs\": \"{\\\"c\\\": 35979, \\\" \\\": 9557, \\\"n\\\": 148241, \\\"r\\\": 166211, \\\"a\\\": 311632, \\\"h\\\": 145053, \\\"^\\\": 371035, \\\"u\\\": 81144, \\\"s\\\": 112443, \\\"b\\\": 59957, \\\"t\\\": 93685, \\\"$\\\": 371035, \\\"e\\\": 104259, \\\"o\\\": 75066, \\\"d\\\": 103891, \\\"l\\\": 88175, \\\"k\\\": 83051, \\\"i\\\": 171439, \\\"p\\\": 47318, \\\"m\\\": 82811, \\\"w\\\": 16782, \\\"y\\\": 57479, \\\"j\\\": 35887, \\\"g\\\": 52738, \\\"-\\\": 51, \\\"f\\\": 10365, \\\"q\\\": 1388, \\\"z\\\": 5110, \\\"v\\\": 50618, \\\":\\\": 8, \\\")\\\": 106, \\\"(\\\": 106, \\\"x\\\": 1120, \\\"/\\\": 42, \\\"@\\\": 25, \\\"\\\\u012b\\\": 1020, \\\"\\\\u0101\\\": 2313, \\\"'\\\": 94, \\\"\\\\u200c\\\": 89, \\\"\\\\u1e0d\\\": 546, \\\"\\\\u1e47\\\": 203, \\\"\\\\u1e6d\\\": 353, \\\"\\\\u0113\\\": 168, \\\"\\\\u016b\\\": 168, \\\"0\\\": 182, \\\"\\\\u1e45\\\": 111, \\\"\\\\u010d\\\": 1, \\\"\\\\u0962\\\": 1, \\\"\\\\u1e5b\\\": 113, \\\"\\\\u0438\\\": 1, \\\"\\\\u0442\\\": 1, \\\"\\\\u043f\\\": 1, \\\"\\\\u200d\\\": 2, \\\".\\\": 84, \\\"\\\\u1e63\\\": 63, \\\"\\\\u1e43\\\": 28, \\\"\\\\u015b\\\": 75, \\\"8\\\": 64, \\\"\\\\u1e35\\\": 2, \\\"\\\\u1e96\\\": 2, \\\"\\\\u0323\\\": 52, \\\"\\\\u1e49\\\": 1, \\\"\\\\u1e41\\\": 45, \\\"\\\\u0308\\\": 2, \\\"3\\\": 3, \\\"[\\\": 7, \\\"\\\\u0304\\\": 213, \\\"\\\\u094c\\\": 1, \\\"!\\\": 1, \\\"\\\\u2019\\\": 3, \\\"4\\\": 14, \\\"\\\\\\\"\\\": 32, \\\"\\\\u0341\\\": 2, \\\"\\\\u0942\\\": 1, \\\"\\\\u1ea1\\\": 2, \\\"\\\\u0303\\\": 12, \\\"\\\\u0310\\\": 18, \\\"\\\\u032e\\\": 2, \\\"\\\\u0951\\\": 1, \\\"]\\\": 4, \\\"*\\\": 7, \\\">\\\": 3, \\\"9\\\": 9, \\\"\\\\u014d\\\": 56, \\\"\\\\u0970\\\": 2, \\\"7\\\": 8, \\\"1\\\": 1, \\\"5\\\": 3, \\\"\\\\u0966\\\": 5, \\\"\\\\u0131\\\": 1, \\\"\\\\u00bb\\\": 4, \\\",\\\": 1, \\\"\\\\u1ebd\\\": 3, \\\"\\\\u00a3\\\": 1, \\\"\\\\u00e9\\\": 18, \\\"\\\\u0930\\\": 3, \\\"\\\\u0947\\\": 3, \\\"\\\\u030a\\\": 18, \\\"\\\\u0167\\\": 1, \\\"\\\\u0302\\\": 1, \\\"\\\\u0331\\\": 2, \\\"\\\\u1e33\\\": 5, \\\"\\\\u1e11\\\": 1, \\\"\\\\u1e25\\\": 7, \\\"\\\\u0921\\\": 1, \\\"\\\\u092f\\\": 1, \\\"\\\\u093f\\\": 1, \\\"\\\\u093e\\\": 1, \\\"\\\\u096e\\\": 2, \\\"\\\\u096f\\\": 1, \\\"\\\\u01f0\\\": 1, \\\"\\\\u0307\\\": 20, \\\"\\\\u0306\\\": 2, \\\"\\\\u02bc\\\": 14, \\\"\\\\u1e95\\\": 2, \\\"\\\\u0121\\\": 1, \\\"\\\\u1eb9\\\": 2, \\\"\\\\u0301\\\": 6, \\\"\\\\u1e37\\\": 2, \\\"\\\\u1e61\\\": 2, \\\"_\\\": 10, \\\"~\\\": 1, \\\"6\\\": 3, \\\"\\\\u0309\\\": 1, \\\"2\\\": 3, \\\"\\\\u0965\\\": 1, \\\"\\\\u0902\\\": 1, \\\"\\\\u0314\\\": 2, \\\"\\\\u0312\\\": 2, \\\"|\\\": 1, \\\"\\\\u00f1\\\": 2, \\\"\\\\u030d\\\": 1, \\\"\\\\u0324\\\": 1, \\\"\\\\u0952\\\": 1, \\\"\\\\u200b\\\": 2, \\\"\\\\u0325\\\": 2}\", \"index_docs\": \"{\\\"22\\\": 35979, \\\"25\\\": 9557, \\\"6\\\": 148241, \\\"5\\\": 166211, \\\"1\\\": 311632, \\\"7\\\": 145053, \\\"2\\\": 371035, \\\"15\\\": 81144, \\\"9\\\": 112443, \\\"17\\\": 59957, \\\"11\\\": 93685, \\\"3\\\": 371035, \\\"8\\\": 104259, \\\"16\\\": 75066, \\\"10\\\": 103891, \\\"12\\\": 88175, \\\"14\\\": 83051, \\\"4\\\": 171439, \\\"21\\\": 47318, \\\"13\\\": 82811, \\\"24\\\": 16782, \\\"18\\\": 57479, \\\"23\\\": 35887, \\\"19\\\": 52738, \\\"51\\\": 51, \\\"26\\\": 10365, \\\"29\\\": 1388, \\\"27\\\": 5110, \\\"20\\\": 50618, \\\"68\\\": 8, \\\"42\\\": 106, \\\"41\\\": 106, \\\"30\\\": 1120, \\\"53\\\": 42, \\\"56\\\": 25, \\\"31\\\": 1020, \\\"28\\\": 2313, \\\"45\\\": 94, \\\"44\\\": 89, \\\"32\\\": 546, \\\"35\\\": 203, \\\"33\\\": 353, \\\"37\\\": 168, \\\"38\\\": 168, \\\"36\\\": 182, \\\"39\\\": 111, \\\"107\\\": 1, \\\"108\\\": 1, \\\"40\\\": 113, \\\"110\\\": 1, \\\"109\\\": 1, \\\"111\\\": 1, \\\"86\\\": 2, \\\"43\\\": 84, \\\"48\\\": 63, \\\"55\\\": 28, \\\"46\\\": 75, \\\"47\\\": 64, \\\"87\\\": 2, \\\"88\\\": 2, \\\"49\\\": 52, \\\"112\\\": 1, \\\"52\\\": 45, \\\"89\\\": 2, \\\"78\\\": 3, \\\"69\\\": 7, \\\"34\\\": 213, \\\"113\\\": 1, \\\"114\\\": 1, \\\"79\\\": 3, \\\"60\\\": 14, \\\"54\\\": 32, \\\"90\\\": 2, \\\"115\\\": 1, \\\"91\\\": 2, \\\"64\\\": 12, \\\"58\\\": 18, \\\"92\\\": 2, \\\"116\\\": 1, \\\"75\\\": 4, \\\"70\\\": 7, \\\"80\\\": 3, \\\"67\\\": 9, \\\"50\\\": 56, \\\"93\\\": 2, \\\"65\\\": 8, \\\"117\\\": 1, \\\"76\\\": 3, \\\"73\\\": 5, \\\"118\\\": 1, \\\"77\\\": 4, \\\"61\\\": 1, \\\"81\\\": 3, \\\"119\\\": 1, \\\"62\\\": 18, \\\"82\\\": 3, \\\"83\\\": 3, \\\"57\\\": 18, \\\"120\\\": 1, \\\"121\\\": 1, \\\"94\\\": 2, \\\"74\\\": 5, \\\"122\\\": 1, \\\"71\\\": 7, \\\"123\\\": 1, \\\"125\\\": 1, \\\"124\\\": 1, \\\"126\\\": 1, \\\"95\\\": 2, \\\"127\\\": 1, \\\"128\\\": 1, \\\"59\\\": 20, \\\"96\\\": 2, \\\"63\\\": 14, \\\"97\\\": 2, \\\"129\\\": 1, \\\"98\\\": 2, \\\"72\\\": 6, \\\"99\\\": 2, \\\"100\\\": 2, \\\"66\\\": 10, \\\"130\\\": 1, \\\"84\\\": 3, \\\"131\\\": 1, \\\"85\\\": 3, \\\"132\\\": 1, \\\"133\\\": 1, \\\"101\\\": 2, \\\"102\\\": 2, \\\"103\\\": 1, \\\"104\\\": 2, \\\"134\\\": 1, \\\"135\\\": 1, \\\"136\\\": 1, \\\"105\\\": 2, \\\"106\\\": 2}\", \"index_word\": \"{\\\"1\\\": \\\"a\\\", \\\"2\\\": \\\"^\\\", \\\"3\\\": \\\"$\\\", \\\"4\\\": \\\"i\\\", \\\"5\\\": \\\"r\\\", \\\"6\\\": \\\"n\\\", \\\"7\\\": \\\"h\\\", \\\"8\\\": \\\"e\\\", \\\"9\\\": \\\"s\\\", \\\"10\\\": \\\"d\\\", \\\"11\\\": \\\"t\\\", \\\"12\\\": \\\"l\\\", \\\"13\\\": \\\"m\\\", \\\"14\\\": \\\"k\\\", \\\"15\\\": \\\"u\\\", \\\"16\\\": \\\"o\\\", \\\"17\\\": \\\"b\\\", \\\"18\\\": \\\"y\\\", \\\"19\\\": \\\"g\\\", \\\"20\\\": \\\"v\\\", \\\"21\\\": \\\"p\\\", \\\"22\\\": \\\"c\\\", \\\"23\\\": \\\"j\\\", \\\"24\\\": \\\"w\\\", \\\"25\\\": \\\" \\\", \\\"26\\\": \\\"f\\\", \\\"27\\\": \\\"z\\\", \\\"28\\\": \\\"\\\\u0101\\\", \\\"29\\\": \\\"q\\\", \\\"30\\\": \\\"x\\\", \\\"31\\\": \\\"\\\\u012b\\\", \\\"32\\\": \\\"\\\\u1e0d\\\", \\\"33\\\": \\\"\\\\u1e6d\\\", \\\"34\\\": \\\"\\\\u0304\\\", \\\"35\\\": \\\"\\\\u1e47\\\", \\\"36\\\": \\\"0\\\", \\\"37\\\": \\\"\\\\u0113\\\", \\\"38\\\": \\\"\\\\u016b\\\", \\\"39\\\": \\\"\\\\u1e45\\\", \\\"40\\\": \\\"\\\\u1e5b\\\", \\\"41\\\": \\\"(\\\", \\\"42\\\": \\\")\\\", \\\"43\\\": \\\".\\\", \\\"44\\\": \\\"\\\\u200c\\\", \\\"45\\\": \\\"'\\\", \\\"46\\\": \\\"\\\\u015b\\\", \\\"47\\\": \\\"8\\\", \\\"48\\\": \\\"\\\\u1e63\\\", \\\"49\\\": \\\"\\\\u0323\\\", \\\"50\\\": \\\"\\\\u014d\\\", \\\"51\\\": \\\"-\\\", \\\"52\\\": \\\"\\\\u1e41\\\", \\\"53\\\": \\\"/\\\", \\\"54\\\": \\\"\\\\\\\"\\\", \\\"55\\\": \\\"\\\\u1e43\\\", \\\"56\\\": \\\"@\\\", \\\"57\\\": \\\"\\\\u030a\\\", \\\"58\\\": \\\"\\\\u0310\\\", \\\"59\\\": \\\"\\\\u0307\\\", \\\"60\\\": \\\"4\\\", \\\"61\\\": \\\",\\\", \\\"62\\\": \\\"\\\\u00e9\\\", \\\"63\\\": \\\"\\\\u02bc\\\", \\\"64\\\": \\\"\\\\u0303\\\", \\\"65\\\": \\\"7\\\", \\\"66\\\": \\\"_\\\", \\\"67\\\": \\\"9\\\", \\\"68\\\": \\\":\\\", \\\"69\\\": \\\"[\\\", \\\"70\\\": \\\"*\\\", \\\"71\\\": \\\"\\\\u1e25\\\", \\\"72\\\": \\\"\\\\u0301\\\", \\\"73\\\": \\\"\\\\u0966\\\", \\\"74\\\": \\\"\\\\u1e33\\\", \\\"75\\\": \\\"]\\\", \\\"76\\\": \\\"5\\\", \\\"77\\\": \\\"\\\\u00bb\\\", \\\"78\\\": \\\"3\\\", \\\"79\\\": \\\"\\\\u2019\\\", \\\"80\\\": \\\">\\\", \\\"81\\\": \\\"\\\\u1ebd\\\", \\\"82\\\": \\\"\\\\u0930\\\", \\\"83\\\": \\\"\\\\u0947\\\", \\\"84\\\": \\\"6\\\", \\\"85\\\": \\\"2\\\", \\\"86\\\": \\\"\\\\u200d\\\", \\\"87\\\": \\\"\\\\u1e35\\\", \\\"88\\\": \\\"\\\\u1e96\\\", \\\"89\\\": \\\"\\\\u0308\\\", \\\"90\\\": \\\"\\\\u0341\\\", \\\"91\\\": \\\"\\\\u1ea1\\\", \\\"92\\\": \\\"\\\\u032e\\\", \\\"93\\\": \\\"\\\\u0970\\\", \\\"94\\\": \\\"\\\\u0331\\\", \\\"95\\\": \\\"\\\\u096e\\\", \\\"96\\\": \\\"\\\\u0306\\\", \\\"97\\\": \\\"\\\\u1e95\\\", \\\"98\\\": \\\"\\\\u1eb9\\\", \\\"99\\\": \\\"\\\\u1e37\\\", \\\"100\\\": \\\"\\\\u1e61\\\", \\\"101\\\": \\\"\\\\u0314\\\", \\\"102\\\": \\\"\\\\u0312\\\", \\\"103\\\": \\\"|\\\", \\\"104\\\": \\\"\\\\u00f1\\\", \\\"105\\\": \\\"\\\\u200b\\\", \\\"106\\\": \\\"\\\\u0325\\\", \\\"107\\\": \\\"\\\\u010d\\\", \\\"108\\\": \\\"\\\\u0962\\\", \\\"109\\\": \\\"\\\\u0442\\\", \\\"110\\\": \\\"\\\\u0438\\\", \\\"111\\\": \\\"\\\\u043f\\\", \\\"112\\\": \\\"\\\\u1e49\\\", \\\"113\\\": \\\"\\\\u094c\\\", \\\"114\\\": \\\"!\\\", \\\"115\\\": \\\"\\\\u0942\\\", \\\"116\\\": \\\"\\\\u0951\\\", \\\"117\\\": \\\"1\\\", \\\"118\\\": \\\"\\\\u0131\\\", \\\"119\\\": \\\"\\\\u00a3\\\", \\\"120\\\": \\\"\\\\u0167\\\", \\\"121\\\": \\\"\\\\u0302\\\", \\\"122\\\": \\\"\\\\u1e11\\\", \\\"123\\\": \\\"\\\\u0921\\\", \\\"124\\\": \\\"\\\\u093f\\\", \\\"125\\\": \\\"\\\\u092f\\\", \\\"126\\\": \\\"\\\\u093e\\\", \\\"127\\\": \\\"\\\\u096f\\\", \\\"128\\\": \\\"\\\\u01f0\\\", \\\"129\\\": \\\"\\\\u0121\\\", \\\"130\\\": \\\"~\\\", \\\"131\\\": \\\"\\\\u0309\\\", \\\"132\\\": \\\"\\\\u0965\\\", \\\"133\\\": \\\"\\\\u0902\\\", \\\"134\\\": \\\"\\\\u030d\\\", \\\"135\\\": \\\"\\\\u0324\\\", \\\"136\\\": \\\"\\\\u0952\\\"}\", \"word_index\": \"{\\\"a\\\": 1, \\\"^\\\": 2, \\\"$\\\": 3, \\\"i\\\": 4, \\\"r\\\": 5, \\\"n\\\": 6, \\\"h\\\": 7, \\\"e\\\": 8, \\\"s\\\": 9, \\\"d\\\": 10, \\\"t\\\": 11, \\\"l\\\": 12, \\\"m\\\": 13, \\\"k\\\": 14, \\\"u\\\": 15, \\\"o\\\": 16, \\\"b\\\": 17, \\\"y\\\": 18, \\\"g\\\": 19, \\\"v\\\": 20, \\\"p\\\": 21, \\\"c\\\": 22, \\\"j\\\": 23, \\\"w\\\": 24, \\\" \\\": 25, \\\"f\\\": 26, \\\"z\\\": 27, \\\"\\\\u0101\\\": 28, \\\"q\\\": 29, \\\"x\\\": 30, \\\"\\\\u012b\\\": 31, \\\"\\\\u1e0d\\\": 32, \\\"\\\\u1e6d\\\": 33, \\\"\\\\u0304\\\": 34, \\\"\\\\u1e47\\\": 35, \\\"0\\\": 36, \\\"\\\\u0113\\\": 37, \\\"\\\\u016b\\\": 38, \\\"\\\\u1e45\\\": 39, \\\"\\\\u1e5b\\\": 40, \\\"(\\\": 41, \\\")\\\": 42, \\\".\\\": 43, \\\"\\\\u200c\\\": 44, \\\"'\\\": 45, \\\"\\\\u015b\\\": 46, \\\"8\\\": 47, \\\"\\\\u1e63\\\": 48, \\\"\\\\u0323\\\": 49, \\\"\\\\u014d\\\": 50, \\\"-\\\": 51, \\\"\\\\u1e41\\\": 52, \\\"/\\\": 53, \\\"\\\\\\\"\\\": 54, \\\"\\\\u1e43\\\": 55, \\\"@\\\": 56, \\\"\\\\u030a\\\": 57, \\\"\\\\u0310\\\": 58, \\\"\\\\u0307\\\": 59, \\\"4\\\": 60, \\\",\\\": 61, \\\"\\\\u00e9\\\": 62, \\\"\\\\u02bc\\\": 63, \\\"\\\\u0303\\\": 64, \\\"7\\\": 65, \\\"_\\\": 66, \\\"9\\\": 67, \\\":\\\": 68, \\\"[\\\": 69, \\\"*\\\": 70, \\\"\\\\u1e25\\\": 71, \\\"\\\\u0301\\\": 72, \\\"\\\\u0966\\\": 73, \\\"\\\\u1e33\\\": 74, \\\"]\\\": 75, \\\"5\\\": 76, \\\"\\\\u00bb\\\": 77, \\\"3\\\": 78, \\\"\\\\u2019\\\": 79, \\\">\\\": 80, \\\"\\\\u1ebd\\\": 81, \\\"\\\\u0930\\\": 82, \\\"\\\\u0947\\\": 83, \\\"6\\\": 84, \\\"2\\\": 85, \\\"\\\\u200d\\\": 86, \\\"\\\\u1e35\\\": 87, \\\"\\\\u1e96\\\": 88, \\\"\\\\u0308\\\": 89, \\\"\\\\u0341\\\": 90, \\\"\\\\u1ea1\\\": 91, \\\"\\\\u032e\\\": 92, \\\"\\\\u0970\\\": 93, \\\"\\\\u0331\\\": 94, \\\"\\\\u096e\\\": 95, \\\"\\\\u0306\\\": 96, \\\"\\\\u1e95\\\": 97, \\\"\\\\u1eb9\\\": 98, \\\"\\\\u1e37\\\": 99, \\\"\\\\u1e61\\\": 100, \\\"\\\\u0314\\\": 101, \\\"\\\\u0312\\\": 102, \\\"|\\\": 103, \\\"\\\\u00f1\\\": 104, \\\"\\\\u200b\\\": 105, \\\"\\\\u0325\\\": 106, \\\"\\\\u010d\\\": 107, \\\"\\\\u0962\\\": 108, \\\"\\\\u0442\\\": 109, \\\"\\\\u0438\\\": 110, \\\"\\\\u043f\\\": 111, \\\"\\\\u1e49\\\": 112, \\\"\\\\u094c\\\": 113, \\\"!\\\": 114, \\\"\\\\u0942\\\": 115, \\\"\\\\u0951\\\": 116, \\\"1\\\": 117, \\\"\\\\u0131\\\": 118, \\\"\\\\u00a3\\\": 119, \\\"\\\\u0167\\\": 120, \\\"\\\\u0302\\\": 121, \\\"\\\\u1e11\\\": 122, \\\"\\\\u0921\\\": 123, \\\"\\\\u093f\\\": 124, \\\"\\\\u092f\\\": 125, \\\"\\\\u093e\\\": 126, \\\"\\\\u096f\\\": 127, \\\"\\\\u01f0\\\": 128, \\\"\\\\u0121\\\": 129, \\\"~\\\": 130, \\\"\\\\u0309\\\": 131, \\\"\\\\u0965\\\": 132, \\\"\\\\u0902\\\": 133, \\\"\\\\u030d\\\": 134, \\\"\\\\u0324\\\": 135, \\\"\\\\u0952\\\": 136}\"}}"
@@ -0,0 +1 @@
1
+ "{\"class_name\": \"Tokenizer\", \"config\": {\"num_words\": null, \"filters\": \"\", \"lower\": true, \"split\": \" \", \"char_level\": true, \"oov_token\": null, \"document_count\": 371035, \"word_counts\": \"{\\\"\\\\u092a\\\": 48661, \\\"\\\\u094d\\\": 132066, \\\"\\\\u0930\\\": 183826, \\\"\\\\u092f\\\": 63421, \\\"\\\\u093e\\\": 255343, \\\"\\\\u0924\\\": 53540, \\\" \\\": 13335, \\\"\\\\u0938\\\": 89177, \\\"\\\\u0941\\\": 53687, \\\"\\\\u092c\\\": 49756, \\\"\\\\u094b\\\": 62453, \\\"\\\\u0927\\\": 14001, \\\"\\\\u091a\\\": 21283, \\\"\\\\u0928\\\": 111193, \\\"\\\\u0926\\\": 53529, \\\"\\\\u0935\\\": 71167, \\\"\\\\u0917\\\": 48119, \\\"\\\\u0940\\\": 90822, \\\"\\\\u093f\\\": 99462, \\\"\\\\u0915\\\": 87916, \\\"\\\\u0902\\\": 53814, \\\"\\\\u0921\\\": 46250, \\\"\\\\u0942\\\": 19176, \\\"\\\\u092e\\\": 88455, \\\"\\\\u0943\\\": 2590, \\\"\\\\u0939\\\": 37877, \\\"\\\\u0936\\\": 27978, \\\"\\\\u0923\\\": 12432, \\\"\\\\u0949\\\": 2302, \\\"\\\\u0906\\\": 9046, \\\"\\\\u0932\\\": 94662, \\\"\\\\u091c\\\": 43773, \\\"\\\\u0947\\\": 86705, \\\"\\\\u0916\\\": 14695, \\\"\\\\u0905\\\": 15423, \\\"\\\\u095f\\\": 66, \\\"\\\\u0925\\\": 8804, \\\".\\\": 167, \\\"\\\\u092d\\\": 13296, \\\"\\\\u0937\\\": 6529, \\\"-\\\": 29, \\\"\\\\u092b\\\": 12701, \\\"\\\\u0903\\\": 319, \\\"\\\\u0907\\\": 10028, \\\"\\\\u091f\\\": 35686, \\\"\\\\u0901\\\": 2662, \\\"\\\\u0909\\\": 6042, \\\"\\\\u094c\\\": 9456, \\\":\\\": 38, \\\"\\\\u0908\\\": 8960, \\\"\\\\u0918\\\": 5106, \\\"\\\\u0948\\\": 15975, \\\"\\\\u09fa\\\": 13, \\\"\\\\u09b2\\\": 3, \\\"\\\\u09be\\\": 7, \\\"\\\\u093c\\\": 13222, \\\"\\\\u095c\\\": 51, \\\"\\\\u0920\\\": 5112, \\\"\\\\u095b\\\": 56, \\\"\\\\u0913\\\": 1602, \\\"\\\\u0959\\\": 3, \\\"\\\\u091d\\\": 2512, \\\"\\\\u0922\\\": 3540, \\\"\\\\u091b\\\": 3887, \\\"\\\\u090f\\\": 9715, \\\"\\\\u090b\\\": 182, \\\"\\\\u0958\\\": 10, \\\"\\\\u090a\\\": 587, \\\"\\\\u0919\\\": 35, \\\"\\\\u091e\\\": 493, \\\"(\\\": 103, \\\")\\\": 103, \\\"\\\\u0910\\\": 566, \\\"@\\\": 22, \\\"\\\\u0964\\\": 133, \\\"\\\\u0946\\\": 9, \\\"\\\\u094a\\\": 4, \\\"\\\\u090d\\\": 3, \\\"\\\\u095e\\\": 12, \\\"\\\\u0929\\\": 5, \\\"3\\\": 1, \\\"2\\\": 2, \\\",\\\": 3, \\\"s\\\": 66, \\\"m\\\": 35, \\\"\\\\u0933\\\": 16, \\\"a\\\": 121, \\\"r\\\": 53, \\\"t\\\": 30, \\\"h\\\": 33, \\\"i\\\": 44, \\\"n\\\": 42, \\\"k\\\": 25, \\\"p\\\": 24, \\\"y\\\": 13, \\\"d\\\": 20, \\\"e\\\": 24, \\\"g\\\": 8, \\\"\\\\u0931\\\": 9, \\\"\\\\u0945\\\": 18, \\\"b\\\": 11, \\\"u\\\": 23, \\\"v\\\": 23, \\\"c\\\": 10, \\\"\\\\u0bae\\\": 1, \\\"\\\\u0ba3\\\": 2, \\\"\\\\u0bcd\\\": 5, \\\"\\\\u0bbe\\\": 2, \\\"\\\\u0b99\\\": 1, \\\"\\\\u0b95\\\": 1, \\\"\\\\u0b9f\\\": 2, \\\"\\\\u0bbf\\\": 1, \\\"\\\\u200d\\\": 2425, \\\"l\\\": 15, \\\"z\\\": 3, \\\"j\\\": 19, \\\"\\\\u090e\\\": 6, \\\"\\\\u0911\\\": 148, \\\"\\\\u00e0\\\": 1, \\\"\\\\u00b7\\\": 1, \\\"\\\\u0b9a\\\": 1, \\\"\\\\u0bc1\\\": 1, \\\"\\\\u0ba8\\\": 1, \\\"\\\\u0ba4\\\": 1, \\\"\\\\u0bb0\\\": 2, \\\"\\\\u0b9c\\\": 1, \\\"\\\\u0ba9\\\": 1, \\\"\\\\u095a\\\": 2, \\\"\\\\u0986\\\": 1, \\\"\\\\u09ac\\\": 1, \\\"\\\\u09cd\\\": 4, \\\"\\\\u09a6\\\": 4, \\\"\\\\u09c1\\\": 2, \\\"\\\\u0996\\\": 1, \\\"\\\\u09c7\\\": 1, \\\"\\\\u0995\\\": 2, \\\"\\\\u09ae\\\": 3, \\\"\\\\u099c\\\": 3, \\\"\\\\u09f0\\\": 1, \\\"\\\\u0981\\\": 1, \\\"\\\\u2019\\\": 2, \\\"\\\\u0954\\\": 1, \\\"\\\\u09a8\\\": 4, \\\"\\\\u09bf\\\": 3, \\\"\\\\u09b0\\\": 3, \\\"\\\\u09cb\\\": 1, \\\"\\\\u099a\\\": 1, \\\"\\\\u0985\\\": 1, \\\"\\\\u09a7\\\": 1, \\\"\\\\u09c0\\\": 1, \\\"/\\\": 23, \\\"o\\\": 33, \\\"\\\\u200c\\\": 1464, \\\"\\\\u090c\\\": 1, \\\"\\\\u0914\\\": 342, \\\"\\\\u095d\\\": 3, \\\"`\\\": 1, \\\"\\\\u0970\\\": 2, \\\"w\\\": 1, \\\"\\\\t\\\": 1, \\\"\\\\u09b8\\\": 1, \\\"\\\\u09b9\\\": 1, \\\"\\\\u0989\\\": 1, \\\"'\\\": 62, \\\"\\\\u0950\\\": 1, \\\"\\\\u0966\\\": 958, \\\"\\\\u0951\\\": 166, \\\"\\\\u0952\\\": 287, \\\"\\\\u096e\\\": 94, \\\"\\\\u00a3\\\": 5, \\\"\\\\u0969\\\": 4, \\\"[\\\": 17, \\\"\\\\u0965\\\": 25, \\\"\\\\u096a\\\": 24, \\\"\\\\u0644\\\": 1, \\\"\\\\u201c\\\": 16, \\\"\\\\u201d\\\": 27, \\\"\\\\u00bb\\\": 20, \\\"0\\\": 3, \\\"]\\\": 7, \\\"\\\\\\\"\\\": 8, \\\"\\\\u200b\\\": 2, \\\"*\\\": 14, \\\"\\\\u096f\\\": 13, \\\"\\\\u0967\\\": 1, \\\"\\\\u096d\\\": 11, \\\"\\\\u096b\\\": 4, \\\"\\\\ud804\\\\ude00\\\": 1, \\\"8\\\": 1, \\\"\\\\u0440\\\": 1, \\\"\\\\u062d\\\": 1, \\\"\\\\ufffd\\\": 3, \\\"_\\\": 17, \\\"\\\\u096c\\\": 3, \\\"\\\\u0968\\\": 3, \\\"\\\\u0962\\\": 1, \\\"\\\\u00ab\\\": 1, \\\"\\\\u093d\\\": 1, \\\"$\\\": 1}\", \"word_docs\": \"{\\\"\\\\u0926\\\": 49570, \\\"\\\\u092f\\\": 60978, \\\"\\\\u092c\\\": 47035, \\\" \\\": 8972, \\\"\\\\u0924\\\": 49068, \\\"\\\\u094d\\\": 110099, \\\"\\\\u0941\\\": 50002, \\\"\\\\u0938\\\": 82466, \\\"\\\\u0928\\\": 98547, \\\"\\\\u094b\\\": 59126, \\\"\\\\u093e\\\": 209484, \\\"\\\\u092a\\\": 45436, \\\"\\\\u091a\\\": 20552, \\\"\\\\u0930\\\": 163008, \\\"\\\\u0927\\\": 13742, \\\"\\\\u0921\\\": 44151, \\\"\\\\u0942\\\": 18858, \\\"\\\\u0917\\\": 45605, \\\"\\\\u0935\\\": 67226, \\\"\\\\u0940\\\": 85789, \\\"\\\\u093f\\\": 90833, \\\"\\\\u0915\\\": 80680, \\\"\\\\u0902\\\": 51724, \\\"\\\\u0939\\\": 37214, \\\"\\\\u0943\\\": 2576, \\\"\\\\u0936\\\": 27173, \\\"\\\\u092e\\\": 80927, \\\"\\\\u0949\\\": 2288, \\\"\\\\u0923\\\": 12299, \\\"\\\\u0906\\\": 8762, \\\"\\\\u0932\\\": 87457, \\\"\\\\u091c\\\": 41968, \\\"\\\\u0916\\\": 14403, \\\"\\\\u0947\\\": 80702, \\\"\\\\u095f\\\": 59, \\\"\\\\u0905\\\": 15341, \\\"\\\\u0925\\\": 8668, \\\"\\\\u092d\\\": 13069, \\\"\\\\u0937\\\": 6461, \\\".\\\": 139, \\\"-\\\": 28, \\\"\\\\u092b\\\": 12373, \\\"\\\\u0903\\\": 316, \\\"\\\\u0907\\\": 9745, \\\"\\\\u091f\\\": 32031, \\\"\\\\u0901\\\": 2649, \\\"\\\\u0909\\\": 6024, \\\"\\\\u094c\\\": 9438, \\\"\\\\u0908\\\": 8713, \\\":\\\": 38, \\\"\\\\u0918\\\": 4981, \\\"\\\\u0948\\\": 15790, \\\"\\\\u09fa\\\": 13, \\\"\\\\u09b2\\\": 2, \\\"\\\\u09be\\\": 4, \\\"\\\\u093c\\\": 12695, \\\"\\\\u095c\\\": 50, \\\"\\\\u0920\\\": 4976, \\\"\\\\u095b\\\": 50, \\\"\\\\u0913\\\": 1599, \\\"\\\\u0959\\\": 3, \\\"\\\\u091d\\\": 2342, \\\"\\\\u0922\\\": 3340, \\\"\\\\u091b\\\": 3821, \\\"\\\\u090f\\\": 8277, \\\"\\\\u090b\\\": 182, \\\"\\\\u0958\\\": 10, \\\"\\\\u090a\\\": 587, \\\"\\\\u0919\\\": 34, \\\"\\\\u091e\\\": 480, \\\"(\\\": 103, \\\")\\\": 103, \\\"\\\\u0910\\\": 556, \\\"@\\\": 22, \\\"\\\\u0964\\\": 131, \\\"\\\\u0946\\\": 9, \\\"\\\\u094a\\\": 4, \\\"\\\\u090d\\\": 3, \\\"\\\\u095e\\\": 12, \\\"\\\\u0929\\\": 5, \\\"3\\\": 1, \\\",\\\": 3, \\\"2\\\": 2, \\\"s\\\": 59, \\\"m\\\": 31, \\\"\\\\u0933\\\": 12, \\\"a\\\": 50, \\\"r\\\": 44, \\\"i\\\": 32, \\\"t\\\": 23, \\\"h\\\": 25, \\\"k\\\": 22, \\\"n\\\": 27, \\\"p\\\": 20, \\\"y\\\": 11, \\\"e\\\": 16, \\\"d\\\": 19, \\\"g\\\": 8, \\\"\\\\u0931\\\": 9, \\\"\\\\u0945\\\": 18, \\\"b\\\": 11, \\\"u\\\": 19, \\\"v\\\": 20, \\\"c\\\": 10, \\\"\\\\u0bcd\\\": 2, \\\"\\\\u0bbf\\\": 1, \\\"\\\\u0b95\\\": 1, \\\"\\\\u0ba3\\\": 1, \\\"\\\\u0b9f\\\": 1, \\\"\\\\u0bae\\\": 1, \\\"\\\\u0b99\\\": 1, \\\"\\\\u0bbe\\\": 2, \\\"\\\\u200d\\\": 2288, \\\"z\\\": 2, \\\"l\\\": 12, \\\"j\\\": 17, \\\"\\\\u090e\\\": 5, \\\"\\\\u0911\\\": 147, \\\"\\\\u00e0\\\": 1, \\\"\\\\u00b7\\\": 1, \\\"\\\\u0b9a\\\": 1, \\\"\\\\u0b9c\\\": 1, \\\"\\\\u0ba4\\\": 1, \\\"\\\\u0bc1\\\": 1, \\\"\\\\u0ba9\\\": 1, \\\"\\\\u0ba8\\\": 1, \\\"\\\\u0bb0\\\": 1, \\\"\\\\u095a\\\": 2, \\\"\\\\u0996\\\": 1, \\\"\\\\u09cd\\\": 3, \\\"\\\\u09ac\\\": 1, \\\"\\\\u09ae\\\": 2, \\\"\\\\u0995\\\": 2, \\\"\\\\u09c7\\\": 1, \\\"\\\\u09c1\\\": 1, \\\"\\\\u0986\\\": 1, \\\"\\\\u099c\\\": 2, \\\"\\\\u09f0\\\": 1, \\\"\\\\u09a6\\\": 2, \\\"\\\\u0981\\\": 1, \\\"\\\\u2019\\\": 2, \\\"\\\\u0954\\\": 1, \\\"\\\\u09a8\\\": 2, \\\"\\\\u099a\\\": 1, \\\"\\\\u09a7\\\": 1, \\\"\\\\u09cb\\\": 1, \\\"\\\\u0985\\\": 1, \\\"\\\\u09c0\\\": 1, \\\"\\\\u09b0\\\": 1, \\\"\\\\u09bf\\\": 2, \\\"/\\\": 23, \\\"o\\\": 30, \\\"\\\\u200c\\\": 1439, \\\"\\\\u090c\\\": 1, \\\"\\\\u0914\\\": 342, \\\"\\\\u095d\\\": 3, \\\"`\\\": 1, \\\"\\\\u0970\\\": 1, \\\"w\\\": 1, \\\"\\\\t\\\": 1, \\\"\\\\u09b8\\\": 1, \\\"\\\\u0989\\\": 1, \\\"\\\\u09b9\\\": 1, \\\"'\\\": 62, \\\"\\\\u0950\\\": 1, \\\"\\\\u0966\\\": 923, \\\"\\\\u0951\\\": 166, \\\"\\\\u0952\\\": 287, \\\"\\\\u096e\\\": 93, \\\"\\\\u00a3\\\": 5, \\\"\\\\u0969\\\": 4, \\\"[\\\": 17, \\\"\\\\u0965\\\": 20, \\\"\\\\u096a\\\": 19, \\\"\\\\u0644\\\": 1, \\\"\\\\u201c\\\": 16, \\\"\\\\u201d\\\": 27, \\\"\\\\u00bb\\\": 20, \\\"0\\\": 2, \\\"]\\\": 7, \\\"\\\\\\\"\\\": 8, \\\"\\\\u200b\\\": 2, \\\"*\\\": 14, \\\"\\\\u096f\\\": 13, \\\"\\\\u096d\\\": 8, \\\"\\\\u0967\\\": 1, \\\"\\\\u096b\\\": 3, \\\"\\\\ud804\\\\ude00\\\": 1, \\\"8\\\": 1, \\\"\\\\u0440\\\": 1, \\\"\\\\u062d\\\": 1, \\\"\\\\ufffd\\\": 3, \\\"_\\\": 17, \\\"\\\\u096c\\\": 3, \\\"\\\\u0968\\\": 3, \\\"\\\\u0962\\\": 1, \\\"\\\\u00ab\\\": 1, \\\"\\\\u093d\\\": 1, \\\"$\\\": 1}\", \"index_docs\": \"{\\\"18\\\": 49570, \\\"13\\\": 60978, \\\"19\\\": 47035, \\\"33\\\": 8972, \\\"17\\\": 49068, \\\"3\\\": 110099, \\\"16\\\": 50002, \\\"8\\\": 82466, \\\"4\\\": 98547, \\\"14\\\": 59126, \\\"1\\\": 209484, \\\"20\\\": 45436, \\\"27\\\": 20552, \\\"2\\\": 163008, \\\"32\\\": 13742, \\\"22\\\": 44151, \\\"28\\\": 18858, \\\"21\\\": 45605, \\\"12\\\": 67226, \\\"7\\\": 85789, \\\"5\\\": 90833, \\\"10\\\": 80680, \\\"15\\\": 51724, \\\"24\\\": 37214, \\\"51\\\": 2576, \\\"26\\\": 27173, \\\"9\\\": 80927, \\\"54\\\": 2288, \\\"37\\\": 12299, \\\"41\\\": 8762, \\\"6\\\": 87457, \\\"23\\\": 41968, \\\"31\\\": 14403, \\\"11\\\": 80702, \\\"73\\\": 59, \\\"30\\\": 15341, \\\"43\\\": 8668, \\\"34\\\": 13069, \\\"44\\\": 6461, \\\"65\\\": 139, \\\"87\\\": 28, \\\"36\\\": 12373, \\\"62\\\": 316, \\\"38\\\": 9745, \\\"25\\\": 32031, \\\"50\\\": 2649, \\\"45\\\": 6024, \\\"40\\\": 9438, \\\"42\\\": 8713, \\\"81\\\": 38, \\\"47\\\": 4981, \\\"29\\\": 15790, \\\"108\\\": 13, \\\"132\\\": 2, \\\"120\\\": 4, \\\"35\\\": 12695, \\\"78\\\": 50, \\\"46\\\": 4976, \\\"76\\\": 50, \\\"55\\\": 1599, \\\"133\\\": 3, \\\"52\\\": 2342, \\\"49\\\": 3340, \\\"48\\\": 3821, \\\"39\\\": 8277, \\\"64\\\": 182, \\\"114\\\": 10, \\\"58\\\": 587, \\\"82\\\": 34, \\\"60\\\": 480, \\\"70\\\": 103, \\\"71\\\": 103, \\\"59\\\": 556, \\\"97\\\": 22, \\\"68\\\": 131, \\\"116\\\": 9, \\\"126\\\": 4, \\\"134\\\": 3, \\\"111\\\": 12, \\\"123\\\": 5, \\\"157\\\": 1, \\\"135\\\": 3, \\\"146\\\": 2, \\\"74\\\": 59, \\\"83\\\": 31, \\\"104\\\": 12, \\\"69\\\": 50, \\\"77\\\": 44, \\\"79\\\": 32, \\\"86\\\": 23, \\\"84\\\": 25, \\\"89\\\": 22, \\\"80\\\": 27, \\\"91\\\": 20, \\\"109\\\": 11, \\\"92\\\": 16, \\\"98\\\": 19, \\\"118\\\": 8, \\\"117\\\": 9, \\\"101\\\": 18, \\\"112\\\": 11, \\\"94\\\": 19, \\\"95\\\": 20, \\\"115\\\": 10, \\\"124\\\": 2, \\\"161\\\": 1, \\\"160\\\": 1, \\\"147\\\": 1, \\\"149\\\": 1, \\\"158\\\": 1, \\\"159\\\": 1, \\\"148\\\": 2, \\\"53\\\": 2288, \\\"136\\\": 2, \\\"106\\\": 12, \\\"100\\\": 17, \\\"122\\\": 5, \\\"67\\\": 147, \\\"162\\\": 1, \\\"163\\\": 1, \\\"164\\\": 1, \\\"168\\\": 1, \\\"167\\\": 1, \\\"165\\\": 1, \\\"169\\\": 1, \\\"166\\\": 1, \\\"150\\\": 1, \\\"151\\\": 2, \\\"172\\\": 1, \\\"127\\\": 3, \\\"171\\\": 1, \\\"137\\\": 2, \\\"153\\\": 2, \\\"173\\\": 1, \\\"152\\\": 1, \\\"170\\\": 1, \\\"138\\\": 2, \\\"174\\\": 1, \\\"128\\\": 2, \\\"175\\\": 1, \\\"154\\\": 2, \\\"176\\\": 1, \\\"129\\\": 2, \\\"178\\\": 1, \\\"180\\\": 1, \\\"177\\\": 1, \\\"179\\\": 1, \\\"181\\\": 1, \\\"140\\\": 1, \\\"139\\\": 2, \\\"96\\\": 23, \\\"85\\\": 30, \\\"56\\\": 1439, \\\"182\\\": 1, \\\"61\\\": 342, \\\"141\\\": 3, \\\"183\\\": 1, \\\"155\\\": 1, \\\"184\\\": 1, \\\"185\\\": 1, \\\"186\\\": 1, \\\"188\\\": 1, \\\"187\\\": 1, \\\"75\\\": 62, \\\"189\\\": 1, \\\"57\\\": 923, \\\"66\\\": 166, \\\"63\\\": 287, \\\"72\\\": 93, \\\"125\\\": 5, \\\"130\\\": 4, \\\"102\\\": 17, \\\"90\\\": 20, \\\"93\\\": 19, \\\"190\\\": 1, \\\"105\\\": 16, \\\"88\\\": 27, \\\"99\\\": 20, \\\"142\\\": 2, \\\"121\\\": 7, \\\"119\\\": 8, \\\"156\\\": 2, \\\"107\\\": 14, \\\"110\\\": 13, \\\"113\\\": 8, \\\"191\\\": 1, \\\"131\\\": 3, \\\"192\\\": 1, \\\"193\\\": 1, \\\"194\\\": 1, \\\"195\\\": 1, \\\"143\\\": 3, \\\"103\\\": 17, \\\"144\\\": 3, \\\"145\\\": 3, \\\"196\\\": 1, \\\"197\\\": 1, \\\"198\\\": 1, \\\"199\\\": 1}\", \"index_word\": \"{\\\"1\\\": \\\"\\\\u093e\\\", \\\"2\\\": \\\"\\\\u0930\\\", \\\"3\\\": \\\"\\\\u094d\\\", \\\"4\\\": \\\"\\\\u0928\\\", \\\"5\\\": \\\"\\\\u093f\\\", \\\"6\\\": \\\"\\\\u0932\\\", \\\"7\\\": \\\"\\\\u0940\\\", \\\"8\\\": \\\"\\\\u0938\\\", \\\"9\\\": \\\"\\\\u092e\\\", \\\"10\\\": \\\"\\\\u0915\\\", \\\"11\\\": \\\"\\\\u0947\\\", \\\"12\\\": \\\"\\\\u0935\\\", \\\"13\\\": \\\"\\\\u092f\\\", \\\"14\\\": \\\"\\\\u094b\\\", \\\"15\\\": \\\"\\\\u0902\\\", \\\"16\\\": \\\"\\\\u0941\\\", \\\"17\\\": \\\"\\\\u0924\\\", \\\"18\\\": \\\"\\\\u0926\\\", \\\"19\\\": \\\"\\\\u092c\\\", \\\"20\\\": \\\"\\\\u092a\\\", \\\"21\\\": \\\"\\\\u0917\\\", \\\"22\\\": \\\"\\\\u0921\\\", \\\"23\\\": \\\"\\\\u091c\\\", \\\"24\\\": \\\"\\\\u0939\\\", \\\"25\\\": \\\"\\\\u091f\\\", \\\"26\\\": \\\"\\\\u0936\\\", \\\"27\\\": \\\"\\\\u091a\\\", \\\"28\\\": \\\"\\\\u0942\\\", \\\"29\\\": \\\"\\\\u0948\\\", \\\"30\\\": \\\"\\\\u0905\\\", \\\"31\\\": \\\"\\\\u0916\\\", \\\"32\\\": \\\"\\\\u0927\\\", \\\"33\\\": \\\" \\\", \\\"34\\\": \\\"\\\\u092d\\\", \\\"35\\\": \\\"\\\\u093c\\\", \\\"36\\\": \\\"\\\\u092b\\\", \\\"37\\\": \\\"\\\\u0923\\\", \\\"38\\\": \\\"\\\\u0907\\\", \\\"39\\\": \\\"\\\\u090f\\\", \\\"40\\\": \\\"\\\\u094c\\\", \\\"41\\\": \\\"\\\\u0906\\\", \\\"42\\\": \\\"\\\\u0908\\\", \\\"43\\\": \\\"\\\\u0925\\\", \\\"44\\\": \\\"\\\\u0937\\\", \\\"45\\\": \\\"\\\\u0909\\\", \\\"46\\\": \\\"\\\\u0920\\\", \\\"47\\\": \\\"\\\\u0918\\\", \\\"48\\\": \\\"\\\\u091b\\\", \\\"49\\\": \\\"\\\\u0922\\\", \\\"50\\\": \\\"\\\\u0901\\\", \\\"51\\\": \\\"\\\\u0943\\\", \\\"52\\\": \\\"\\\\u091d\\\", \\\"53\\\": \\\"\\\\u200d\\\", \\\"54\\\": \\\"\\\\u0949\\\", \\\"55\\\": \\\"\\\\u0913\\\", \\\"56\\\": \\\"\\\\u200c\\\", \\\"57\\\": \\\"\\\\u0966\\\", \\\"58\\\": \\\"\\\\u090a\\\", \\\"59\\\": \\\"\\\\u0910\\\", \\\"60\\\": \\\"\\\\u091e\\\", \\\"61\\\": \\\"\\\\u0914\\\", \\\"62\\\": \\\"\\\\u0903\\\", \\\"63\\\": \\\"\\\\u0952\\\", \\\"64\\\": \\\"\\\\u090b\\\", \\\"65\\\": \\\".\\\", \\\"66\\\": \\\"\\\\u0951\\\", \\\"67\\\": \\\"\\\\u0911\\\", \\\"68\\\": \\\"\\\\u0964\\\", \\\"69\\\": \\\"a\\\", \\\"70\\\": \\\"(\\\", \\\"71\\\": \\\")\\\", \\\"72\\\": \\\"\\\\u096e\\\", \\\"73\\\": \\\"\\\\u095f\\\", \\\"74\\\": \\\"s\\\", \\\"75\\\": \\\"'\\\", \\\"76\\\": \\\"\\\\u095b\\\", \\\"77\\\": \\\"r\\\", \\\"78\\\": \\\"\\\\u095c\\\", \\\"79\\\": \\\"i\\\", \\\"80\\\": \\\"n\\\", \\\"81\\\": \\\":\\\", \\\"82\\\": \\\"\\\\u0919\\\", \\\"83\\\": \\\"m\\\", \\\"84\\\": \\\"h\\\", \\\"85\\\": \\\"o\\\", \\\"86\\\": \\\"t\\\", \\\"87\\\": \\\"-\\\", \\\"88\\\": \\\"\\\\u201d\\\", \\\"89\\\": \\\"k\\\", \\\"90\\\": \\\"\\\\u0965\\\", \\\"91\\\": \\\"p\\\", \\\"92\\\": \\\"e\\\", \\\"93\\\": \\\"\\\\u096a\\\", \\\"94\\\": \\\"u\\\", \\\"95\\\": \\\"v\\\", \\\"96\\\": \\\"/\\\", \\\"97\\\": \\\"@\\\", \\\"98\\\": \\\"d\\\", \\\"99\\\": \\\"\\\\u00bb\\\", \\\"100\\\": \\\"j\\\", \\\"101\\\": \\\"\\\\u0945\\\", \\\"102\\\": \\\"[\\\", \\\"103\\\": \\\"_\\\", \\\"104\\\": \\\"\\\\u0933\\\", \\\"105\\\": \\\"\\\\u201c\\\", \\\"106\\\": \\\"l\\\", \\\"107\\\": \\\"*\\\", \\\"108\\\": \\\"\\\\u09fa\\\", \\\"109\\\": \\\"y\\\", \\\"110\\\": \\\"\\\\u096f\\\", \\\"111\\\": \\\"\\\\u095e\\\", \\\"112\\\": \\\"b\\\", \\\"113\\\": \\\"\\\\u096d\\\", \\\"114\\\": \\\"\\\\u0958\\\", \\\"115\\\": \\\"c\\\", \\\"116\\\": \\\"\\\\u0946\\\", \\\"117\\\": \\\"\\\\u0931\\\", \\\"118\\\": \\\"g\\\", \\\"119\\\": \\\"\\\\\\\"\\\", \\\"120\\\": \\\"\\\\u09be\\\", \\\"121\\\": \\\"]\\\", \\\"122\\\": \\\"\\\\u090e\\\", \\\"123\\\": \\\"\\\\u0929\\\", \\\"124\\\": \\\"\\\\u0bcd\\\", \\\"125\\\": \\\"\\\\u00a3\\\", \\\"126\\\": \\\"\\\\u094a\\\", \\\"127\\\": \\\"\\\\u09cd\\\", \\\"128\\\": \\\"\\\\u09a6\\\", \\\"129\\\": \\\"\\\\u09a8\\\", \\\"130\\\": \\\"\\\\u0969\\\", \\\"131\\\": \\\"\\\\u096b\\\", \\\"132\\\": \\\"\\\\u09b2\\\", \\\"133\\\": \\\"\\\\u0959\\\", \\\"134\\\": \\\"\\\\u090d\\\", \\\"135\\\": \\\",\\\", \\\"136\\\": \\\"z\\\", \\\"137\\\": \\\"\\\\u09ae\\\", \\\"138\\\": \\\"\\\\u099c\\\", \\\"139\\\": \\\"\\\\u09bf\\\", \\\"140\\\": \\\"\\\\u09b0\\\", \\\"141\\\": \\\"\\\\u095d\\\", \\\"142\\\": \\\"0\\\", \\\"143\\\": \\\"\\\\ufffd\\\", \\\"144\\\": \\\"\\\\u096c\\\", \\\"145\\\": \\\"\\\\u0968\\\", \\\"146\\\": \\\"2\\\", \\\"147\\\": \\\"\\\\u0ba3\\\", \\\"148\\\": \\\"\\\\u0bbe\\\", \\\"149\\\": \\\"\\\\u0b9f\\\", \\\"150\\\": \\\"\\\\u0bb0\\\", \\\"151\\\": \\\"\\\\u095a\\\", \\\"152\\\": \\\"\\\\u09c1\\\", \\\"153\\\": \\\"\\\\u0995\\\", \\\"154\\\": \\\"\\\\u2019\\\", \\\"155\\\": \\\"\\\\u0970\\\", \\\"156\\\": \\\"\\\\u200b\\\", \\\"157\\\": \\\"3\\\", \\\"158\\\": \\\"\\\\u0bae\\\", \\\"159\\\": \\\"\\\\u0b99\\\", \\\"160\\\": \\\"\\\\u0b95\\\", \\\"161\\\": \\\"\\\\u0bbf\\\", \\\"162\\\": \\\"\\\\u00e0\\\", \\\"163\\\": \\\"\\\\u00b7\\\", \\\"164\\\": \\\"\\\\u0b9a\\\", \\\"165\\\": \\\"\\\\u0bc1\\\", \\\"166\\\": \\\"\\\\u0ba8\\\", \\\"167\\\": \\\"\\\\u0ba4\\\", \\\"168\\\": \\\"\\\\u0b9c\\\", \\\"169\\\": \\\"\\\\u0ba9\\\", \\\"170\\\": \\\"\\\\u0986\\\", \\\"171\\\": \\\"\\\\u09ac\\\", \\\"172\\\": \\\"\\\\u0996\\\", \\\"173\\\": \\\"\\\\u09c7\\\", \\\"174\\\": \\\"\\\\u09f0\\\", \\\"175\\\": \\\"\\\\u0981\\\", \\\"176\\\": \\\"\\\\u0954\\\", \\\"177\\\": \\\"\\\\u09cb\\\", \\\"178\\\": \\\"\\\\u099a\\\", \\\"179\\\": \\\"\\\\u0985\\\", \\\"180\\\": \\\"\\\\u09a7\\\", \\\"181\\\": \\\"\\\\u09c0\\\", \\\"182\\\": \\\"\\\\u090c\\\", \\\"183\\\": \\\"`\\\", \\\"184\\\": \\\"w\\\", \\\"185\\\": \\\"\\\\t\\\", \\\"186\\\": \\\"\\\\u09b8\\\", \\\"187\\\": \\\"\\\\u09b9\\\", \\\"188\\\": \\\"\\\\u0989\\\", \\\"189\\\": \\\"\\\\u0950\\\", \\\"190\\\": \\\"\\\\u0644\\\", \\\"191\\\": \\\"\\\\u0967\\\", \\\"192\\\": \\\"\\\\ud804\\\\ude00\\\", \\\"193\\\": \\\"8\\\", \\\"194\\\": \\\"\\\\u0440\\\", \\\"195\\\": \\\"\\\\u062d\\\", \\\"196\\\": \\\"\\\\u0962\\\", \\\"197\\\": \\\"\\\\u00ab\\\", \\\"198\\\": \\\"\\\\u093d\\\", \\\"199\\\": \\\"$\\\"}\", \"word_index\": \"{\\\"\\\\u093e\\\": 1, \\\"\\\\u0930\\\": 2, \\\"\\\\u094d\\\": 3, \\\"\\\\u0928\\\": 4, \\\"\\\\u093f\\\": 5, \\\"\\\\u0932\\\": 6, \\\"\\\\u0940\\\": 7, \\\"\\\\u0938\\\": 8, \\\"\\\\u092e\\\": 9, \\\"\\\\u0915\\\": 10, \\\"\\\\u0947\\\": 11, \\\"\\\\u0935\\\": 12, \\\"\\\\u092f\\\": 13, \\\"\\\\u094b\\\": 14, \\\"\\\\u0902\\\": 15, \\\"\\\\u0941\\\": 16, \\\"\\\\u0924\\\": 17, \\\"\\\\u0926\\\": 18, \\\"\\\\u092c\\\": 19, \\\"\\\\u092a\\\": 20, \\\"\\\\u0917\\\": 21, \\\"\\\\u0921\\\": 22, \\\"\\\\u091c\\\": 23, \\\"\\\\u0939\\\": 24, \\\"\\\\u091f\\\": 25, \\\"\\\\u0936\\\": 26, \\\"\\\\u091a\\\": 27, \\\"\\\\u0942\\\": 28, \\\"\\\\u0948\\\": 29, \\\"\\\\u0905\\\": 30, \\\"\\\\u0916\\\": 31, \\\"\\\\u0927\\\": 32, \\\" \\\": 33, \\\"\\\\u092d\\\": 34, \\\"\\\\u093c\\\": 35, \\\"\\\\u092b\\\": 36, \\\"\\\\u0923\\\": 37, \\\"\\\\u0907\\\": 38, \\\"\\\\u090f\\\": 39, \\\"\\\\u094c\\\": 40, \\\"\\\\u0906\\\": 41, \\\"\\\\u0908\\\": 42, \\\"\\\\u0925\\\": 43, \\\"\\\\u0937\\\": 44, \\\"\\\\u0909\\\": 45, \\\"\\\\u0920\\\": 46, \\\"\\\\u0918\\\": 47, \\\"\\\\u091b\\\": 48, \\\"\\\\u0922\\\": 49, \\\"\\\\u0901\\\": 50, \\\"\\\\u0943\\\": 51, \\\"\\\\u091d\\\": 52, \\\"\\\\u200d\\\": 53, \\\"\\\\u0949\\\": 54, \\\"\\\\u0913\\\": 55, \\\"\\\\u200c\\\": 56, \\\"\\\\u0966\\\": 57, \\\"\\\\u090a\\\": 58, \\\"\\\\u0910\\\": 59, \\\"\\\\u091e\\\": 60, \\\"\\\\u0914\\\": 61, \\\"\\\\u0903\\\": 62, \\\"\\\\u0952\\\": 63, \\\"\\\\u090b\\\": 64, \\\".\\\": 65, \\\"\\\\u0951\\\": 66, \\\"\\\\u0911\\\": 67, \\\"\\\\u0964\\\": 68, \\\"a\\\": 69, \\\"(\\\": 70, \\\")\\\": 71, \\\"\\\\u096e\\\": 72, \\\"\\\\u095f\\\": 73, \\\"s\\\": 74, \\\"'\\\": 75, \\\"\\\\u095b\\\": 76, \\\"r\\\": 77, \\\"\\\\u095c\\\": 78, \\\"i\\\": 79, \\\"n\\\": 80, \\\":\\\": 81, \\\"\\\\u0919\\\": 82, \\\"m\\\": 83, \\\"h\\\": 84, \\\"o\\\": 85, \\\"t\\\": 86, \\\"-\\\": 87, \\\"\\\\u201d\\\": 88, \\\"k\\\": 89, \\\"\\\\u0965\\\": 90, \\\"p\\\": 91, \\\"e\\\": 92, \\\"\\\\u096a\\\": 93, \\\"u\\\": 94, \\\"v\\\": 95, \\\"/\\\": 96, \\\"@\\\": 97, \\\"d\\\": 98, \\\"\\\\u00bb\\\": 99, \\\"j\\\": 100, \\\"\\\\u0945\\\": 101, \\\"[\\\": 102, \\\"_\\\": 103, \\\"\\\\u0933\\\": 104, \\\"\\\\u201c\\\": 105, \\\"l\\\": 106, \\\"*\\\": 107, \\\"\\\\u09fa\\\": 108, \\\"y\\\": 109, \\\"\\\\u096f\\\": 110, \\\"\\\\u095e\\\": 111, \\\"b\\\": 112, \\\"\\\\u096d\\\": 113, \\\"\\\\u0958\\\": 114, \\\"c\\\": 115, \\\"\\\\u0946\\\": 116, \\\"\\\\u0931\\\": 117, \\\"g\\\": 118, \\\"\\\\\\\"\\\": 119, \\\"\\\\u09be\\\": 120, \\\"]\\\": 121, \\\"\\\\u090e\\\": 122, \\\"\\\\u0929\\\": 123, \\\"\\\\u0bcd\\\": 124, \\\"\\\\u00a3\\\": 125, \\\"\\\\u094a\\\": 126, \\\"\\\\u09cd\\\": 127, \\\"\\\\u09a6\\\": 128, \\\"\\\\u09a8\\\": 129, \\\"\\\\u0969\\\": 130, \\\"\\\\u096b\\\": 131, \\\"\\\\u09b2\\\": 132, \\\"\\\\u0959\\\": 133, \\\"\\\\u090d\\\": 134, \\\",\\\": 135, \\\"z\\\": 136, \\\"\\\\u09ae\\\": 137, \\\"\\\\u099c\\\": 138, \\\"\\\\u09bf\\\": 139, \\\"\\\\u09b0\\\": 140, \\\"\\\\u095d\\\": 141, \\\"0\\\": 142, \\\"\\\\ufffd\\\": 143, \\\"\\\\u096c\\\": 144, \\\"\\\\u0968\\\": 145, \\\"2\\\": 146, \\\"\\\\u0ba3\\\": 147, \\\"\\\\u0bbe\\\": 148, \\\"\\\\u0b9f\\\": 149, \\\"\\\\u0bb0\\\": 150, \\\"\\\\u095a\\\": 151, \\\"\\\\u09c1\\\": 152, \\\"\\\\u0995\\\": 153, \\\"\\\\u2019\\\": 154, \\\"\\\\u0970\\\": 155, \\\"\\\\u200b\\\": 156, \\\"3\\\": 157, \\\"\\\\u0bae\\\": 158, \\\"\\\\u0b99\\\": 159, \\\"\\\\u0b95\\\": 160, \\\"\\\\u0bbf\\\": 161, \\\"\\\\u00e0\\\": 162, \\\"\\\\u00b7\\\": 163, \\\"\\\\u0b9a\\\": 164, \\\"\\\\u0bc1\\\": 165, \\\"\\\\u0ba8\\\": 166, \\\"\\\\u0ba4\\\": 167, \\\"\\\\u0b9c\\\": 168, \\\"\\\\u0ba9\\\": 169, \\\"\\\\u0986\\\": 170, \\\"\\\\u09ac\\\": 171, \\\"\\\\u0996\\\": 172, \\\"\\\\u09c7\\\": 173, \\\"\\\\u09f0\\\": 174, \\\"\\\\u0981\\\": 175, \\\"\\\\u0954\\\": 176, \\\"\\\\u09cb\\\": 177, \\\"\\\\u099a\\\": 178, \\\"\\\\u0985\\\": 179, \\\"\\\\u09a7\\\": 180, \\\"\\\\u09c0\\\": 181, \\\"\\\\u090c\\\": 182, \\\"`\\\": 183, \\\"w\\\": 184, \\\"\\\\t\\\": 185, \\\"\\\\u09b8\\\": 186, \\\"\\\\u09b9\\\": 187, \\\"\\\\u0989\\\": 188, \\\"\\\\u0950\\\": 189, \\\"\\\\u0644\\\": 190, \\\"\\\\u0967\\\": 191, \\\"\\\\ud804\\\\ude00\\\": 192, \\\"8\\\": 193, \\\"\\\\u0440\\\": 194, \\\"\\\\u062d\\\": 195, \\\"\\\\u0962\\\": 196, \\\"\\\\u00ab\\\": 197, \\\"\\\\u093d\\\": 198, \\\"$\\\": 199}\"}}"