Adding tokenizer files
d7f3c68
|
Ġ Ð |
|
Ð ¾ |
|
Ð ° |
|
Ð µ |
|
Ñ Ĥ |
|
Ð ¸ |
|
о Р|
|
Ñ ģ |
|
Ñ Ģ |
|
Ð ½ |
|
Ñ ĥ |
|
а Р|
|
е Р|
|
Ñ ı |
|
Ñ Į |
|
и Р|
|
Ñ ĭ |
|
ĠÐ ¿ |
|
Ñ ĩ |
|
ĠÐ ² |
|
ĠÐ ½ |
|
Ġ Ñģ |
|
Ð º |
|
Ð » |
|
Ð ´ |
|
е ÑĤ |
|
ÑĤ о |
|
Ð ² |
|
Ñ Ī |
|
ĠÐ º |
|
е н |
|
ĠÐ ¾ |
|
ĠÐ ´ |
|
Ġ ÑĤ |
|
Ñ ħ |
|
ĠÐ ¸ |
|
ĠÐ ¼ |
|
оР² |
|
Ġ - |
|
Ñģ ÑĤ |
|
и ÑĤ |
|
Ñĥ Ð |
|
Ñ İ |
|
аР» |
|
е ÑĢ |
|
оР» |
|
оР¼ |
|
ĠÐ ± |
|
аРº |
|
оР´ |
|
еР» |
|
а ÑĤ |
|
Ġ Ñĩ |
|
Ð ¼ |
|
ĠÐ · |
|
о ÑĢ |
|
. . |
|
Ġп ÑĢ |
|
Ġн а |
|
оР³ |
|
и н |
|
Ġ ÑĢ |
|
а н |
|
оР¹ |
|
Ñģ Ñı |
|
Ð ¿ |
|
иР» |
|
еР¼ |
|
н о |
|
Ġн е |
|
о ÑĤ |
|
Ñ Ĩ |
|
аР¼ |
|
о Ñģ |
|
ĠÐ ³ |
|
Ð ± |
|
иРº |
|
Ġ Ñĥ |
|
а еÑĤ |
|
Ñ ī |
|
оР½ |
|
аР· |
|
ĠÐ Ł |
|
а ÑĢ |
|
ĠÐ µ |
|
ĠÐ Ĵ |
|
а Ñģ |
|
аР² |
|
еР´ |
|
Ġ Ñ |
|
ĠÐ ¶ |
|
ĠÐ Ŀ |
|
ĠÐ » |
|
Ð · |
|
ĠÑĩ ÑĤо |
|
иР² |
|
ĠÐ ° |
|
Ð ³ |
|
аÑĤ ÑĮ |
|
Ð ¹ |
|
н Ñĭ |
|
ÑĥÐ ¶ |
|
Ñģ к |
|
оР± |
|
.. . |
|
аР´ |
|
л и |
|
иР¼ |
|
о Ñĩ |
|
оРº |
|
а Ñı |
|
еР³ |
|
Ġв Ñĭ |
|
ĠÑ į |
|
ĠÐ ¡ |
|
оР¶ |
|
Ġ Ñı |
|
еР¹ |
|
ĠÐ Ķ |
|
Ġо ÑĤ |
|
к а |
|
ĠÐ IJ |
|
еР² |
|
д а |
|
Ñĥ ÑĤ |
|
ĠÐ ľ |
|
ÑĢ а |
|
? - |
|
Ġп о |
|
ол ÑĮ |
|
еРº |
|
Ñı ÑĤ |
|
ог о |
|
н Р|
|
ĠÐ ļ |
|
½ н |
|
а Ñİ |
|
иÑĤ ÑĮ |
|
е Ñģ |
|
Ġ Ñħ |
|
еР± |
|
Ġк ак |
|
и е |
|
ÑĤо ÑĢ |
|
ĠÑģ ÑĤ |
|
еР· |
|
Ġб Ñĭ |
|
аР± |
|
Ñĥ д |
|
ĠÐ ¢ |
|
Ġв Ñģ |
|
ĠÐ ŀ |
|
иР´ |
|
е ÑĪ |
|
Ñģ Ñ |
|
Ġ " |
|
Ġо н |
|
иР¹ |
|
ģ Ñģ |
|
к Ñĥ |
|
ĠÑĤ ак |
|
аР¹ |
|
к и |
|
и Ñģ |
|
оР¿ |
|
аР¶ |
|
и Ñħ |
|
Ð ¶ |
|
оР· |
|
ĠÑį ÑĤо |
|
и ÑĢ |
|
и Ñı |
|
Ġо б |
|
Ġз а |
|
ĠÐ ĺ |
|
ен ÑĮ |
|
Ġп од |
|
к о |
|
: - |
|
аР¿ |
|
ÑģÑĤ в |
|
и Ñĩ |
|
л Ñı |
|
ÑĢ ÑĥÐ |
|
е Ñĩ |
|
Ñ Ħ |
|
ĠÑĤ Ñĭ |
|
ĠÑģ в |
|
ег о |
|
ĠÑģ п |
|
Ñĥ Ñİ |
|
Ġи з |
|
ÑĥÐ ¼ |
|
ел ÑĮ |
|
. - |
|
н е |
|
Ñĭ в |
|
Ñĭ й |
|
иР· |
|
ĠÑĢ аз |
|
ог да |
|
ов оÑĢ |
|
ÑģÑĤ ÑĮ |
|
н а |
|
Ġж ен |
|
нÑĭ й |
|
Ñĥ Ñĩ |
|
Ñĥ ÑĪ |
|
ал ÑĮ |
|
ĠвÑģ е |
|
аÑİ ÑĤ |
|
¸ и |
|
еÑĪ ÑĮ |
|
ĠÑģ л |
|
и ÑĨ |
|
Ġо д |
|
ÑĥÐ ¿ |
|
Ġм Ñĥж |
|
ал и |
|
Ġп еÑĢ |
|
а ÑĪ |
|
ен Ñı |
|
н ик |
|
Ġ ÑĪ |
|
Ñħ од |
|
ĠÐ ł |
|
олÑĮ ко |
|
Ġп ол |
|
ĠÐ § |
|
ĠÑģ к |
|
и ÑĪ |
|
еР¿ |
|
Ġд в |
|
Ñī е |
|
ĠÐ £ |
|
ÑĢÑĥÐ ³ |
|
ĠÐ ij |
|
ĠÐ ¯ |
|
о ÑĪ |
|
о е |
|
ĠÐŁ ÑĢ |
|
Ġг овоÑĢ |
|
о ÑģÑĤ |
|
µ е |
|
Ñĥ ÑĢ |
|
ĠÑĤ ÑĢ |
|
Ġм енÑı |
|
л а |
|
л о |
|
Ġ ÑĤо |
|
Ġк ÑĢ |
|
ĠÐ Ĺ |
|
н ой |
|
г о |
|
! - |
|
Ñģ ли |
|
аеÑĤ ÑģÑı |
|
Ġп оÑģ |
|
е ÑģÑĤ |
|
ĠÑĤ еб |
|
ĠÑ Ħ |
|
ам и |
|
Ñĥ Ñģ |
|
ем Ñĥ |
|
ĠÐ ķ |
|
ом Ñĥ |
|
â Ģ |
|
иÑĤ е |
|
ал а |
|
аР³ |
|
еР¶ |
|
Ġл Ñİ |
|
ÑģÑĤ ÑĢ |
|
ин а |
|
ен ÑĤ |
|
ÑĪ е |
|
н ого |
|
ил и |
|
Ġ âĢ |
|
Ġж е |
|
ÑĥÐ ± |
|
Ġб Ñĥд |
|
Ġм не |
|
ĠÐĶ а |
|
ĠÐĿ Ñĥ |
|
ĠÐ ĵ |
|
Ġк о |
|
" . |
|
Ñĥ л |
|
к е |
|
Ġе го |
|
н Ñı |
|
ĠÑģ м |
|
ĠÑį ÑĤ |
|
ÑıÑĤ ÑĮ |
|
н аÑı |
|
нÑĭ е |
|
Ð IJ |
|
иÑģ ÑĮ |
|
Ġн о |
|
ив аеÑĤ |
|
и ÑģÑĤ |
|
ĠâĢ Ķ |
|
оÑĤ ÑĢ |
|
! ! |
|
а Ñħ |
|
ÑĤ е |
|
Ñĭ е |
|
Ġ Ñĥж |
|
ĠÑģв о |
|
ĠговоÑĢ иÑĤ |
|
иР³ |
|
Ġк огда |
|
Ġм ож |
|
ÑĤ об |
|
ÑĢа ÑĪ |
|
ÑĨ и |
|
аб оÑĤ |
|
л Ñİ |
|
ĠÑģ ам |
|
Ġд ел |
|
л ен |
|
иР± |
|
л е |
|
ĠÐ Ľ |
|
д е |
|
ĠÐļ ак |
|
ĠÐ Ń |
|
Ġко ÑĤоÑĢ |
|
Ġд ÑĢÑĥг |
|
ÑĢ оÑģ |
|
ĠпÑĢ о |
|
Ð ŀ |
|
м Ñĥ |
|
но е |
|
ĠÑĤ олÑĮко |
|
Ġз н |
|
Ġм Ñĭ |
|
Ġд ев |
|
ÑĢ ав |
|
Ġ ( |
|
Ġк он |
|
оÑĩ емÑĥ |
|
Ġе Ñīе |
|
еÑĤ ÑģÑı |
|
Ġв ÑĢ |
|
ил а |
|
Ñĩ иÑĤ |
|
Ġн ад |
|
Ġ 1 |
|
Ġб олÑĮ |
|
Ġп оÑĤ |
|
ĠлÑİ Ð± |
|
е ÑĨ |
|
ÑĤоб Ñĭ |
|
ĠÑĤеб Ñı |
|
ĠÑĥж е |
|
Ñĥ к |
|
ÑĢ ан |
|
од иÑĤ |
|
м и |
|
Ñħод иÑĤ |
|
Ġп ок |
|
н и |
|
а Ñĩ |
|
Ġд ом |
|
ÑĮ Ñı |
|
Ġон а |
|
Ñİ ÑĤ |
|
ĠÑĢ абоÑĤ |
|
Ġна Ñģ |
|
Ñĭ Ñħ |
|
ĠÑĢ аÑģ |
|
нÑĭ Ñħ |
|
еÑĢ а |
|
Ġв аÑģ |
|
Ġн еÑĤ |
|
еÑĢ ÑĮ |
|
ел ов |
|
ил ÑĮ |
|
оÑģ ÑĮ |
|
Ġ ÑĨ |
|
ĠÐĴ Ñĭ |
|
Ġо п |
|
ĠÐĿ е |
|
Ġв ид |
|
Ñĥ Ñħ |
|
ел и |
|
ĠÐ ĸ |
|
Ġг ол |
|
Ġм о |
|
иÑĪ ÑĮ |
|
Ġжен Ñī |
|
ĠÐĿ а |
|
аÑģ ÑĮ |
|
ĠÑģ еб |
|
Ñ į |
|
еÑģ ÑĮ |
|
ен иÑı |
|
еÑĤ ÑĮ |
|
ĠÑģ об |
|
Ġг ÑĢ |
|
Ñģ п |
|
Ġо Ñĩ |
|
ĠÐ ¥ |
|
ĠÑģп ÑĢаÑĪ |
|
Ġд лÑı |
|
ĠпÑĢ оÑģ |
|
Ġк ом |
|
ĠÑĩ ÑĤобÑĭ |
|
Ġд енÑĮ |
|
Ġе Ñģли |
|
ĠÑģ о |
|
Ġна Ñĩ |
|
ен ие |
|
Ġд ол |
|
Ñģк ий |
|
ÑĤ ÑĮ |
|
ĠÐķ Ñģли |
|
` ` |
|
Ñ Ĭ |
|
Ġе ÑģÑĤÑĮ |
|
ÑģÑĤ ав |
|
еÑĤ е |
|
Ġп аÑĢ |
|
оÑĢ оÑĪ |
|
Ġп оп |
|
Ð Ŀ |
|
ĠЧ ÑĤо |
|
аÑĤÑĮ ÑģÑı |
|
Ġп он |
|
оÑģ Ñģ |
|
Ġи н |
|
Ñģ ÑĮ |
|
Ð ¡ |
|
ĠТ Ñĭ |
|
Ġг л |
|
е Ñħ |
|
Ġд о |
|
ĠмÑĥж ик |
|
ĠоÑĤ в |
|
ин Ñĭ |
|
ĠÑĤ ам |
|
ĠÑģк аз |
|
Ġв оÑĤ |
|
елов ек |
|
Ġе е |
|
Ġп ом |
|
д Ñĥ |
|
ÑĤ ÑĢ |
|
к ÑĢ |
|
ĠвÑĢ ем |
|
ÑĥÐ ³ |
|
Ñĭ ÑĪ |
|
Ġв оз |
|
ил ÑģÑı |
|
аз Ñĭв |
|
Ġв о |
|
аж д |
|
Ð ¢ |
|
ĠÐŃ ÑĤо |
|
Ġна ÑĪ |
|
к ой |
|
д ел |
|
Ġл еÑĤ |
|
ен но |
|
ен и |
|
Ð Ĵ |
|
н Ñĥ |
|
Ġ Ñĥм |
|
ÑĥÑĪ ка |
|
Ð ĺ |
|
Ġи м |
|
Ð Ł |
|
ĠÐľ Ñĥж |
|
¾ о |
|
Ġз ак |
|
ÑĤ и |
|
ĠÑĤеб е |
|
Ġк ÑĤо |
|
ĠпÑĢ ед |
|
Ġн ов |
|
Ġон и |
|
Ð ķ |
|
ĠÑĩ еловек |
|
ĠÑĩ ем |
|
а ÑģÑĤ |
|
иР¿ |
|
н иÑĨ |
|
Ġн ик |
|
нÑĭ м |
|
Ġе мÑĥ |
|
Ġм ол |
|
ин Ñĥ |
|
д и |
|
Ġп оÑĢ |
|
н ÑĥÑİ |
|
Ġод ин |
|
ен а |
|
иÑĤ елÑĮ |
|
ÑĥÐ ¹ |
|
Ñĭ м |
|
иÑĤ ÑģÑı |
|
ал ÑģÑı |
|
ĠбÑĭ ло |
|
ĠÐĿ еÑĤ |
|
ĠпÑĢ и |
|
ĠÑģпÑĢаÑĪ иваеÑĤ |
|
ов а |
|
ÑĤ еÑĢ |
|
оÑĩ ка |
|
е Ñģк |
|
ĠÑĩ еÑĢ |
|
а еÑĪÑĮ |
|
Ġз ап |
|
Ġб ез |
|
Ġв з |
|
ÑĥÐ · |
|
Ñģ е |
|
Ð Ķ |
|
Ġн ап |
|
ÑĢ аз |
|
Ġг оÑĢ |
|
Ġ 2 |
|
иР¶ |
|
Ð ľ |
|
Ñĭ л |
|
Ġк оÑĢ |
|
ĠÑħ оÑĤ |
|
н им |
|
Ġм ог |
|
Ñĭ ÑĤ |
|
Ġп л |
|
ĠТ ак |
|
Ñĩ ик |
|
н ом |
|
оÑĢ ог |
|
Ġж из |
|
Ġдв а |
|
ĠпÑĢ ав |
|
ĠÐŀ д |
|
ĠÑĤ в |
|
Ð ļ |
|
ĠÑģ ÑĤо |
|
ĠбÑĭ л |
|
ĠÑħ оÑĩ |
|
ĠбÑĥд еÑĤ |
|
Ġи Ñħ |
|
е Ñī |
|
ÑģÑĤв о |
|
Ñĥ да |
|
Ġи ли |
|
ан ов |
|
ĠвÑĢем Ñı |
|
Ġг од |
|
Ġв од |
|
Ñı д |
|
ан ÑĤ |
|
ож е |
|
Ñı н |
|
Ġп оÑĩемÑĥ |
|
Ġнад о |
|
Ġд еÑĤ |
|
Ñĭ н |
|
Ġз ам |
|
ĠÑħ оÑĢоÑĪ |
|
ам а |
|
д еÑĤ |
|
иÑĤÑĮ ÑģÑı |
|
Ñı л |
|
ÑĢ аÑĤ |
|
!! ! |
|
ĠÑĥ д |
|
ĠÑģ ов |
|
ан ие |
|
аÑĤ елÑĮ |
|
Ġв ам |
|
Ġл и |
|
Ġд Ñĥм |
|
ĠмÑĥж Ñĩ |
|
еÑĢ ж |
|
ĠÑĤ ел |
|
ĠÑģм оÑĤÑĢ |
|
иÑĢ ов |
|
ĠоÑĩ енÑĮ |
|
аеÑĤ е |
|
Ġмож но |
|
аÑİÑĤ ÑģÑı |
|
Ġз ав |
|
Ġв аÑĪ |
|
Ġг де |
|
ĠÐĿ о |
|
л ад |
|
Ġо ÑģÑĤ |
|
ÑĥÑĤ ÑĮ |
|
г ÑĢ |
|
Ñĥ ÑģÑĤ |
|
Ġз на |
|
ĠпеÑĢ в |
|
Ð ł |
|
Ġб л |
|
Ġо к |
|
Ġз аб |
|
Ġк ол |
|
ĠÑģ оÑģ |
|
ÑĮ Ñİ |
|
ан иÑı |
|
Ġз ад |
|
ег од |
|
к ов |
|
к ом |
|
Ġп ов |
|
ĠÐł оÑģÑģ |
|
ÑĢ ов |
|
ал о |
|
ĠпÑĢ од |
|
ĠÐĴ оÑĤ |
|
ĠÑģ ек |
|
еÑģ Ñģ |
|
Ġв еÑĢ |
|
0 0 |
|
ĠвÑĭ п |
|
еп еÑĢÑĮ |
|
ĠпÑĢоÑģ ÑĤо |
|
ÑģÑĤ и |
|
Ġмож еÑĤ |
|
Ñı в |
|
Ġн его |
|
еÑĢ в |
|
егод нÑı |
|
Ñ ij |
|
Ġа в |
|
н Ñĥл |
|
ин е |
|
ÑĨ а |
|
ĠÐŀ н |
|
ĠпоÑģ ле |
|
ĠÑĤ ÑĥÑĤ |
|
? ! |
|
ĠÑĥ в |
|
Ġн ед |
|
ай ÑĤе |
|
Ġжен а |
|
м оÑĤÑĢ |
|
и Ñİ |
|
аж е |
|
Ñı Ñī |
|
Ġп оз |
|
ĠпÑĢ ин |
|
м еÑĢ |
|
ĠÑģеб е |
|
аÑĢ ÑĤ |
|
Ġз в |
|
ĠÑĩ аÑģ |
|
Ġн Ñĥж |
|
Ġк Ñĥп |
|
Ñĩ аÑģ |
|
Ñĥд ÑĮ |
|
ÑĢ ед |
|
л ед |
|
аÑģ Ñģ |
|
ĠÑģ ид |
|
ĠкÑĢ аÑģ |
|
Ġпол ÑĥÑĩ |
|
иÑĩ еÑģк |
|
ĠÑĢ еÑĪ |
|
Ġд ав |
|
иÑĩ его |
|
ĠÑģÑĤ аÑĢ |
|
ов аÑĢ |
|
ĠÐŁ оÑĩемÑĥ |
|
Ġб аб |
|
ед ÑĮ |
|
ĠболÑĮ ÑĪе |
|
Ġм аÑĪ |
|
ÑĨи и |
|
Ñı з |
|
Ġж ив |
|
ĠÑĢ ÑĥÑģ |
|
ÑĢ о |
|
ĠÑģ дел |
|
иÑħ одиÑĤ |
|
ĠÐ ¨ |
|
Ġн оÑĩ |
|
ĠпоÑĤ ом |
|
ок ÑĤоÑĢ |
|
Ġн и |
|
Ñĩ еÑĢа |
|
Ġо Ñģ |
|
ÑģÑĤв ен |
|
Ġм ин |
|
Ġ H |
|
г и |
|
Ñĭв аеÑĤ |
|
Ġл ÑĥÑĩ |
|
Ġна ÑĢ |
|
ĠС ÑĤ |
|
л ив |
|
Ġ Ñĥб |
|
Ġз д |
|
ĠÐĺ з |
|
Ġ . |
|
ĠÐŀ ÑĤ |
|
Ñı Ñģ |
|
ĠÐļ огда |
|
ĠÑĤак ой |
|
ĠÑģеб Ñı |
|
... - |
|
ÑĢ ам |
|
ĠÐŁ оÑģ |
|
Ġо ÑĢ |
|
ÑĢа Ñĩ |
|
ик и |
|
ел Ñı |
|
Ġдев ÑĥÑĪ |
|
ел а |
|
об ÑĢ |
|
Ñĥ еÑĤ |
|
ĠÐ ¤ |
|
е ÑģÑı |
|
Ġк ÑĥÑĢ |
|
о Ñħ |
|
ĠпеÑĢ ед |
|
" , |
|
ĠÑĢ Ñĥ |
|
Ġ `` |
|
Ñĩ но |
|
Ġп ож |
|
ап а |
|
оÑĢ ÑĤ |
|
Ñĭ б |
|
Ñĥ в |
|
им и |
|
ей ÑĩаÑģ |
|
оÑģÑĤ и |
|
ÑĢа Ñī |
|
н ÑĮ |
|
ик а |
|
. .. |
|
ÑģÑĤÑĢ о |
|
ĠÑĤ оже |
|
ÑĢÑĥÐ · |
|
а ем |
|
Ñĭ ÑĢ |
|
Ġз ан |
|
Ð £ |
|
оÑĢ м |
|
ĠС к |
|
Ġк л |
|
ĠÑĥ Ñĩ |
|
еÑĤ а |
|
Ġб ÑĢ |
|
ĠÑģл ÑĥÑĩ |
|
ĠбÑĭ ÑĤÑĮ |
|
Ġк ажд |
|
енÑĮ к |
|
ĠÐŁ од |
|
ÑĨ е |
|
Ñģ л |
|
ег да |
|
Ġдом ой |
|
ĠÑĤв о |
|
ĠпÑĢ ов |
|
Ġгол ов |
|
ĠÐĴ Ñģе |
|
н Ñİ |
|
ол од |
|
|