o qit,@sdZddlmZddlmZmZmZmZmZddlm Z m Z ddl m Z m Z mZmZddZdd Zd d Zd d ZddZddZddZddZdS)zTest cases for character class) normalize)normalize_charactersCORRECT_URDU_CHARACTERSnormalize_combine_charactersCOMBINE_URDU_CHARACTERSreplace_digits)punctuations_spaceremove_diacritics)URDU_ALL_CHARACTERSURDU_ALPHABETS URDU_DIGITSURDU_DIACRITICScCs>d}t|}t|ts J|D] }|dkrq|tvsJqdS)z Testing main functionuJپاکستان ﻤﯿﮟ وسائل کی کوئی کمی نہیں ﮨﮯ۔ N)r isinstancestrr )textexpectedcharr_/home/ubuntu/.local/lib/python3.10/site-packages/urduhack/normalization/tests/test_character.pytest_normalize srcCspiddddddddd d d d d ddddddddddddddddddd d!d"id#d$d%d&d'd(d)d*d+d,d-d.d/d0d1d2d3d4d5d6d7d8d9d:d;d<d=d>d?d@dAdBdCdDidEdFdGdHdIdJdKdLdMdNdOdPdQdRdSdTdUdVdWdXdYdZd[d\d]d^d_d`dadbdcdddedfidgdhdidjdkdldmdndodpdqdrdsdtdudvdwdxdydzd{d|d}d~ddddddddddiddddddddddddddddddddddddddddddddddidddddddddddddddddddddddd“ddēddƓddȓddʓdd̓iddΓddГddғddԓdd֓ddؓddړddܓddޓddddddddddddddddddddddddddddd }|D]/\}}t|}||ksJ|D]}|dkrqt|dksJ|tvsJ|qqdS)z8Normalize characters Test case arabic words : Urdu wordsu ﻣﯿﺎﮞuمیاںu ﺗﮭﺎuتھاu ﻧﮩﯽuنہیuﺩﺭﺑﺎﻥu دربانu ﺷﺮﯾﮏuشریکu ﻭﺯﯾﺮuوزیرu ﮐﻮﻧﮯuکونےu ﺭﺍﺿﯽuراضیu ﻣﺠﮭuمجھu ﭼﮭﭙﺮuچھپرuﻧﻮﺟﻮﺍﻥu نوجوانu ﻣﻨﺰﻝuمنزلuﻟﮕﺎﺗﮯu لگاتےuﺟﻮﻧﻌﻤﺖu جونعمتuﻣﺴﻨﺪﻭﮞu مسندوںu ﭘﺎﮎuپاکuﻋﺎﻓﯿﺖu عافیتu ﺑﺬﺍﺕuبذاتu ﻧﮑﻠﻮuنکلوu ﭘﯿﺪﺍuپیداu ﺗﻮﮌﺍuتوڑاu ﮔﯿﺎuگیاu ﺧﯿﺮuخیرu ﺑﻌﺪuبعدu ﭼﺮﺑﯽuچربیuﺧﺎﻣﻮﺷﯽu خاموشیu ﮨﭩﮯuہٹےu ﺍﻭﻻﺩu اولادu ﺩﯾﻨﯽuدینیu ﭼﺎﮨﮯuچاہےu ﮐﮩﺎuکہاu ﺧﺎﻟﯽuخالیuﻣﺎﻧﮕﯿﮟu مانگیںu ﺭﮨﺘﮯuرہتےuﻣﻔﻠﺴﯽu مفلسیuﺩﺭﺑﺎﺭﯼu درباریuﺑﺘﺎﺋﯿﮟu بتائیںu ﮨﻤﺖuہمتu ﻣﺮﺩuمردu ﺩﻭﺳﺖuدوستuﻋﺎﺷﻘﻮu عاشقوu ﺟﻠﻮﮦuجلوہu ﺭﮨﺘﺎuرہتاuﮈﺍﮐﭩﺮu ڈاکٹرu ﺭﻫﺘﯽuرھتیu ﺍﯾﺴﮯuایسےu ﺻﺎﻑuصافuﺗﻌﻠﯿﻢu تعلیمu ﺁﭘﮑﺎuآپکاuﻣﺮﺩﺍﻥu مردانuﺣﺮﺍﻣﯽu حرامیuﻧﮑuنکuﺯﯾﺎﺩﮦu زیادہuﻧﻮﺟﻮﻥu نوجونu ﺧﺎﻧﮯuخانےuﺭﺍﮦ ﺳﮯu راہ سےuﻣﺤﺘﺮﻣﮧu محترمہuﺟﺎﻧﻮﺭu جانورuﻧﮯﺍﯾﮏu نےایکuﻣﺤﺒﻮﺏu محبوبu ﺧﻮﺵuخوشu ﺳﺎﺋﻞuسائلuﮐﺮuکرuﮐﮩﺎﮐﮧu کہاکہuﻧﺴﻮﺍﻧﯽu نسوانیuﮨﻤﯿﮟ ﺑﻬﯽuہمیں بھیuﺍﺭﺍﺩﮦ ﺑﺘﺎﯾﺎuارادہ بتایاu ﺑﺎﭖuباپu ﻟﮕﯿﮟuلگیںu ﺷﺨﺺuشخصuﺭﮨﺘﺎﮨﮯu رہتاہےu ﻗﺪﺭﺕuقدرتu ﻣﺮﺿﯽuمرضیuﮔﯿﺎﺍﻭﺭu گیااورu ﮐﭽﮫuکچھu ﻟﮑﮫuلکھu ﺍﻋﻈﻢuاعظمuﺷﺨﺼﯿﺖu شخصیتu ﺧﻼﻑuخلافu ﻏﯿﺮuغیرu ﺳﻮﺩuسودu ﺑﮩﺘﺮuبہترu ﻫﻮﺋﮯuھوئےu ﺳﻼﻣﺖu سلامتuﺭﺍﺑﻄﮧu رابطہu ﮨﻮﮔﯽuہوگیu ﻣﺮﺽuمرضu ﺳﻔﺮuسفرu ﻣﻔﺴﺮuمفسرu ﻧﺼﻒuنصفuﮨﻮﮞ ﺟﺲu ہوں جسuﭘﯿﭙﺮﺯu پیپرزuﺑﻦuبنuﮔﻨﮩﮕﺎﺭu گنہگارu ﺭﮨﯽuرہیuﻣuمuﺧﺎﻭﻧﺪu خاوندuﺩﮐﮭﺎﺗﺎu دکھاتاuﺟﺎﺳﮑﺘﮯu جاسکتےuﺣﻞuحلuﺗﺠﺮﺑﮧu تجربہuﮨﺎﺭﻧﮯu ہارنےu ﺳﺠﺎuسجاu ﺭﻭﻧﻖuرونقu ﺑﻨﻮﮞuبنوںu ﺳﮑﺘﯽuسکتیuﮐﮧ ﺭﺍﺳﺘﮯuکہ راستےu ﻭﺍﻟﯽuوالیuﺣﻔﺎﻇﺖu حفاظتuﺳﯿﺪﮬﺎu سیدھاuﺍﻭﻧﭩﻨﯽu اونٹنیu ﺟﺎﻧﮯuجانےu ﺑﻼﯾﺎu بلایاuﻓﺎﺋﺪﮦu فائدہu ﮔﺎﺋﮯuگائےu ﻻﮨﻮﺭu لاہورuﺑﭩﮭﺎﺅﮞu بٹھاؤںu اشیاﺀu اشیاءu کیلﺌےu کیلئےuباعث کیا خطاuحم مر کرتم کیا کرuکن فا یا کنuمر کر فائدہuتم کیا کروگنہگار مر کر موتuقریب) u باعﺚu كيا خطاuحم مر كرuتم كيا كرuكن فا يا كنuمر كر ﻓﺎﺋﺪﮦuتم كيا كروrrrruقريبrN)itemsrlenr wordskeyvalnormrrrrtest_normalize_characterss       !"#$%&'()*+,-./0123456789:;<=>?@ABCDEFGHIJKLMNOPQRSTUVWXYZ[\]^_`abcdefghijklmnopqrstuvw r#cCsttD]}|tvs JqtD]}|tvsJq tD] }|D]}|tvs&JqqtD] }|D]}|tvs6Jq.q*dS) Test case N)r rr valuesr )r_listr rrrtest_correct_urdu_characterss r'c CsZddddddddd }|D]\}}t|}||ksJ|D] }|tvs)J|qqd S) z Test caseuآزادuآپuآدھےuآجuآرامuجرأتu کوجرأتuأعظم)u آزادuآپu آدھےuآجu آرامu جرأتuکوجرأتu أعظمN)rrr rrrr!test_normalize_combine_characterss   r(cCstD]}t|dks J|D]}|tvsJqqtD]}t|dks&J|tvs,J|tvs2JqtD]\}}t|dksCJt|dksKJq7dS)r$rN)rrr r%rr)charsrr valuerrrtest_combine_urdu_characterss  r,cCsHdddddddddddd d d d }|D] \}}|t|ks!Jqd S)z Test casesہوتا۔ انہوںuہوتا، انہوں۔۔۔۔۔۔۔۔۔۔۔۔۔،،۔۔۔۔۔uہوتا ہے۔ ٹائپuہوتا ہے؟ ٹائپuہوتا ہے، ٹائپuہوتا ہے؟ ٹائپuہوتا ہے۔ ٹائپuہوتا ہے، ٹائپہوتا ہے، )r-uہوتا،انہوںr.r/uہوتا ہے ۔ ٹائپuہوتا ہے ۔ٹائپuہوتا ہے؟ٹائپuہوتا ہے،ٹائپuہوتا ہے ؟ٹائپuہوتا ہے ؟ ٹائپuہوتا ہے۔ٹائپuہوتا ہے ۔ ٹائپuہوتا ہے ، ٹائپr0N)rr)datar r+rrrtest_punctuations_spaces$r2c Csvddddddddd d d }|D]'\}}t|}||ksJ|D]}|tvs+J||d kr7|tvs7J|q!qd S)zremove_diacritics Test caseuاَبuشیرِ پنجابu اُوگولuاِیuاَباُوگلu شرِپنuاَاُاِیولuاَےu اُوشیرuاَو) uابuشیر پنجابu اوگولuایu اباوگلuشرپنu ااایولuاےu اوشیرuاوrN)rr r r rrrrtest_remove_diacriticss*  r3cCs0d}d}t||ks Jt|dd|ksJdS)z Test CaseuTسکیورٹی حکام کے مطابق جنوبی صوبے 550 میں رات گئےuWسکیورٹی حکام کے مطابق جنوبی صوبے ۵۵۰ میں رات گئےF)with_engN)r)eng_textur_textrrrtest_replace_digits sr7N)__doc__urduhackr urduhack.normalization.characterrrrrrrr urduhack.urdu_charactersr r r r rr#r'r(r,r2r3r7rrrrs