o
     ¢ië  ã                   @   s:   d dl Z dg d¢fdg d¢fgZe j de¡dd„ ƒZdS )	é    NuÏ   Eftir lÃ¸gtingslÃ³g um samsÃ½ning og eftirlÃ¸n landsstÃ½rismanna v.m., skulu lÃ¸gmaÃ°ur og landsstÃ½rismenn vanliga siga frÃ¡ sÃ¦r stÃ¸rv Ã­ almennari tÃ¦nastu ella privatum virkjum, samtÃ¸kum ella stovnum. )ÚEftiru   lÃ¸gtingslÃ³gÚumu
   samsÃ½ningÚogu	   eftirlÃ¸nu   landsstÃ½rismannazv.m.ú,Úskuluu
   lÃ¸gmaÃ°urr   u   landsstÃ½rismennÚvanligaÚsigaõ   frÃ¡u   sÃ¦ru   stÃ¸rvõ   Ã­Ú	almennariu   tÃ¦nastuÚellaÚprivatumÚvirkjumr   u	   samtÃ¸kumr   ÚstovnumÚ.u‹   Sambandsflokkurin gongur aftur viÃ° 2,7 prosentum Ã­ mun til valiÃ° Ã­ 1994, tÃ¡ flokkurin fekk undirtÃ¸ku frÃ¡ 23,4 prosent av veljarunum.)ÚSambandsflokkurinÚgongurÚafturu   viÃ°z2,7Ú	prosentumr
   ÚmunÚtilu   valiÃ°r
   Ú1994r   u   tÃ¡Ú	flokkurinÚfekku
   undirtÃ¸kur	   z23,4ÚprosentÚavÚ
veljarunumr   ztext,expected_tokensc                 C   s&   | |ƒ}dd„ |D ƒ}||ksJ ‚d S )Nc                 S   s   g | ]}|j s|j‘qS © )Úis_spaceÚtext)Ú.0Útokenr   r   úV/home/ubuntu/.local/lib/python3.10/site-packages/spacy/tests/lang/fo/test_tokenizer.pyÚ
<listcomp>   s    z=test_fo_tokenizer_handles_exception_cases.<locals>.<listcomp>r   )Úfo_tokenizerr   Úexpected_tokensÚtokensÚ
token_listr   r   r"   Ú)test_fo_tokenizer_handles_exception_cases   s   r(   )ÚpytestÚFO_TOKEN_EXCEPTION_TESTSÚmarkÚparametrizer(   r   r   r   r"   Ú<module>   s    þþù