o
    авi  у                   @   s.   d dl Z ddД Ze jаdddgбddД ГZdS )	щ    Nc                 C   s    d}| |Г}t |ГdksJ Вd S )Nu(  рдореИрд▓реЗ рдкрд╛рдПрдХреЛ рд╕рд░реНрдЯрд┐рдлрд┐рдХреЗрдЯрд▓рд╛рдИ рдо рдд рдмреЛрдХреНрд░реЛ рд╕рдореНрдЭрдиреНрдЫреБ рд░ рдЕрднреНрдпрд╛рд╕ рддрдм рд╕реБрд░реБ рднрдпреЛ, рдЬрдм рдореИрд▓реЗ рдХрд▓реЗрдЬ рдкрд╛рд░ рдЧрд░реЗрдБ рд░ рдЬреАрд╡рдирдХреЛ рдкрдврд╛рдЗ рд╕реБрд░реБ рдЧрд░реЗрдБ редщ   й┌len)┌ne_tokenizer┌text┌tokensй r   ·Q/home/ubuntu/.local/lib/python3.10/site-packages/spacy/tests/lang/ne/test_text.py┌$test_ne_tokenizer_handlers_long_text   s   r
   ztext,length)uK   рд╕рдордп рдЬрд╛рди рдХрддрд┐ рдкрдирд┐ рдмреЗрд░ рд▓рд╛рдЧреНрджреИрди редщ   )u1   рдо рдареВрд▓реЛ рд╣реБрдБрджреИ рдерд┐рдПрдБ редщ   c                 C   s   | |Г}t |Г|ksJ Вd S )Nr   )r   r   ┌lengthr   r   r   r	   ┌test_ne_tokenizer_handles_cnts
   s   r   )┌pytestr
   ┌mark┌parametrizer   r   r   r   r	   ┌<module>   s     