o
    i.                     @   sN   d dl Z dg dfdg dfdg dfdg d	fgZe jd
edd ZdS )    Nux   τὸ 〈τῆς〉 φιλοσοφίας ἔργον ἔνιοί φασιν ἀπὸ ⟦βαρβάρων⟧ ἄρξαι.)u   τὸu   〈u   τῆςu   〉u   φιλοσοφίαςu   ἔργονu   ἔνιοίu
   φασινu   ἀπὸu   ⟦u   βαρβάρωνu   ⟧u   ἄρξαι.u   τὴν δὲ τῶν Αἰγυπτίων φιλοσοφίαν εἶναι τοιαύτην περί τε †θεῶν† καὶ ὑπὲρ δικαιοσύνης.)u   τὴνu   δὲu   τῶνu   Αἰγυπτίωνu   φιλοσοφίανu   εἶναιu   τοιαύτηνu   περίu   τε   †u	   θεῶνr   u   καὶu
   ὑπὲρu   δικαιοσύνηςr   uL   ⸏πόσις δ' Ἐρεχθεύς ἐστί μοι σεσωσμένος⸏)   ⸏u
   πόσιςu   δ'u   Ἐρεχθεύςu	   ἐστίu   μοιu   σεσωσμένοςr   u   ⸏ὔπνον ἴδωμεν⸎)r   u   ὔπνονu   ἴδωμενu   ⸎ztext,expected_tokensc                 C   s&   | |}dd |D }||ksJ d S )Nc                 S   s   g | ]}|j s|jqS  )is_spacetext).0tokenr   r   W/home/ubuntu/.local/lib/python3.10/site-packages/spacy/tests/lang/grc/test_tokenizer.py
<listcomp>   s    z&test_grc_tokenizer.<locals>.<listcomp>r   )grc_tokenizerr   expected_tokenstokens
token_listr   r   r
   test_grc_tokenizer   s   r   )pytestGRC_TOKEN_EXCEPTION_TESTSmarkparametrizer   r   r   r   r
   <module>   s    



	