o  ¢imã@sLdZddlZdd„Zej dgd¢¡dd„ƒZej d gd ¢¡d d „ƒZdS) z9Test that longer and mixed texts are tokenized correctly.éNcCs d}||ƒ}t|ƒdksJ‚dS)Nu£Una taula amb grans gerres de begudes i palles de coloraines com a reclam. Una carta cridanera amb ofertes de tapes, paelles i sangria. Un cambrer amb un somriure que convida a seure. La ubicació perfecta: el bell mig de la Rambla. Però és la una del migdia d’un dimecres de tardor i no hi ha ningú assegut a la terrassa del local. El dia és rúfol, però no fa fred i a la majoria de terrasses de la Rambla hi ha poca gent. La immensa majoria dels clients -tret d’alguna excepció com al restaurant Núria- són turistes. I la immensa majoria tenen entre mans una gerra de cervesa. Ens asseiem -fotògraf i periodista- en una terrassa buida.é’©Úlen)Ú ca_tokenizerÚtextÚtokens©rúQ/home/ubuntu/.local/lib/python3.10/site-packages/spacy/tests/lang/ca/test_text.pyÚ#test_ca_tokenizer_handles_long_textsr z text,length))uPerquè va anar-hi?é)zEl cotxe dels veins.é)u “Ah no?â€r )u(Sí! "Anem", va contestar el Joan Carlesé )uVan córrer aprox. 10kmr )uLlavors perqué...é)uVull parlar-te'n demà al matíé)u!Vull explicar-t'ho demà al matírcCs||ƒ}t|ƒ|ks J‚dS)Nr)rrÚlengthrrrr Útest_ca_tokenizer_handles_cntssrz text,match) )Ú10T)Ú1T)z10,000T)z10,00T)z999.0T)ÚunT)ÚdosT)ubilióT)ÚgosF)ú,F)z1/2TcCs.||ƒ}t|ƒdks J‚|dj|ksJ‚dS)Nér)rÚlike_num)rrÚmatchrrrr Útest_ca_lex_attrs_like_number%sr)Ú__doc__Úpytestr ÚmarkÚ parametrizerrrrrr Ús þ þ