o q¦µiæã@s<dZddlmZddlmZddlmZGdd„deƒZdS) zParser for lemmatizationé)ÚCoNLL)Ú lemma_lookupé)ÚParserc@s eZdZdZdd„Zdd„ZdS)Ú LemmaParserz'This parser add pos tags for Urdu text.cCsdS)ÚpassN©)ÚselfÚconfigrrúS/home/ubuntu/.local/lib/python3.10/site-packages/urduhack/pipeline/parsers/lemma.pyÚ_set_up szLemmaParser._set_upcCsj|jD]/}t|jƒ}t|ƒt|jƒksJdƒ‚t||jƒD]\}}|d|jkr1t|tj|dƒqq|S)z%Function to normalize|preprocess textz Error in post tagsré) Ú sentencesrÚtextÚlenÚwordsÚzipÚsetattrrÚLEMMA)r ÚdocumentÚsentenceÚlemmasÚlemmaÚwordrrr Úparses  €þzLemmaParser.parseN)Ú__name__Ú __module__Ú __qualname__Ú__doc__r rrrrr r s rN)rÚurduhack.conllrÚ%urduhack.models.lemmatizer.lemmatizerrÚparserrrrrrr Ús