stanfordNLP-start.py

!pip install stanfordnlp
import stanfordnlp
stanfordnlp.download('fa')
nlp = stanfordnlp.Pipeline(processors = "tokenize", lang="fa", models_dir=".")
str = "برای رفتن به سمرقند باید از خان‌های بی‌شمار گذشت"
doc = nlp(str)
for sent in doc.sentences:
  for wrd in sent.words:
    print(wrd.text)