Untitled

 avatar
unknown
plain_text
9 days ago
195 B
4
Indexable
import nltk

nltk.download('punkt')  # Pobranie danych do tokenizacji

text = "To jest przykładowy tekst. Adam Nowak mieszka w Warszawie."
tokens = nltk.word_tokenize(text)

print(tokens)
Editor is loading...
Leave a Comment