pip install bnltk
from bnltk.tokenize import Tokenizerst = Tokenizers()print(t.bn_word_tokenizer('আজ আবহাওয়া খুব ভালো।'))
# ["আজ", "আবহাওয়া", "খুব", "ভালো", "।"]
from bnltk.stemmer import BanglaStemmerbn_stemmer = BanglaStemmer()print(bn_stemmer.stem('হেসেছিলেন'))
# হাসা
For using the Parts of Tagger you need to download some data files as follows:
from bnltk.bnltk_downloads import DataFilesDataFiles.download()
After successfully downloading the files, then you can use this module.
from bnltk.pos_tagger import PosTaggerp_tagger = PosTagger()print(p_tagger.tagger('দুশ্চিন্তার কোন কারণই নাই'))
# [('দুশ্চিন্তার', 'NC'), ('কোন', 'JQ'), ('কারণই', 'NC'), ('নাই', 'VM')]
from bnltk.tokenize import Tokenizerst = Tokenizers()print(t.bn_word_tokenizer('আজ আবহাওয়া খুব ভালো।'))
# ["আজ", "আবহাওয়া", "খুব", "ভালো"]
from bnltk.stemmer import BanglaStemmerbn_stemmer = BanglaStemmer()print(bn_stemmer.stem('হেসেছিলেন'))
# হাসা
For using the Parts of Tagger you need to download some data files as follows:
from bnltk.bnltk_downloads import DataFilesDataFiles().download()
After successfully downloading the files, then you can use this module.
from bnltk.pos_tagger import PosTaggerp_tagger = PosTagger()p_tagger.loader()print(p_tagger.tagger('দুশ্চিন্তার কোন কারণই নাই'))
# [('দুশ্চিন্তার', 'NC'), ('কোন', 'JQ'), ('কারণই', 'NC'), ('নাই', 'VM')]