BnPreprocessing 0.9

No project description provided

Bangla Preprocessor (BnPreprocessing)

This page gives a basic introduction to the package.

Installation:

pip install BnPreprocessing

In Python a Bangla Linga is typically written as:

Usage:

import BnPreprocessing as pp
s =  "আমরা কাজ করবো কিভাবে?😦😦 Document তৈরী করতে আমাদের সবাইকে কি করতে হবে? নিজেদের(গ্রুপ-৬ এর সবাই) মধ্যে  কাজ ভাগ করবো কেমনে?"
s = pp.remove_punc(s)
print(s)
s = pp.remove_nonBangla(s)
print(s)
s = pp.remove_emoticons(s)
print(s)
s = pp.remove_sw(s)
print(s)

Output:

আমরা কাজ করবো কিভাবে 😦😦 Document তৈরী করতে আমাদের সবাইকে কি করতে হবে  নিজেদের গ্রুপ   এর সবাই  মধ্যে  কাজ ভাগ করবো কেমনে 
আমরা কাজ করবো কিভাবে 😦😦  তৈরী করতে আমাদের সবাইকে কি করতে হবে  নিজেদের গ্রুপ   এর সবাই  মধ্যে  কাজ ভাগ করবো কেমনে 
আমরা কাজ করবো কিভাবে   তৈরী করতে আমাদের সবাইকে কি করতে হবে  নিজেদের গ্রুপ   এর সবাই  মধ্যে  কাজ ভাগ করবো কেমনে 
করবো কিভাবে তৈরী সবাইকে গ্রুপ সবাই করবো কেমনে

If you want to do all the preprocessings in one step:

Usage:

import BnPreprocessing as pp
s =  "আমরা কাজ করবো কিভাবে?😦😦 Document তৈরী করতে আমাদের সবাইকে কি করতে হবে? নিজেদের(গ্রুপ-৬ এর সবাই) মধ্যে  কাজ ভাগ করবো কেমনে?"
s = pp.remove_noise(s)
print(s)

Output:

করবো কিভাবে তৈরী সবাইকে গ্রুপ সবাই করবো কেমনে