Basic nlp for thai
Project description
เครื่องมือ NLP สำหรับภาษาไทย
include
- Token Identification: ระบุชนิด Token ข้อความภาษาไทย
- PmSeg: หาขอบเขตของ pseudo morpheme
- Pos tagging: Tag part of speech(pos) ระดับ pseudo morpheme และ ระดับคำ
- Spelling corrector: แก้ไขคำผิด
- Find Similarity Terms: ค้นหา Terms/Words ที่เขียนผิดหรือคล้ายกันในเอกสาร
Colab
https://colab.research.google.com/drive/1G7OUNsCC-B5XHNd8V5Et1ZKpJp4R66hg
Update
0.5.3, 0.5.2
- แก้ bug FindSimilarityTerms: เปลี่ยนชื่อ find_timilarity_terms เป็น find_similarity_terms
0.5.1
- เพิ่ม library FindSimilarityTerms
0.4.2
- แก้ bug TokenIdentification: E-mail regular expression
0.4.1
- แก้ bug TokenIdentification: Tag จากไฟล์ให้ถูกต้องมากขึ้น
0.3.7
- แก้ correction ใน spelling ในกรณีที่ค่า prop เท่ากันให้พิจารณาโดยใช้ Tri-gram
0.3.5
- เพิ่ม library spelling
0.3.4
- แก้ function get_ps แบบสั้น ไม่ต้องใส่ textInput=
0.3.3
- แก้ function get_ps ไม่ให้ new class ทุกครั้ง
- หลังจาก new class PmSeg() ต้องเรียกฟังก์ชั่น init_cls() เสมอ
- หลังจาก new class PosTag() ต้องเรียกฟังก์ชั่น init_cls() เสมอ
0.3.1
- เพิ่ม library POS Tagging
0.2.7
- Add wrap function get_ps
0.2.1
- เพิ่ม library Token Identification
Project details
Release history Release notifications | RSS feed
Download files
Download the file for your platform. If you're not sure which to choose, learn more about installing packages.
Source Distribution
basicthainlp-0.5.3.tar.gz
(35.7 MB
view details)
Built Distribution
File details
Details for the file basicthainlp-0.5.3.tar.gz
.
File metadata
- Download URL: basicthainlp-0.5.3.tar.gz
- Upload date:
- Size: 35.7 MB
- Tags: Source
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/5.1.1 CPython/3.11.9
File hashes
Algorithm | Hash digest | |
---|---|---|
SHA256 | d9a1dea2f664298a052f69456761b548ba10a32cd4e712b0645d2fbdffd4b38c |
|
MD5 | d47358df3887095d47046dd662209f09 |
|
BLAKE2b-256 | 225c052bcb32431a386c138e89aa13a8f3346fa5ca66b911c5a99208dec030a4 |
File details
Details for the file basicthainlp-0.5.3-py3-none-any.whl
.
File metadata
- Download URL: basicthainlp-0.5.3-py3-none-any.whl
- Upload date:
- Size: 35.8 MB
- Tags: Python 3
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/5.1.1 CPython/3.11.9
File hashes
Algorithm | Hash digest | |
---|---|---|
SHA256 | db3b47826755a216b02316378c73468a29ff5f7e5af465b3a4f762dd6795560b |
|
MD5 | ca88543bbb407f257b0cf0dbc49aa237 |
|
BLAKE2b-256 | d118f5648fb149c3d34c145ae3139d2ed23b7f5779e517513560a928ccf5b7fc |