Basic nlp for thai
Project description
เครื่องมือ NLP สำหรับภาษาไทย
include
- Token Identification: ระบุชนิด Token ข้อความภาษาไทย
- PmSeg: หาขอบเขตของ pseudo morpheme
- Pos tagging: Tag part of speech(pos) ระดับ pseudo morpheme และ ระดับคำ
- Spelling corrector: แก้ไขคำผิด
- Find Similarity Terms: ค้นหา Terms/Words ที่เขียนผิดหรือคล้ายกันในเอกสาร
Colab
https://colab.research.google.com/drive/1G7OUNsCC-B5XHNd8V5Et1ZKpJp4R66hg
Update
0.5.2
- แก้ bug FindSimilarityTerms: เปลี่ยนชื่อ find_timilarity_terms เป็น find_similarity_terms
0.5.1
- เพิ่ม library FindSimilarityTerms
0.4.2
- แก้ bug TokenIdentification: E-mail regular expression
0.4.1
- แก้ bug TokenIdentification: Tag จากไฟล์ให้ถูกต้องมากขึ้น
0.3.7
- แก้ correction ใน spelling ในกรณีที่ค่า prop เท่ากันให้พิจารณาโดยใช้ Tri-gram
0.3.5
- เพิ่ม library spelling
0.3.4
- แก้ function get_ps แบบสั้น ไม่ต้องใส่ textInput=
0.3.3
- แก้ function get_ps ไม่ให้ new class ทุกครั้ง
- หลังจาก new class PmSeg() ต้องเรียกฟังก์ชั่น init_cls() เสมอ
- หลังจาก new class PosTag() ต้องเรียกฟังก์ชั่น init_cls() เสมอ
0.3.1
- เพิ่ม library POS Tagging
0.2.7
- Add wrap function get_ps
0.2.1
- เพิ่ม library Token Identification
Project details
Release history Release notifications | RSS feed
Download files
Download the file for your platform. If you're not sure which to choose, learn more about installing packages.
Source Distribution
basicthainlp-0.5.2.tar.gz
(35.7 MB
view details)
Built Distribution
File details
Details for the file basicthainlp-0.5.2.tar.gz
.
File metadata
- Download URL: basicthainlp-0.5.2.tar.gz
- Upload date:
- Size: 35.7 MB
- Tags: Source
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/5.1.1 CPython/3.11.9
File hashes
Algorithm | Hash digest | |
---|---|---|
SHA256 | 5f9c75e321ac210462d7feb5ca6643dcdfcd08a7b0661346534343aa578253ea |
|
MD5 | 3cf6efa8f0075682b5ff828febcf5099 |
|
BLAKE2b-256 | 7aa3d2ed53811783f771119c988a7147ce883906c3009031ebf6c024ebfcd89f |
File details
Details for the file basicthainlp-0.5.2-py3-none-any.whl
.
File metadata
- Download URL: basicthainlp-0.5.2-py3-none-any.whl
- Upload date:
- Size: 35.8 MB
- Tags: Python 3
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/5.1.1 CPython/3.11.9
File hashes
Algorithm | Hash digest | |
---|---|---|
SHA256 | 3e542d52beaace0664ff095c018e205403445d5f41b449bd164f5fd8c58c47a2 |
|
MD5 | 0950f53d6d266853cb6883b4d2c735b2 |
|
BLAKE2b-256 | 11948055c93ae7176627539ad17635b25d1314d3df6394ff0019d19e8efd9ae5 |