Skip to main content

Manfaat Tokenizing

Manfaat Tokenisasi

Manfaat Tokenizing yaitu mempermudah dalam melakukan proses text mining, karena pada dasarnya Tokenizing merupakan tahap pertama yang harus dilalui sebelum melakukan tahapan selanjutnya pada text mining.
Dengan adanya pemisahan kata terlebih dahulu, string yang diinputkan akan terlihat lebih ringkas karena ditampilkan dalam bentuk tiap kata sesuai dengan spasi yang memisahkannya. 
Sehingga dengan adanya hal tersebut, akan lebih memudahkan dalam melakukan proses perubahan menjadi kata dasar atau sering disebut dengan filtering.

Popular posts from this blog

Pengertian Text Mining

Text mining memiliki definisi menambang data yang berupa teks dimana sumber data biasanya di dapatkan dari dokumen, dan tujuannya adalah mencari kata-kata yang dapat mewakili isi dari dokumen sehingga dapat dilakukan analisa keterhubungan antardokumen.

Pengertian Automatic Clustering

Clustering adalah proses membuat pengelompokan sehingga semua anggota dari setiap partisi mempunyai persamaan berdasarkan matrik tertentu. Sebuah cluster adalah sekumpulan objek yang digabung bersama karena persamaan atau kedekatannya.

Tokenizing, Tokenisasi

Sistem temu kembali adalah suatu sistem komputerisasi penemuan kembali dokumen yang telah dicari secara otomatis, biasanya dalam bentuk teks. Dalam dunia komputer ini, sistem temu kembali sangat dibutuhkan, terutama dalam pencarian dokumen baik pada online atau dunia maya maupun pada dunia offline.