Skip to main content

Manfaat Tokenizing

Manfaat Tokenisasi

Manfaat Tokenizing yaitu mempermudah dalam melakukan proses text mining, karena pada dasarnya Tokenizing merupakan tahap pertama yang harus dilalui sebelum melakukan tahapan selanjutnya pada text mining.
Dengan adanya pemisahan kata terlebih dahulu, string yang diinputkan akan terlihat lebih ringkas karena ditampilkan dalam bentuk tiap kata sesuai dengan spasi yang memisahkannya. 
Sehingga dengan adanya hal tersebut, akan lebih memudahkan dalam melakukan proses perubahan menjadi kata dasar atau sering disebut dengan filtering.

Popular posts from this blog

Pengertian Text Mining

Text mining memiliki definisi menambang data yang berupa teks dimana sumber data biasanya di dapatkan dari dokumen, dan tujuannya adalah mencari kata-kata yang dapat mewakili isi dari dokumen sehingga dapat dilakukan analisa keterhubungan antardokumen.

Sistem Temu Kembali

Ketika kita memasukkan query pada sebuah mesin pencari, baik itu mesin pencari di google.com, bing.com, yahoo.com dan lain sebagainya, kita mendapatkan hasil yang beragam atau tidak sama.  Suatu saat anda coba, dengan menuliskan keyword yang sama pada 3 search engine yang berbeda, maka hasil pencarianpun tidak sama bahkan jauh berbeda. Apa penyebabnya ?