Perlombongan data

Perlombongan dataialah suatu proses menemukan corak dalamset databesar yang melibatkan persimpanganpembelajaran mesin,statistikdansistem pangkalan data.^[1]Proses penting ini menggunakan kaedah kecerdasan untuk memperoleh corak data.^[1]^[2]Ia merupakan subbidangsains komputeryang bersifat antara disiplin.^[1]^[3]^[4]

Proses ini bermatlamat memperoleh maklumat daripada set data seterusnya menukarkan maklumat tersebut menjadi suatu struktur yang mudah difahami untuk penggunaan selanjutnya.^[1]Proses perlombongan ini merupakan langkah menganalisis dalam proses penemuan pengetahuan dalam pangkalan data (knowledge discovery in databases,atau KDD).^[5]

Proses

"Proses penemuan pengetahuan dalam pangkalan data" ditakrifkan secara umumnya melalui langkah-langkah berikut:

Pemilihan (Selection)
Prapemprosesan (Pre-processing)
Penukaran (Transformation)
Perlombongan data
Pentafsiran atau penilaian (Interpretation/evaluation).^[5]

Prapemprosesan

Set data dunia sebenar lazimnya mengandungi pelbagai isu antaranya data tidak lengkap (incomplete data), data hingar (noise data) dan data tidak konsisten. Oleh itu langkah prapemprosesan data perlu dilaksanakan terlebih dahulu sebelum teknik perlombongan data diaplikasikan ke atas data tersebut. Secara umumnya tugas prapemprosesan data boleh dikategorikan kepada empat iaitu:

Pembersihan data
Integrasi data
Transformasi data
Pengurangan data

Langkah-langkah prapemprosesan data dilaksanakan secara berulang sehingga mencapai output yang dikehendaki dan tidak perlu menuruti jujukan langkah tertentu. Bahkan bukan kesemua langkah tersebut perlu dilaksanakan, sebaliknya ia bergantung kepada kualiti set data yang ingin diproses.

Perlombongan Data

Teknik perlombongan data boleh dikategorikan kepada dua iaitu:

Deskriptif - digunakan untuk mengesan pola yang menerangkan hubungan di antara atribut-atribut. Dua jenis teknik perlombongan data deskriptif:
- Pengelompokan (Clustering) - penemuan kelompok dan struktur dalam data yang sedikit sebanyak "serupa" tanpa mengunakan struktur yang diketahui dalam data
- Petua sekutuan (Association rule) - pencarian hubungan antara pemboleh ubah; sebagai contoh, tabiat pembelian pelangga
Peramalan - digunakan untuk meramal nilai suatu atribut berdasarkan nilai atribut-atribut yang lain. Dua jenis teknik perlombongan data peramalan:
- Klasifikasi(Classification) - digunakan untuk meramal atribut diskret
- Regresi (Regression) - digunakan untuk meramal atribut selanjar

Rujukan

^^a ^b ^c ^d"Data Mining Curriculum".ACM SIGKDD. 30 April 2006.Dicapai pada27 Januari2014.
^Han, Kamber, Pei, Jaiwei, Micheline, Jian (9 Jun 2011).Data Mining: Concepts and Techniques(ed. ke-3). Morgan Kaufmann.ISBN 978-0-12-381479-1.CS1 maint: multiple names: authors list (link)
^Clifton, Christopher (2010)."Encyclopædia Britannica: Definition of Data Mining".Dicapai pada12 September2010.
^Hastie, Trevor; Tibshirani, Robert; Friedman, Jerome (2009)."The Elements of Statistical Learning: Data Mining, Inference, and Prediction".Dicapai pada7 Ogos2012.
^^a ^bFayyad, Usama; Piatetsky-Shapiro, Gregory; Smyth, Padhraic (1996)."From Data Mining to Knowledge Discovery in Databases"(PDF).Dicapai pada17 Disember2008.

[acm-1] "Data Mining Curriculum".ACM SIGKDD. 30 April 2006.Dicapai pada27 Januari2014.

[2] Han, Kamber, Pei, Jaiwei, Micheline, Jian (9 Jun 2011).Data Mining: Concepts and Techniques(ed. ke-3). Morgan Kaufmann.ISBN 978-0-12-381479-1.CS1 maint: multiple names: authors list (link)

[brittanica-3] Clifton, Christopher (2010)."Encyclopædia Britannica: Definition of Data Mining".Dicapai pada12 September2010.

[elements-4] Hastie, Trevor; Tibshirani, Robert; Friedman, Jerome (2009)."The Elements of Statistical Learning: Data Mining, Inference, and Prediction".Dicapai pada7 Ogos2012.

[Fayyad-5] Fayyad, Usama; Piatetsky-Shapiro, Gregory; Smyth, Padhraic (1996)."From Data Mining to Knowledge Discovery in Databases"(PDF).Dicapai pada17 Disember2008.

[1]

[2]

[3]

[4]

[5]