MODUL EXTRACT, TRANSFORM, LOAD UNTUK DATA WAREHOUSE KOMODITAS PERTANIAN INDONESIA MENGGUNAKAN TALEND

Rina Trisminingsih, Intan Yuli Kiswari

Abstract


Kementerian Pertanian Indonesia menghimpun data hasil komoditas pertanian Indonesia dalam fail yang tidak saling terintegrasi. Solusi terbaik untuk melakukan integrasi data tersebut adalah data warehouse dengan proses extract, transform, load (ETL). Penelitian ini membangun ETL data warehouse hasil komoditas pertanian Indonesia yang memungkinkan praproses dan pembersihan data lebih cepat sebelum dimuat ke data warehouse. Pembangunan ETL diawali dengan merancang data warehouse  menggunakan skema bintang dan merancang pemodelan ETL untuk melakukan transformasi. Transformasi dilakukan dengan membagi fail menjadi header dan body file. Implementasi model transformasi dilakukan menggunakan tool Talend. Hasil pengujian transformasi menunjukkan bahwa proses ETL berjalan dengan baik. Pengujian nilai menunjukkan bahwa nilai keluaran pada DBMS dan operasi OLAP menghasilkan nilai yang sama dengan nilai masukan yang berasal dari fail masukan.

Kata Kunci : data warehouse, ETL, komoditas pertanian, Talend.

Full Text:

PDF 108-113

References


J. Han, M. Kamber, and J. Pei. Data Mining: Concepts and Techniques. Ed ke-3. Massachusetts (US): Morgan Kaufman, 2011.

F. Dwiprianti, “Online analytical processing (OLAP) berbasis web untuk tanaman hortikultura menggunakan Palo”, skripsi, Departemen Ilmu Komputer, Institut Pertanian Bogor, Bogor (ID), 2015.

E.R. Permana ER. “Aplikasi online analytical processing (OLAP) berbasis web dari data tanaman hortikultura menggunakan SpagoBI”, skripsi, Departemen Ilmu Komputer, Institut Pertanian Bogor, Bogor (ID), 2015.

A. Amborowati, “Analisis faktor – faktor yang mempengaruhi proses ETL pada data warehouse” dipresentasikan pada Seminar Nasional Teknik Informatika, UPN Veteran Yogyakarta, Yogyakarta, Indonesia, 2010 Mei 22

S.H.A. El-Sappagh, A.M. Hendawi, dan El-A.H. Bastawissy AH, “A proposed model for data warehouse ETL processes”. Journal of King Saud – Computer and Information Sciences. 23(2011): 91–104. doi:10.1016/j.jksuci.2011.05.005.

Vassiliadis P, Simitsis A, Skiadopoulos S. 2002. Conceptual modeling for ETL processes. 5th ACM International Workshop on Data Warehousing and

OLAP (DOLAP 2002); 2002 Nov 8; McLean, Virginia, USA. McLean (US): ACM. hlm 14-21.

R. Hartomo, “Modul extract, transform, dan load untuk data warehouse tanaman hortikultura menggunakan Kettle”, skripsi, Departemen Ilmu Komputer, Institut Pertanian Bogor, Bogor (ID), 2015.

Simitsis A. 2005. Mapping conceptual to logical model for ETL processes.

th ACM International Workshop on Data Warehousing and

OLAP (DOLAP 2005); 2005 Nov 4-5; Bremen, Jerman. Bremen (DE): ACM. hlm 67-76.

V. Gour, S.S. Sarangdevot, G.S. Tanwar, A. Sharma. “Improve performance of extract, transform and load (ETL) in data warehouse”. International Journal on Computer Science and Engineering (IJCSE) 02(03):786-789, 2010


Refbacks

  • There are currently no refbacks.