IMPLEMENTASI DATA PIPELINE UNTUK MENDUKUNG PROSES VISUALISASI LAPORAN AKADEMIK (Studi Kasus: SIAKAD UTM)

Dalam era transformasi digital, perguruan tinggi dituntut mampu menyediakan informasi akademik secara cepat, akurat, dan efisien untuk mendukung proses evaluasi serta pengambilan keputusan. Sistem Informasi Akademik (SIAKAD) Universitas Trunojodyo Madura masih menghadapi kendala berupa tingginya beban kerja pada database operasional akibat aktivitas transaksi dan kebutuhan analisis dilakukan pada sistem yang sama. Penelitian ini bertujuan mengimplementasikan data pipeline dan data warehouse untuk mendukung visualisasi laporan akademik sekaligus mengurangi beban pada sistem operasional. Metode yang digunakan adalah pendekatan ELT (Extract, Load, Transform) dengan MySQL sebagai sumber data operasional, Meltano untuk proses extract dan load, dbt untuk transformasi data, PostgreSQL sebagai data warehouse, dan Grafana sebagai media visualisasi dashboard. Pengujian kualitas data dilakukan menggunakan dbt melalui pengujian not null, unique, relationships, accepted values, serta validasi data sampel untuk memastikan konsistensi dan keakuratan data. Selain itu, benchmark testing menggunakan k6 dilakukan melalui skenario load test, spike test, soak test, dan stress test guna membandingkan performa MySQL dan PostgreSQL dalam menangani query analitik. Hasil penelitian menunjukkan bahwa implementasi data pipeline berhasil menjaga kualitas data dan meningkatkan efisiensi penyajian informasi akademik. PostgreSQL sebagai data warehouse juga menunjukkan performa yang lebih stabil dibandingkan akses langsung ke database operasional, sehingga mampu mengurangi beban sistem utama SIAKAD dan mendukung pengambilan keputusan yang lebih cepat dan terstruktur.