Pengembangan Aplikasi Alat Bantu Analisis Korelasi Data Faktual Dan Google Trends Untuk Monitoring / Surveillance

Abstract

Pada penelitian ini penulis melakukan pengembangan aplikasi analisis korelasi data faktual dan Google Trends untuk monitoring / surveillance menggunakan bahasa pemrograman PHP dengan memanfaatkan protocol HTTP request. Pengambilan data dari Google Trends dilakukan dengan menerapakan metode scraping dengan teknik API. Pada proses pembuatan terdapat beberapa masalah dikarenakan url yang digunakan bukan merupakan API yang diperuntukan untuk umum yaitu, data time series yang diskalakan, data harian yang terbatas dan kemungkinan server mengembalikan respon 429. Beberapa cara penulis lakukan untuk mengatasi masalah tersebut seperti dengan menerapkan sistem antrian dan proxy rotator. Tahap normalisasi data dilakukan terhadapa data yang diperoleh dari Google Trends sebelum proses perhitungan korelasi untuk mengatasi keterbatasan Google Trends dalam menyediakan data. Tahap terakhir dilakukan proses perhitungan korelasi menggunakan korelasi pearson.