Deskripsi
Karya ini merupakan sistem otomasi data berbasis web scraping, yang dirancang untuk mengumpulkan, mengolah, dan menyajikan data Anggaran Pendapatan dan Belanja Daerah (APBD) seluruh kabupaten/kota di Indonesia secara terstruktur dan interaktif. Sistem ini dibangun menggunakan bahasa pemrograman Python untuk proses web scraping dari situs resmi DJPK Kementerian Keuangan RI, menyimpan hasilnya dalam database PostgreSQL, dan mengintegrasikan data tersebut ke dalam platform Power BI untuk visualisasi dashboard interaktif. Proses data juga mencakup tahapan ETL (Extract, Transform, Load) dan validasi data. Karya ini memungkinkan pengguna memperoleh insight terkait transparansi dan realisasi anggaran daerah melalui antarmuka dashboard yang intuitif. Dengan sistem ini, data anggaran publik menjadi lebih terbuka, mudah diakses, serta dapat dimanfaatkan untuk pengawasan masyarakat dan pengambilan kebijakan. Fitur Utama Scraping data APBD (2019tahun berjalan) secara otomatis dan masif dengan multithreading Penyimpanan dan manajemen data dalam PostgreSQL Proses ETL untuk transformasi dan normalisasi data Integrasi data ke Power BI untuk visualisasi pada level nasional, provinsi, dan kabupaten/kota Output berupa dashboard interaktif dan dinamis yang dapat dipublikasikan secara daring Komponen Teknis Bahasa Pemrograman Python Library BeautifulSoup, Requests, Pandas, psycopg2 Database PostgreSQL Visualisasi Power BI Output File CSV, struktur database, dan file .pbix (dashboard Power BI)
