IT Job Portal Scraping Project

IT Job Portal Scraping Project merupakan sistem automasi pengambilan data lowongan pekerjaan IT di Australia dari berbagai online job portals. Proyek ini bertujuan membangun dataset terstruktur yang dapat digunakan untuk analisis kebutuhan pasar kerja dan tren teknologi

Latar Belakang

Informasi lowongan kerja IT tersebar di berbagai platform seperti job portal komersial dan situs rekrutmen perusahaan. Setiap platform memiliki struktur data berbeda, mulai dari penamaan role, deskripsi pekerjaan, hingga requirement skill.

Tujuan Pengembangan

• Mengotomatisasi pengambilan data lowongan pekerjaan IT
• Menyatukan data dari berbagai job portal
• Menyediakan dataset untuk analisis tren pasar kerja
• Mendukung visualisasi dan pengambilan keputusan berbasis data

Workflow Sistem

Teknologi yang Digunakan

• Python (Requests, BeautifulSoup)
• Text Cleaning & Normalization
• MySQL Database
• Jupyter Notebook
• Git & GitHub

Dataset hasil scraping menjadi dasar utama untuk analisis tren IT Job Market dan visualisasi kebutuhan skill di Australia.