Posisi Pekerjaan
Data EngineerTentang AME Group
AME Group adalah perusahaan global di bidang analitik data dan riset. Kami menyediakan keahlian teknis, analisis pasar, dan riset mendalam pada sektor material. Cakupan kami meliputi energi terbarukan, transisi energi, logam, serta emisi karbon untuk sektor energi dan infrastruktur. AME memiliki struktur manajemen yang fleksibel dan mendorong kolaborasi luas di seluruh perusahaan.
Tim kami yang terdiri dari para insinyur, ekonom, ilmuwan, ahli keuangan, dan programmer menghasilkan riset independen berkelas dunia. Kami berfokus pada detail teknis dalam rekayasa lapangan dan analisis pasar. Pemerintah, LSM, manajer investasi, produsen primer, serta sektor keuangan menggunakan analisis dan platform riset kami untuk mendorong perubahan teknologi, merencanakan proyek greenfield, dan mengembangkan ekspansi fasilitas beremisi rendah.
Apa yang Kami Lakukan
- Mengembangkan kapabilitas riset di bidang energi terbarukan, logam baterai, komoditas transisi, dan sektor energi baru seperti hidrogen.
- Menganalisis proyek individu seperti pembangkit listrik tenaga surya, pertambangan, dan operasi infrastruktur untuk memberikan wawasan ekonomi dan perencanaan.
- Membangun model industri dan rekayasa plant serta membuat katalog data emisi karbon menggunakan publikasi teknis, data produksi, metrik finansial, survei, dan kunjungan lapangan.
Fokus Kami di 2025
Tahun ini, kami memprioritaskan kawasan Asia Tenggara, khususnya Indonesia. Kami sedang mendirikan kantor di Jakarta sebagai pusat regional dan sangat berharap dapat bekerja sama dengan para profesional Indonesia.
Tentang Posisi
Kami mencari Data Engineer yang akan merancang, mengimplementasikan, dan memelihara pipeline data yang andal untuk mengumpulkan dan memproses data dari berbagai API publik ke dalam blob storage dan lingkungan basis data terpusat. Anda akan memegang peran penting dalam memastikan data diambil secara efisien, ditransformasi dengan baik, dan tersedia untuk analisis serta pelaporan lanjutan.
Peran ini melibatkan pekerjaan dengan pipeline ETL berbasis Python, orkestrasi workflow (Apache Airflow atau setara), serta solusi penyimpanan cloud (misalnya Azure Blob Storage).
Tanggung Jawab Utama
- Merancang dan mengimplementasikan pipeline ETL/ELT yang kuat untuk mengekstrak data dari berbagai API publik dan memuatnya ke dalam blob storage serta database relasional.
- Membangun dan mengelola workflow terjadwal menggunakan tools seperti Apache Airflow (atau sejenisnya).
- Menangani integrasi API yang kompleks, alur autentikasi (OAuth2, API keys), paginasi, dan pembatasan permintaan (rate limiting).
- Menata data di blob storage (misalnya Azure Blob) agar dapat diakses dengan efisien untuk proses selanjutnya.
- Mentransformasi dan memuat data ke dalam database SQL terstruktur untuk analitik dan kebutuhan aplikasi web.
- Mengimplementasikan monitoring, logging, dan validasi guna memastikan integritas data dan keandalan pipeline.
- Bekerja sama dengan data scientist dan software developer untuk memastikan ketersediaan dan kegunaan data.
- Menyusun dokumentasi yang jelas mengenai sumber data, transformasi, dan logika orkestrasi.
Kualifikasi
- Gelar Sarjana di bidang Ilmu Komputer, Data Engineering, atau bidang terkait (atau pengalaman yang setara).
- Minimal 3 tahun pengalaman dalam membangun data pipeline di lingkungan produksi.
- Pemahaman kuat mengenai arsitektur ETL/ELT, pengambilan data melalui API, dan prinsip pemodelan data.
- Pengalaman dengan Azure.
Keahlian Teknis:
- Bahasa Pemrograman: Python (utama), SQL (Microsoft T-SQL)
- Orkestrasi: Apache Airflow atau sejenisnya
- Integrasi RESTful API (autentikasi, paginasi, penanganan error)
- Azure Blob Storage
- Familiar dengan version control (Git) dan pipeline CI/CD
Nilai Tambah
- Pengalaman mengintegrasikan data dari API ekonomi dan finansial terbuka (misalnya World Bank, IMF, OECD, UN Data, FRED)
- Familiar dengan dataset besar terstruktur dan semi-terstruktur (JSON, CSV, Parquet) beserta pertimbangan performanya
- Pengalaman membangun pipeline pengambilan data incremental atau Change Data Capture (CDC)
Soft Skills
- Kemampuan analitis dan pemecahan masalah yang kuat
- Kemampuan komunikasi yang jelas dalam menjelaskan konsep teknis kepada pihak non-teknis
- Ketelitian dan akurasi data
- Pendekatan proaktif dalam monitoring
Apa yang Kami Tawarkan
- Kantor modern di lokasi strategis dekat transportasi umum dan fasilitas utama
- Gaji yang kompetitif
Lokasi Pekerjaan:
Gaji:
IDRCara Melamar Pekerjaan:
Metode Pelamaran: website
Informasi Kontak: https://aus.amegroup.com/careers?p=4TZ3zO38OWMrEo6leeXYl80YAbYIJZwFKWpb6xDF%2Beo%3D