Junior Data Engineer
Pengiklan Anonim · Indonesia ·
- Seniority
- Junior
- Category
- Data engineering
Junior Data Engineer in Indonesia who extracts and scrapes text data from PDF, Excel, Word, and other sources, then cleans, transforms, and loads it into databases via automated pipelines, ensuring data quality — with exposure to pgVector and big-data tools like Hadoop and Spark.
Melakukan ekstraksi data teks dari berbagai sumber dan format, seperti PDF, Excel, Word, dan dokumen lainnya.
Melakukan scraping data dari berbagai sumber sesuai dengan kebutuhan proyek.
Melakukan pengolahan, pembersihan, dan transformasi data teks ke dalam format yang sesuai dengan kebutuhan.
Melakukan penyimpanan data yang telah diolah ke dalam database yang ditentukan.
Membangun dan mengotomatisasi pipeline data untuk mendukung proses pembaruan data secara berkala maupun otomatis.
Memastikan kualitas, akurasi, dan konsistensi data selama proses ekstraksi hingga penyimpanan.
Memiliki pengalaman kerja minimal 1-2 tahun sebagai Data Engineer atau pada posisi yang relevan.
Memiliki pemahaman yang kuat mengenai berbagai format file, seperti PDF, Excel, Word, dan format lainnya, serta metode ekstraksi datanya.
Memiliki pengalaman dalam melakukan scraping, pengolahan, pembersihan, dan transformasi data teks.
Memiliki kemampuan analitis yang kuat serta perhatian terhadap detail.
Mampu melakukan troubleshooting dan debugging pada proses maupun pipeline data.
Memiliki pengetahuan mengenai vector database, khususnya pgVector, serta pengalaman dalam penggunaannya.
Memiliki pengalaman bekerja dengan data dalam skala besar (big data) serta tools terkait, seperti Hadoop, Spark, atau teknologi sejenis.