Welo Global
Wilayah: Eropa. Sumber lowongan: Jobicy. Lamar melalui halaman sumber.
Kami sedang mencari seorang Prompt Engineer yang bertanggung jawab atas alur kerja migrasi teknis ujung-ke-ujung (end-to-end) untuk mentransisikan templat ke LLM autorater. Perusahaan membutuhkan peran ini untuk menggunakan alat internal klien guna memanfaatkan teknik prompt engineering demi memaksimalkan kinerja model.
Tanggung Jawab:
- Memanfaatkan alat Automatic Prompt Generation (APG) untuk membuat prompt dasar untuk klaster templat induk-anak yang kompleks.
- Menjalankan dan mengawasi alat Automated Prompt Optimization (APO), meninjau hasil keluaran, dan menandai saat APO mencapai jalan buntu (deadlock) atau titik jenuh (plateau).
- Membuat draf, menguji, dan menyempurnakan prompt secara manual untuk mengarahkan arsitektur templat yang kompleks, mengatasi anti-pola, dan menangani kasus-kasus khusus (edge case) ketika alat yang ada kurang memadai atau rusak. Menyelesaikan skenario kasus khusus dengan merancang dan menyempurnakan prompt manual.
- Memantau uji coba shadowbot untuk memastikan ketidaksepakatan yang memadai (antara penilaian manusia dan LLM) terdaftar, dihasilkan, dan dilacak.
- Menjalankan versi prompt terhadap data emas (gold data) yang ditetapkan untuk terus mengukur kualitas autorater terhadap standar dasar tenaga manusia, menghitung metrik akurasi seperti skor F1, presisi, dan recall.
- Menyusun draf justifikasi kesiapan peluncuran teknis (Dokumentasi Sertifikasi Peluncuran) untuk tahap akhir.
****
Persyaratan:
- Keterampilan Bahasa: Fasih berbahasa ibu (native) dalam bahasa Prancis dan lancar berbahasa Inggris.
- Lokasi: Harus berbasis di Prancis.
- Pendidikan: Gelar Sarjana (Bachelor's), Magister (Master's), atau Doktoral (Doctorate) di bidang Ilmu Komputer, Data Science, Linguistik Komputasi, Interaksi Manusia-Komputer (HCI/Human-Computer Interaction), Ilmu Kognitif, atau bidang analitis terkait.
- Keahlian Prompt Engineering & AI: Pengalaman minimal 4 tahun sebagai Prompt Engineer. Pengalaman terbukti dalam melakukan penalaan (tuning) Large Language Models (LLMs) untuk keluaran terstruktur yang ketat, tugas klasifikasi kompleks, serta akrab dengan pembelajaran chain-of-thought dan few-shot learning.
- Analisis Data: Mahir dalam mengidentifikasi pola kesalahan, menganalisis kinerja model, serta menggunakan SQL atau alat analisis data lainnya.
- Kelincahan Teknis: Kemampuan untuk mempelajari dan menguasai alat milik perusahaan dengan cepat dengan pengawasan minimal.
- Komunikasi: Keterampilan komunikasi lisan dan tulisan yang sangat baik.
Keterampilan Opsional / Diutamakan:
- Familiar dengan antarmuka LLM tingkat perusahaan seperti Goose API.
- Pengalaman dalam evaluasi model AI, data science, linguistik komputasi, atau software engineering.
- Pengalaman langsung dengan sistem Automated Prompt Optimization (APO) atau alur kerja penalaan.
- Keahlian di bidang linguistik, termasuk pemahaman tentang semantik dan logika.
Kompensasi
Informasi Tambahan
Untuk melamar pekerjaan ini, silakan kunjungi jobicy.com.