L4 Pencipta.

Produk gagal paling sering karena menyelesaikan masalah yang tidak ada. Dengarkan calon pengguna dulu. AI hanya alat untuk menyelesaikan masalah yang sudah terbukti nyata.

Kumpulan 20-50 contoh input beserta jawaban yang diharapkan. Setiap kali prompt atau model diganti, jalankan ulang eval set supaya kamu tahu hasilnya membaik atau memburuk, bukan sekadar merasa.

Cara menilai jawaban. Exact match untuk jawaban pasti (kategori, angka). LLM-as-judge untuk jawaban bebas, yaitu model lain menilai pakai rubrik yang kamu tulis. Cek juga sebagian hasil secara manual.

Naik anak tangga hanya kalau yang bawah tidak cukup: prompt yang lebih baik, lalu RAG (sisipkan dokumen), lalu fine-tune ringan seperti LoRA, lalu distilasi ke model kecil. Makin tinggi, makin mahal dan makin repot dirawat.

Model berbayar dihitung per token masuk dan keluar. Biaya kasar = jumlah permintaan x token per permintaan x harga per token. Harga berubah cepat, jadi selalu ambil angka dari halaman harga resmi.

Model yang bobotnya bisa diunduh dan dijalankan di laptop sendiri, misalnya lewat Ollama. Data tidak keluar dari perangkat dan tanpa biaya per token, tapi kualitas dan kecepatan tergantung perangkatmu.