​
Mengakses Fitur Evaluate

Untuk memulai dengan alat Evaluasi:
  1. Buka Claude Console dan navigasikan ke editor prompt.
  2. Setelah menyusun prompt Anda, cari tab ‘Evaluate’ di bagian atas layar.
Mengakses Fitur Evaluate
Pastikan prompt Anda menyertakan setidaknya 1-2 variabel dinamis menggunakan sintaks kurung kurawal ganda: {{variable}}. Ini diperlukan untuk membuat set tes eval.

​
Menghasilkan Prompt

Console menawarkan generator prompt bawaan yang didukung oleh Claude Opus 4.1:
1

Klik 'Generate Prompt'

Mengklik alat bantu ‘Generate Prompt’ akan membuka modal yang memungkinkan Anda memasukkan informasi tugas Anda.
2

Deskripsikan tugas Anda

Deskripsikan tugas yang Anda inginkan (misalnya, “Triase permintaan dukungan pelanggan masuk”) dengan detail sebanyak atau sesedikit yang Anda inginkan. Semakin banyak konteks yang Anda sertakan, semakin Claude dapat menyesuaikan prompt yang dihasilkannya dengan kebutuhan spesifik Anda.
3

Hasilkan prompt Anda

Mengklik tombol oranye ‘Generate Prompt’ di bagian bawah akan membuat Claude menghasilkan prompt berkualitas tinggi untuk Anda. Anda kemudian dapat lebih meningkatkan prompt tersebut menggunakan layar Evaluasi di Console.
Fitur ini memudahkan pembuatan prompt dengan sintaks variabel yang sesuai untuk evaluasi. Generator Prompt

​
Membuat Kasus Uji

Ketika Anda mengakses layar Evaluasi, Anda memiliki beberapa opsi untuk membuat kasus uji:
  1. Klik tombol ’+ Add Row’ di kiri bawah untuk menambahkan kasus secara manual.
  2. Gunakan fitur ‘Generate Test Case’ untuk membuat Claude secara otomatis menghasilkan kasus uji untuk Anda.
  3. Impor kasus uji dari file CSV.
Untuk menggunakan fitur ‘Generate Test Case’:
1

Klik pada 'Generate Test Case'

Claude akan menghasilkan kasus uji untuk Anda, satu baris pada satu waktu untuk setiap kali Anda mengklik tombol.
2

Edit logika generasi (opsional)

Anda juga dapat mengedit logika generasi kasus uji dengan mengklik dropdown panah di sebelah kanan tombol ‘Generate Test Case’, kemudian pada ‘Show generation logic’ di bagian atas jendela Variables yang muncul. Anda mungkin harus mengklik `Generate’ di kanan atas jendela ini untuk mengisi logika generasi awal.Mengedit ini memungkinkan Anda menyesuaikan dan menyempurnakan kasus uji yang dihasilkan Claude dengan presisi dan spesifisitas yang lebih besar.
Berikut adalah contoh layar Evaluasi yang terisi dengan beberapa kasus uji: Layar Evaluasi Terisi
Jika Anda memperbarui teks prompt asli Anda, Anda dapat menjalankan ulang seluruh rangkaian eval terhadap prompt baru untuk melihat bagaimana perubahan mempengaruhi kinerja di semua kasus uji.

​
Tips untuk Evaluasi yang Efektif

Untuk memanfaatkan alat Evaluasi secara maksimal, strukturkan prompt Anda dengan format input dan output yang jelas. Misalnya:
Dalam tugas ini, Anda akan menghasilkan cerita satu kalimat yang lucu yang menggabungkan dua elemen: warna dan suara.
Warna yang akan disertakan dalam cerita adalah:
<color>
{{COLOR}}
</color>
Suara yang akan disertakan dalam cerita adalah:
<sound>
{{SOUND}}
</sound>
Berikut adalah langkah-langkah untuk menghasilkan cerita:
1. Pikirkan objek, hewan, atau pemandangan yang umumnya dikaitkan dengan warna yang diberikan. Misalnya, jika warnanya "biru", Anda mungkin memikirkan langit, lautan, atau burung biru.
2. Bayangkan tindakan sederhana, peristiwa atau pemandangan yang melibatkan objek/hewan/pemandangan berwarna yang Anda identifikasi dan suara yang diberikan. Misalnya, jika warnanya "biru" dan suaranya "siulan", Anda mungkin membayangkan burung biru yang bersiul sebuah lagu.
3. Deskripsikan tindakan, peristiwa atau pemandangan yang Anda bayangkan dalam satu kalimat yang ringkas. Fokus pada membuat kalimat tersebut lucu, menggugah dan imajinatif. Misalnya: "Seekor burung biru yang ceria bersiul melodi yang riang saat terbang melintasi langit biru."
Harap batasi cerita Anda hanya satu kalimat. Bertujuan untuk membuat kalimat tersebut semenarik dan menarik mungkin sambil secara alami menggabungkan warna dan suara yang diberikan.
Tulis cerita satu kalimat lengkap Anda di dalam tag <story>.
Struktur ini memudahkan untuk memvariasikan input ({{COLOR}} dan {{SOUND}}) dan mengevaluasi output secara konsisten.
Gunakan alat bantu ‘Generate a prompt’ di Console untuk dengan cepat membuat prompt dengan sintaks variabel yang sesuai untuk evaluasi.

​
Memahami dan membandingkan hasil

Alat Evaluasi menawarkan beberapa fitur untuk membantu Anda menyempurnakan prompt Anda:
  1. Perbandingan berdampingan: Bandingkan output dari dua atau lebih prompt untuk dengan cepat melihat dampak perubahan Anda.
  2. Penilaian kualitas: Nilai kualitas respons pada skala 5 poin untuk melacak peningkatan kualitas respons per prompt.
  3. Versioning prompt: Buat versi baru dari prompt Anda dan jalankan ulang rangkaian tes untuk dengan cepat beriterasi dan meningkatkan hasil.
Dengan meninjau hasil di seluruh kasus uji dan membandingkan versi prompt yang berbeda, Anda dapat melihat pola dan membuat penyesuaian yang tepat pada prompt Anda dengan lebih efisien. Mulai evaluasi prompt Anda hari ini untuk membangun aplikasi AI yang lebih kuat dengan Claude!