Sanyanggae LogoSanyanggae

🤖 AI dan teknologi

Menulis Prom LLM: Jelaskan Keperluan, Contoh dan Kriteria Penilaian

Susun input dan output tugasan, contoh serta kriteria penilaian, kemudian bandingkan hasil dalam keadaan yang sama.

사냥개 (Sanyanggae)Diterbitkan Dikemas kini 12 minit

Ini ialah terjemahan teks asal bahasa Korea. Teks asal bahasa Korea · Semakan terjemahan: Disemak oleh AI

Rajah penerangan tentang keperluan, input dan contoh, serta kriteria penilaian bagi prom LLM.
Rajah penerangan oleh Sanyanggae: keperluan, input dan contoh, serta kriteria penilaian.

Prom yang baik menerangkan dengan jelas tugasan yang diserahkan kepada model dan syarat kejayaannya. Menambahkan ungkapan tertentu tidak menjamin mutu jawapan meningkat beberapa kali ganda.

1. Tentukan input dan output terlebih dahulu

Contohnya, bagi pengelasan pertanyaan pelanggan, tentukan kategori, bahasa input dan cara mengendalikan kes kabur. “Catat keputusan, pihak bertanggungjawab dan tarikh akhir secara berasingan, dan tandakan maklumat yang tiada sebagai belum ditentukan” lebih mudah disemak daripada “Ringkaskan dengan baik.” Nilai format output dan ketepatan fakta secara berasingan.

2. Kriteria yang ditunjukkan oleh contoh

Contoh yang memasangkan input dengan hasil yang dikehendaki boleh menyampaikan kriteria tugasan. Jangan berikan contoh mudah sahaja; sertakan kes sempadan dan input dengan maklumat tidak mencukupi. Semak juga sama ada nama dan angka dalam contoh digunakan semula sebagai fakta bagi input baharu.

3. Cara membandingkan perubahan

Bandingkan versi prom menggunakan set input yang sama dan catat jenis kesilapan. Membezakan keciciran, maklumat rekaan dan kegagalan format memudahkan pencarian bahagian yang perlu diperbaiki. Penjelasan yang lebih panjang akibat galakan penaakulan tidak membuktikan ketepatan meningkat; asas hasil perlu disemak secara berasingan. Catat perubahan model, tetapan dan input juga supaya keadaan perbandingan dikekalkan.

4. Contoh menstrukturkan catatan mesyuarat

Bayangkan catatan mesyuarat rekaan berbunyi, “Kami sedang mempertimbangkan pelaksanaan pada hari Jumaat. Minsu akan menyemak status pelayan esok. Pengesahan jadual menunggu kelulusan Jiyeon.” Mengeluarkan tarikh pelaksanaan sebagai tarikh akhir yang telah disahkan mengubah makna penting walaupun ayatnya kemas. Tetapkan tugasan sebagai “Catat tindakan yang disahkan berasingan daripada cadangan”, dan tentukan medan tindakan, pihak bertanggungjawab, tarikh akhir, status serta bukti. Tambahkan peraturan supaya tidak meneka pihak atau tarikh yang tiada dalam catatan.

Hasil yang dikehendaki membezakan Minsu sebagai pihak yang menyemak pelayan, esok sebagai tarikh akhirnya, dan menunggu kelulusan sebagai status jadual pelaksanaan. Tanpa tarikh hari ini sebagai input, tiada asas menukar “esok” kepada tarikh tertentu. Berikan tarikh rujukan dalam prom atau tetapkan bahawa tarikh relatif asal dikekalkan. Pihak bagi pelaksanaan yang tidak dinyatakan mesti kekal belum ditentukan. Ini latihan menetapkan kriteria output, bukannya petikan rekod syarikat sebenar atau prestasi eksperimen.

Prom lebih mudah disemak apabila skop input dan peraturan transformasinya dinyatakan, bukan hanya ayat peranan seperti “Anda pembantu yang cemerlang.” Misalnya, minta, “Gunakan catatan berikut sahaja, jangan tukarkan cadangan menjadi keputusan yang disahkan, dan sertakan ayat sokongan di sebelah setiap tindakan.” Tujuannya membolehkan manusia menyemak padanan catatan dengan hasil, bukan menilai sama ada penjelasan jawapan kedengaran meyakinkan sahaja.

5. Asingkan kes sempadan daripada arahan dalam teks luar

Bagi pengelasan, pertimbangkan ayat yang mencampurkan pertanyaan bayaran balik dengan kelewatan penghantaran. Jika tidak dinyatakan sama ada satu kategori sahaja atau beberapa kategori dibenarkan, penilai mungkin berbeza pendapat tentang jawapan betul. “Tiada kategori sepadan” juga berbeza daripada “input tidak mencukupi”. Memisahkan maksud yang difahami tetapi tidak sesuai dengan jadual pengelasan daripada input yang kekurangan maklumat untuk menentukan maksud memperjelas pengendalian seterusnya.

Contoh bukan sekadar menyampaikan jawapan betul, malah menerangkan sempadan ini. Daripada menambah banyak ayat mudah tentang penghantaran, cuba ayat yang melibatkan dua kategori bercanggah, ayat dengan kesilapan ejaan, dan ucapan salam tanpa permintaan. Sebaliknya, pembetulan diperlukan apabila contoh terlalu panjang sehingga peraturan utama tenggelam, atau nama khasnya bercampur dalam input baharu. Baca penerangan tugasan dan contoh untuk memastikan kedua-duanya tidak bercanggah.

Semasa meringkaskan dokumen, ayat seperti “Abaikan arahan sebelumnya” di dalam dokumen itu merupakan sebahagian bahan yang perlu diringkaskan. Pembatas di sekeliling input memudahkan pembacaan sempadan, tetapi tidak dengan sendirinya menjadi benteng keselamatan yang menyekat serangan. Jika aplikasi boleh melakukan tindakan luar, kod di luar prom juga perlu menyemak kebenaran dan alat yang dibenarkan. Penulisan teks yang baik dan penetapan kebenaran sistem kedua-duanya diperlukan.

6. Betulkan jadual penilaian sebelum prom

Jadual penilaian kecil boleh mengandungi input, perkara utama yang dijangka, tekaan yang dilarang, output sebenar dan sebab kesilapan. Jika dua daripada sepuluh catatan mesyuarat menukar jadual belum disahkan kepada jadual pasti, cari dahulu keadaan yang dikongsi kedua-dua kes. Membetulkan takrif cadangan, menunggu kelulusan dan telah disahkan bersama contoh menghubungkan pembetulan terus dengan masalah, berbanding mengulang “Lebih berhati-hati.”

Menilai semula kes yang digunakan untuk pembetulan sahaja boleh menyebabkan kesan khusus kes disalah anggap sebagai peningkatan umum. Gunakan peraturan sama pada input yang disimpan berasingan dan semak keciciran baharu pada input mudah. Catat pematuhan format dan ketepatan fakta berasingan supaya JSON yang sah tidak menyembunyikan kesilapan kandungan. Jawapan salah yang memberikan alasan munasabah tetap dikira salah.

Makalah pembelajaran dengan beberapa contoh dan penggunaan proses penaakulan melaporkan kajian pada model serta tugasan tertentu. Itu bukan peraturan yang mewajibkan ungkapan pencetus sama pada setiap model terkini. Yang perlu dikekalkan ialah takrif kerja, contoh yang mewakili, pengendalian kekaburan dan kriteria penilaian boleh ulang, bukan kata sifat hiasan. Semak semula empat unsur ini apabila model atau format input berubah.

Kriteria penilaian juga perlu mencerminkan kepentingan kesilapan. Menukar susunan ayat dalam ringkasan mesyuarat tidak sama dengan mencipta pihak bertanggungjawab yang tidak wujud. Yang pertama mungkin soal cita rasa bacaan, tetapi yang kedua boleh menghasilkan arahan kerja salah. Membezakan medan yang wajib disemak manusia daripada medan yang boleh dihantar secara automatik ke langkah berikutnya turut menjelaskan tanggungjawab ketika hasil digunakan dalam kerja sebenar. Jangan abaikan semakan medan penting hanya kerana kesilapan jarang berlaku.

Apabila format output berubah, hubungkan semakan format dengan semakan makna. Menyemak medan tarikh tidak kosong hanya membuktikan nilai wujud. Sama ada tarikh itu terdapat dalam sumber atau ditukar dengan betul menggunakan tarikh rujukan ialah semakan lain. Jika medan wajib penghurai automatik bercanggah dengan medan yang model tidak boleh isi tanpa bukti, lebih baik mereka skema yang mewakili keadaan belum ditentukan daripada mewajibkan rentetan kosong.

Semasa berkongsi prom, anda boleh menulis input rekaan yang menghasilkan sempadan sama, bukannya menyalin contoh yang mengandungi maklumat peribadi sebenar. Semak sama ada nombor kontrak atau kejadian jarang masih boleh mengenal pasti seseorang selepas nama dibuang. Walaupun contoh cukup dinyahkenal, skop bahan yang dibenarkan dihantar ke model luar tetap perlu mematuhi peraturan pemprosesan organisasi. Dokumen prom yang baik mencatat contoh input serta skop tugasan yang sesuai dan yang tidak boleh menggunakannya.

Dalam semakan akhir, pastikan orang lain memahami kriteria jawapan betul yang sama melalui prom sahaja. Hasil sukar diulang jika dijangka meneka keadaan dalaman yang hanya diketahui penulis. Mentakrif ungkapan kabur, membekalkan tarikh rujukan dan versi dokumen yang perlu, serta menyediakan cara membiarkan perkara tanpa bukti tidak diisi boleh menjadikan prom pendek sebagai spesifikasi tugasan yang boleh disemak.

Sumber dan bacaan lanjut

Artikel ini menerangkan maklumat daripada sumber awam. Petikan sumber tidak bermakna organisasi berkenaan menyemak atau mengesahkannya.

Penerbit dan hubungan

Artikel lain tentang topik ini