Studi menunjukkan bahwa ChatGPT memiliki data copywriting paling banyak dibandingkan dengan LLM teratas lainnya
2 menit Baca
Ditampilkan di
Bagikan artikel ini
Sempurnakan panduan ini
Baca halaman pengungkapan kami untuk mengetahui bagaimana Anda dapat membantu MSPoweruser mempertahankan tim editorial Baca lebih lanjut
Catatan kunci
- Model AI seperti GPT-4 dan Claude 2 ditemukan menghasilkan teks yang berisi materi berhak cipta.
- GPT-4 OpenAI adalah yang paling tidak berhati-hati, dan berpotensi melanggar hak cipta dalam 44% perintah yang diuji.
Sebuah studi baru yang dilakukan oleh Patronus AI, sebuah perusahaan yang mengkhususkan diri dalam mengevaluasi model bahasa besar (LLM), telah memicu kekhawatiran tentang pelanggaran hak cipta dan penggunaan data berhak cipta dalam pelatihan model AI. Penelitian yang dirilis pada hari Rabu ini menguji empat model AI: GPT-4 dari OpenAI, Claude 2 dari Anthropic, Llama 2 dari Meta, dan Mixtral dari Mistral AI. Terkejut karena mereka melewatkan Gemini
Patronus AI menggunakan “Penangkap Hak Cipta” untuk menganalisis tanggapan model terhadap petunjuk terkait dengan buku-buku populer berhak cipta. Tantangannya sederhana: petunjuknya menantang model untuk menyelesaikan bagian buku atau memberikan bagian pertama dari buku tertentu.
Keempat model AI menghasilkan konten dengan materi berhak cipta sampai tingkat tertentu.
- GPT-4 OpenAI menghasilkan jumlah perintah tertinggi (44%) dengan teks berhak cipta.
- Claude 2 dari Anthropic adalah yang paling berhati-hati, menghasilkan konten berhak cipta hanya dalam 16% dari permintaan penyelesaian. Ia juga menolak untuk menjawab semua permintaan bagian pertama, dengan alasan kurangnya akses terhadap materi berhak cipta. (Claude 3 baru saja dirilis, dan Anhtropic yakin ini lebih baik daripada LLM lainnya)
- Llama 2 Meta menghasilkan konten berhak cipta dalam 10% permintaan.
- Mixtral Mistral menunjukkan kecenderungan yang lebih tinggi untuk menyelesaikan bagian pertama (38%) dibandingkan potongan teks yang lebih besar (6%).
Temuan Patronus AI memerlukan langkah-langkah proaktif untuk mengatasi masalah hak cipta dan mendorong praktik yang bertanggung jawab dan etis agar inovasi dapat berkembang. Akan lebih baik jika menambahkan Gemini ke dalam ujian juga.
