Connect with us

Pendapat

Openai memikirkan kembali bagaimana model AI menangani topik kontroversial

Published

on

Openai meluncurkan a Versi spesifikasi model Anda yang diperluas secara signifikanDokumen yang mendefinisikan bagaimana model AI -nya harus berperilaku – dan membebaskannya untuk siapa saja untuk menggunakan atau memodifikasi.

Spesifikasi baru 63 halaman, di atas Sekitar 10 halaman dalam versi sebelumnyaMenetapkan pedoman tentang bagaimana model AI harus menangani segala sesuatu mulai dari topik kontroversial hingga kustomisasi pengguna. Dia menekankan tiga prinsip utama: personalisasi; transparansi; Dan apa yang oleh Openai disebut “kebebasan intelektual” – kemampuan pengguna untuk mengeksplorasi dan mendiskusikan ide -ide tanpa batasan sewenang -wenang. Peluncuran spesifikasi model yang diperbarui datang persis seperti CEO Sam Altman Diposting Bahwa model hebat berikutnya dari startup, GPT-4.5 (Codinome Orion), akan segera dirilis.

Tim juga telah memasukkan debat etika saat ini dan kontroversi sejak tahun lalu dalam spesifikasi. Anda mungkin terbiasa dengan beberapa konsultasi keranjang ini. Maret lalu, Elon Musk (yang bersama -sama membakar Openai dan sekarang mengelola pesaing, XAI) itu memukul AI Chatbot dari Google, setelah pengguna bertanya apakah Anda harus menyerang Caitlyn Jenner, seorang Olimpiade Trans yang terkenal, apakah itu satu -satunya cara untuk mencegah kiamat nuklir – dan mengatakan tidak. Mencari tahu bagaimana membuat model penalaran secara bertanggung jawab untuk konsultasi ini adalah salah satu masalah yang menurut Openai ingin mempertimbangkan dengan memperbarui spesifikasi model. Sekarang, jika Anda melakukan chatgpt pertanyaan yang sama, Anda harus mengatakan bahwa Anda harus menyerang seseorang untuk menghindari acara korban massal.

“Kami tidak dapat membuat model dengan serangkaian pola perilaku yang persis sama dengan yang akan disukai semua orang di dunia,” kata Joanne Jang, anggota tim perilaku model Openai, dalam sebuah wawancara dengan Mengendarai. Dia menekankan bahwa sementara perusahaan mempertahankan pegangan tangan keselamatan tertentu, banyak aspek perilaku model dapat disesuaikan oleh pengguna dan pengembang.

“Kami tahu itu akan pedas.”

Posting Blog Openai Diterbitkan pada hari Rabu Ini menggambarkan banyak pertanyaan dan memberikan contoh respons yang kompatibel dibandingkan dengan yang akan melanggar spesifikasi model. Itu tidak mengizinkan model untuk mereproduksi bahan hak cipta -yang dilindungi atau mengabaikan paywalls – The New York Times Anda memproses OpenAi untuk menggunakan pekerjaan Anda untuk melatih model Anda. Spesifikasi juga mengatakan bahwa model tidak akan mendorong mutilasi diri, topik yang mencapai avant-gard ketika seorang remaja meninggal karena bunuh diri setelah berinteraksi dengan chatbot ke dalam karakter.

Perubahan yang luar biasa adalah bagaimana model menangani topik kontroversial. Alih -alih secara default kehati -hatian yang ekstrem, spesifikasi mendorong model untuk “mencari kebenaran” dengan pengguna, mempertahankan posisi moral yang jelas pada isu -isu seperti informasi yang salah atau kemungkinan kerusakan. Misalnya, ketika ditanya tentang kenaikan pajak yang kaya – topik yang menyebabkan perdebatan panas – tim mengatakan model mereka harus memberikan analisis yang membumi daripada menghindari diskusi.

Spesifikasi ini juga menyebutkan perubahan dalam cara berurusan dengan konten yang matang. Setelah umpan balik dari pengguna dan pengembang yang meminta “mode dewasa” (fitur Altman Secara terbuka setuju pada bulan Desember), tim sedang mengeksplorasi cara untuk memungkinkan jenis konten dewasa tertentu – seperti erotis – dalam konteks yang tepat, mempertahankan larangan ketat dalam konten berbahaya, seperti balas dendam porno atau Deepfake. Ini adalah perubahan luar biasa dalam pembatasan umum perusahaan sebelumnya pada konten eksplisit, meskipun Openai menekankan setiap perubahan datang dengan kebijakan penggunaan yang jelas dan pegangan pengaman.

Spesifikasi model mengungkapkan pendekatan pragmatis untuk perilaku AI: mengubah konten sensitif, tetapi tidak membuatnya (ia harus dapat menerjemahkan kalimat pada konten terkait narkoba dari bahasa Inggris ke Jerman, alih-alih menolaknya), menunjukkan empati tanpa empati tanpa berpura -pura emosi, dan menjaga batas -batas yang kuat dan memaksimalkan utilitas. Pedoman ini mencerminkan apa yang mungkin dilakukan perusahaan AI lain secara internal, tetapi biasanya tidak mengumumkan kepada publik.

Tim juga secara khusus mengarahkan masalah yang disebut “AI Sycofhacy”.

“Kami sangat senang membawa diskusi dan pemikiran internal yang kami miliki kepada publik sehingga kami bisa mendapatkan umpan balik,” kata Jang, menambahkan bahwa banyak dari konsultasi ini adalah topik yang banyak diperdebatkan secara internal. Tidak ada jawaban sederhana ya atau tidak untuk banyak dari mereka; Oleh karena itu, tim mengharapkannya untuk membawanya ke publik untuk umpan balik secara signifikan menguntungkan perilaku model.

Tim ini juga secara khusus mengarahkan masalah yang disebut “AI Sycofhacy”, di mana model AI cenderung terlalu menyenangkan, bahkan ketika mereka harus mundur atau memberikan kritik. Di bawah pedoman ini, chatgpt harus: memberikan jawaban faktual yang sama, terlepas dari bagaimana pertanyaan dirumuskan; Berikan umpan balik yang jujur ​​alih -alih pujian kosong; Dan itu bertindak lebih seperti kolega yang penuh perhatian daripada kesenangan. Misalnya, jika seseorang meminta Chatgpt untuk mengkritik pekerjaan mereka, mereka harus memberikan kritik konstruktif alih -alih hanya mengatakan bahwa semuanya hebat. Atau jika seseorang membuat pernyataan yang salah saat mengajukan pertanyaan, AI harus memperbaikinya dengan benar alih -alih bermain bersama.

“Kami tidak pernah ingin pengguna merasa bahwa mereka perlu dengan hati -hati memproyeksikan peringatan mereka agar tidak membuat model setuju dengan Anda,” kata Jang.

Spesifikasi ini juga menampilkan “rantai perintah” yang jelas yang mendefinisikan instruksi mana yang memiliki prioritas: aturan level platform openai lebih dulu, diikuti oleh pedoman pengembang dan kemudian preferensi pengguna. Hirarki ini bertujuan untuk mengklarifikasi aspek perilaku AI mana yang dapat dimodifikasi versus pembatasan yang tetap diperbaiki.

Openai mengungkapkan spesifikasi di bawah lisensi Creative Commons Zero (CC0), secara efektif meletakkannya di domain publik. Ini berarti bahwa perusahaan dan peneliti AI lain dapat mengadopsi, memodifikasi, atau secara bebas mengembangkan pedoman ini. Perusahaan mengatakan bahwa keputusan ini dipengaruhi oleh kepentingan informal orang lain di sektor ini yang sudah merujuk pada spesifikasi sebelumnya.

Saya ingin berbicara. Anda dapat menghubungi saya dengan aman di @kylie.01 atau dengan dan mengirim email ke kylie@theverge.com.

Meskipun pengumuman hari ini tidak segera mengubah cara chatgpt atau produk openai lainnya berperilaku, perusahaan mengatakan itu mewakili kemajuan berkelanjutan dengan membuat modelnya secara konsisten mengikuti prinsip -prinsip ini. Tim ini juga berasal dari peringatan terbuka yang mereka gunakan untuk menguji adhesi pada model pada pedoman ini.

Momen rilis ini terjadi selama periode perdebatan intens tentang perilaku dan keamanan AI. Meskipun Openai mendukung pembaruan ini telah didorong oleh akumulasi umpan balik dan kemajuan penelitian sejak versi Mei pertama Mei lalu, ia datang ke wajah sektor dengan insiden profil tinggi yang melibatkan respons model AI terhadap topik sensitif.

Openai meminta umpan balik publik tentang spesifikasi melalui formulir di situs Anda. “Kami ingin membawa diskusi internal ini kepada publik,” kata Laurentia Romaniuk, anggota lain dari tim perilaku model.

“Kami tahu itu akan pedas, tetapi saya pikir kami menghormati kemampuan publik untuk benar -benar mencerna hal -hal pedas ini dan memprosesnya bersama kami,” kata Jang, menambahkan bahwa Openai banyak memasukkan dari umpan balik yang diterimanya setelah peluncuran spesifikasi pertama tahun lalu. “Saya sedikit khawatir tentang fakta bahwa karena sudah lama, banyak orang punya waktu untuk duduk dan benar -benar memproses nuansa, tetapi kami akan menerima umpan balik apa pun.

Continue Reading
Click to comment

Leave a Reply

Alamat email Anda tidak akan dipublikasikan. Ruas yang wajib ditandai *

Pendapat

Presiden Reuters Paul Bascobert tentang distribusi, kebebasan pers dan nilai fakta

Published

on

Hari ini, saya berbicara dengan Paul Bascobert, yang merupakan presiden Reuters, layanan berita dan informasi yang tidak diragukan lagi telah Anda dengar. Ini adalah bagian dari seri Kamis khusus yang kami lakukan bulan ini untuk mengeksplorasi sebagai pemimpin dari beberapa perusahaan terbesar di dunia membuat keputusan dalam lingkungan perubahan yang cepat. Kamu tahu, Decoder benda.

Reuters adalah perusahaan yang hebat untuk memulai, karena pada dasarnya ada selamanya. Perusahaan ini didirikan pada tahun 1851, ketika teknologi panas yang memungkinkan jenis media baru adalah telegraf, dan seluruh konsep “layanan kawat” adalah ide baru.

Di sini, hari ini di tahun 2025, media arahan teknologi telah berubah dengan jelas lebih dari sekadar sedikit. Distribusi di dunia yang penuh dengan iPhone dan IA generatif adalah proposal yang sangat berbeda dari distribusi media 50 tahun sebelum penemuan radio. Bahkan proposal yang sangat berbeda sekarang dari yang baru 20 atau 30 tahun yang lalu, di era Web 1.0.

Ada waktu yang lama di sana, dan Anda akan mendengar kami semakin dalam di semua Decoder Tema yang ada. Sebagai contoh, Paul dan saya menghabiskan banyak waktu berbicara tentang bagaimana sebuah organisasi dengan warisan setua Reuters ‘dapat terus menemukan audiens dan menjadi sukses di era media digital saat ini, yang didominasi oleh platform sosial. Publik tidak lagi membaca koran, dan saya tidak yakin apakah generasi berita konsumen berikutnya akan mengunjungi situs web. Jadi Reuters melakukan banyak pekerjaan untuk memastikan Itu saja Pekerjaan dapat menemukan dan mencapai audiens baru.

Decoder Pendengar yang akrab dengan episode kami yang lain dengan para pemimpin media tahu bahwa saya sangat penasaran mengetahui bagaimana AI generatif akan mengubah bisnis berita sendiri. Dan seberapa besar perusahaan media berpikir untuk melisensikan konten mereka ke perusahaan AI, berselisih dengan perusahaan yang sama ini, atau bahkan bekerja dengan mereka untuk membuat jenis produk baru.

Paul memiliki banyak pemikiran yang sangat menarik di sini, karena Reuters selalu memiliki perjanjian konten berlisensi, karena, pada kenyataannya, inilah tepatnya layanan kawat. Bagi Paul, ini sangat cocok dengan cara berpikir tentang data pelatihan AI dan AI. Saya banyak berjuang untuk mendapatkan jumlah yang sulit dari dia, jadi saya pikir Anda akan sangat menghargai back-and-ruth.

Jika Anda ingin membaca lebih lanjut tentang apa yang kami katakan di episode ini, lihat tautan di bawah ini:

Pertanyaan atau komentar tentang episode ini? Kalahkan di deoder@theverge.com. Kami benar -benar membaca semua dan email!

Tautan sumber

Continue Reading

Pendapat

Presiden Trump membuat pemerintah bertanggung jawab lagi

Published

on

Di tengah semua percakapan tarif, perang komersial, dan pemotongan pajak, media telah kehilangan berita bahwa Presiden Trump pada dasarnya mengubah tenaga kerja federal menjadi lebih baik. Di bulan April, pemerintah Anda mulai mengimplementasikan rencana Anda untuk menjadikan pegawai negeri sipil utama bertanggung jawab secara politis.

Langkah ini akan menguntungkan presiden suku cadang dan jutaan pekerja federal. Yang terpenting, saya akan melakukan Washington, DC melakukan pekerjaan yang lebih baik saat memberikan kepada orang -orang Amerika.

Trump menanggapi krisis – yang menjangkiti dia selama masa jabatan pertamanya dan mengancam untuk mendefinisikan masa jabatan keduanya. Pada dasarnya, banyak birokrat karier federal yang mengawasi proses peraturan Menggunakan kekuatannya untuk mencegah prioritas presiden menjadi politis. Ada Banyak contoh yang terdokumentasi dari pemerintah Trump pertama. Dan tepat sebelum awal pemerintahan Trump kedua, sebuah survei menemukan bahwa 75 % manajer federal yang memilih Kamala Harris berencana untuk tidak mematuhi instruksi yang tidak mereka sukai.

Di sektor swasta, para pekerja ini akan diberhentikan karena menolak melakukan pekerjaan mereka. Tetapi di pemerintahan federal, birokrat karier senior hampir tidak mungkin untuk dihapus, bahkan ketika mereka mengabaikan atau merusak presiden yang terpilih secara demokratis.

Ini membuatnya lebih dari sekadar krisis untuk Donald Trump. Ini adalah krisis untuk seluruh Amerika. Sebagai Demokratmengatasi Partai Republik Dua per satu di birokrasi federal, karyawan karier konservatif juga dapat menolak untuk mengimplementasikan agenda presiden liberal – tentang apa pun, dari pendidikan hingga energi dan kebijakan ekonomi.

Terlepas dari itu, hasilnya sama: Presiden yang terpilih tidak dapat melakukan apa yang dipilih orang. Kurangnya akuntabilitas mengurangi demokrasi itu sendiri, memberikan birokrat tidak memilih kekuatan untuk mengabaikan kehendak rakyat Amerika.

Masukkan renovasi Trump.

Pemerintahnya menguraikan peraturan yang akan membuat pegawai negeri sipil utama “nyaman”, sama seperti kebanyakan pekerja di sektor swasta. Semuanya berkata,Sekitar 50.000 birokrat karierakan terpengaruh oleh aturan yang diusulkan – di2 % dari tenaga kerja federal. Jika karyawan senior ini menolak untuk mengikuti perintah hukum atau tidak dapat melakukan pekerjaan mereka, akan lebih mudah untuk memberhentikan mereka. Saat ini, peraturan ini terbuka untuk mengomentari publik dan, ketika selesai, akan membuat lebih sulit bagi birokrat untuk melawan presiden – apakah Donald Trump atau siapa pun.

Hanya karyawan karier terpenting yang akan dicakup oleh reformasi ini. Mereka adalah manajer, pengacara, dan birokrat senior lainnya – di semua lembaga federal – yang paling mempengaruhi proses perumusan kebijakan. Pada dasarnya, reformasi baru tidak akan mempengaruhi jutaan pekerja pemerintah yang menerapkan kebijakan federal. Pikirkan agen patroli perbatasan, inspektur gaji dan waktu dan banyak pekerjaan lain yang membuat pemerintah federal bekerja. Tak satu pun dari mereka yang berisiko kehilangan pekerjaan.

Tetapi setiap karyawan federal akan mendapat manfaat dari reformasi ini. Sebagian besar dari mereka bekerja untuk pemerintah karena mereka ingin melayani rakyat Amerika, yang lebih sulit ketika karyawan tinggi menghambat prioritas presiden. Karena birokrat utama ini dihapus oleh tujuan yang baik – atau setelah mereka berhenti melawan atau menolak untuk melakukan pekerjaan mereka – pelayan publik sejati Amerika akan merasa lebih mudah untuk melakukan pekerjaan mereka juga.

Dengan kata lain, reformasi ini akan mengarah pada pemerintah federal yang lebih baik. Di negara bagian yang telah pindah ke sistem ini – termasuk Georgia, Arizona, Texas dan Florida – Laporan menunjukkanbahwa pejabat pemerintah lebih bahagia dan lebih baik.

Tetapi orang -orang Amerika akan mendapat manfaat di atas segalanya. Mereka membutuhkan pemerintahan yang lebih efisien, efektif dan, di atas segalanya – yang bertanggung jawab – pemerintah yang memajukan agenda yang para pemilih mendukung kotak suara. Renovasi Trump akan membantu mewujudkan visi ini menjadi kenyataan, membuatnya lebih mudah baginya dan presiden masa depan kedua belah pihak untuk menyetujui prioritasnya dan memberikan kepada pemilih.

Ini hanyalah transformasi pemerintah federal. Dan itu mungkin menjadi hal yang paling penting yang dicapai Donald Trump.

Karen Harned adalah Presiden Harned Strategies LLC dan anggota senior Institute for the American Worker.F. Vincent Vernuccio adalah presiden Institute for the American Worker.

Tautan sumber

Continue Reading

Pendapat

Gunakan momentum perjanjian Inggris untuk membuat lebih banyak perjanjian komersial dengan cepat, Tuan Presiden

Published

on

Perjanjian komersial Presiden Donald Trump baru -baru ini dengan Inggris adalah kemenangan besar bagi Gedung Putih – yang harus diperluas timnya ketika mendapatkan lebih banyak perjanjian tinta, siap.

Dengan detail halus yang masih diselesaikan, perjanjian tersebut akan menghilangkan 25% aluminium dan tarif baja dari Inggris (menjaga 10% dari garis dasar di semua barang lainnya), buka pasar Inggris untuk etanol yang paling banyak diproduksi di AS dan daging sapi dan menyederhanakan proses untuk mendapatkan barang -barang manufaktur Amerika melalui bea cukai.

Ini adalah berita bagus bagi petani AS dan bukti bahwa tarif presiden dari presiden dapat bekerja.

Pasar segera bersorak dengan berita tentang kesepakatan itu, Dow melompat lebih dari 200 poin.

Fakta bahwa Inggris, Mitra Komersial Eropa kami No. 1, adalah orang pertama yang setuju dengan kesepakatan – dan di bawah Pemimpin Buruh Keir Stmerer juga harus mendorong negara -negara lain untuk maju sendiri.

Tim Trump tidak boleh menyia -nyiakan peluang.

Sementara itu, Gedung Putih berpikir untuk mengurangi tingkat 145% di Cina menjadi sekitar 50% sebagai Menteri Keuangan Scott Bessent meluncurkan negosiasi dengan Beijing.

Ini akan mengurangi beberapa tekanan pada pengusaha; Banyak usaha kecil tidak dapat bertahan dari perang dagang yang berkepanjangan dan pahit dengan Beijing.

Tetapi cara untuk meningkatkan kepercayaan ekonomi dan meresmikan “era emas” Trump yang dijanjikan adalah untuk mendapatkan lebih banyak tandatangan, disegel, dan disampaikan perjanjian – sebelum Waktu berakhir pada istirahat tarif 90 hari.

Ada 60 hari tersisa; Jam berjalan.

Pada pertengahan -April, Gedung Putih mengatakan lebih dari 75 negara berusaha memulai proses dan 15 memperoleh proposal di atas kertas.

Trump, tidak diragukan lagi buruk Hasil pertama.

Dan momen negatif ini bisa membuat tidak mungkin untuk menyetujui RUU “besar dan indah” kegagalan yang tentunya akan mengirim ekonomi (dan sisa agenda Trump) dalam spiral.

Perjanjian Inggris adalah langkah pertama yang hebat dalam mengambil ritme ke arah yang benar; Mari berharap tim Trump dapat mencapai akselerator.

Tautan sumber

Continue Reading

Trending