AI Membaca '1984', Lalu Memutuskan untuk Melarangnya

marsbitDipublikasikan tanggal 2026-03-27Terakhir diperbarui pada 2026-03-27

Abstrak

Seorang pustakawan di sekolah menengah di Manchester, Inggris, kehilangan pekerjaannya setelah menolak rekomendasi AI yang melarang 193 buku, termasuk "1984" karya George Orwell, dengan alasan tema kekerasan dan eksplisit. AI menyarankan pelarangan tersebut, tetapi sekolah justru menyelidiki dan memaksa sang pustakawan mengundurkan diri dengan alasan "keamanan anak". Sementara itu, Wikipedia memilih melarang konten yang dihasilkan AI untuk mencegah misinformasi dan keracunan data, sementara OpenAI membatalkan fitur "mode dewasa" pada ChatGPT karena kekhawatiran dampak negatifnya. Ketiga kasus ini menunjukkan ketidakmampuan manusia dalam mengimbangi kecepatan AI dalam memproduksi dan menyaring konten, serta kurangnya standar global dalam regulasi konten berbasis AI.

Penulis: Curry, Deep Tide TechFlow

Minggu lalu, sebuah sekolah menengah di Manchester, Inggris, menggunakan AI untuk memeriksa perpustakaannya.

AI membuat daftar 193 buku yang harus diturunkan, masing-masing disertai alasan. '1984' karya George Orwell termasuk dalam daftar, dengan alasan "mengandung tema penyiksaan, kekerasan, dan paksaan seksual".

'1984' bercerita tentang dunia di mana pemerintah memantau segalanya, menulis ulang sejarah, dan memutuskan apa yang boleh dan tidak boleh dilihat warga. Sekarang, AI melakukan hal yang sama untuk sebuah sekolah, dan mungkin ia sendiri tidak tahu apa yang sedang dibicarakannya.

Pustakawan sekolah itu merasa tidak masuk akal dan menolak untuk menjalankan semua rekomendasi yang diberikan AI.

Sekolah kemudian melaporkannya ke pemerintah daerah dengan alasan "keamanan anak" dan melakukan investigasi internal terhadapnya, menuduhnya memperkenalkan buku-buku yang tidak pantas ke perpustakaan. Dia cuti sakit karena tekanan dan akhirnya mengundurkan diri.

Yang absurd, kesimpulan investigasi pemerintah daerah menetapkan bahwa dia memang melanggar prosedur keamanan anak, dan keluhannya diterima.

Ketua Bagian Perpustakaan Sekolah Inggris Caroline Roche mengatakan, kesimpulan ini berarti dia tidak akan bisa bekerja di sekolah mana pun lagi.

Orang yang menolak penilaian AI kehilangan pekerjaan, sementara orang yang menyetujui penilaian AI tidak terjadi apa-apa.

Kemudian, sekolah mengakui dalam dokumen internal bahwa semua klasifikasi dan alasannya dihasilkan oleh AI, dengan pernyataan: "Meskipun klasifikasi dihasilkan oleh AI, kami percaya klasifikasi ini pada dasarnya akurat."

Sebuah sekolah menyerahkan penilaian "buku apa yang pantas dibaca siswa" kepada AI, AI mengembalikan jawaban yang tidak dipahaminya sendiri, lalu seorang manajer manusia mencapnya tanpa melihatnya dengan saksama.

Setelah hal ini diungkap oleh organisasi kebebasan berbicara Inggris Index on Censorship, masalah yang ditimbulkan jauh melampaui rak buku satu sekolah:

Ketika AI mulai memutuskan untuk manusia konten apa yang pantas dan konten apa yang berbahaya, siapa yang menilai apakah penilaian AI itu benar?

Wikipedia Menutup Pintu untuk AI

Minggu yang sama, lembaga lain menjawab pertanyaan ini dengan tindakan.

Sekolah membiarkan AI memutuskan apa yang boleh dibaca manusia. Situs ensiklopedia online terbesar di dunia, Wikipedia, membuat pilihan sebaliknya: tidak membiarkan AI memutuskan apa yang ditulis di ensiklopedia.

Minggu yang sama, Wikipedia bahasa Inggris secara resmi mengesahkan kebijakan baru yang melarang penggunaan model bahasa besar (LLM) untuk menghasilkan atau menulis ulang konten entri. Hasil voting adalah 44 suara setuju, 2 suara menolak.

Penyebab langsungnya adalah sebuah akun AI bernama TomWikiAssist. Awal Maret tahun ini, akun ini secara mandiri membuat dan menyunting beberapa entri di Wikipedia, yang kemudian ditemukan oleh komunitas dan ditangani secara darurat.

AI hanya butuh beberapa detik untuk menulis sebuah entri, tetapi relawan membutuhkan waktu berjam-jam untuk memverifikasi fakta, sumber, dan diksi dalam sebuah entri AI apakah akurat.

Komunitas editor Wikipedia jumlahnya terbatas. Jika AI dapat memproduksi konten tanpa batas, editor manusia tidak akan sanggup meninjau semuanya.

Itu bukan bagian yang paling merepotkan. Wikipedia adalah salah satu sumber data pelatihan terpenting untuk model AI global. AI belajar pengetahuan dari Wikipedia, lalu menggunakan yang dipelajarinya untuk menulis entri Wikipedia baru, entri baru itu kemudian dimakan oleh model AI generasi berikutnya untuk terus dilatih.

Begitu informasi salah yang dihasilkan AI menyusup, itu akan terus diperbesar dalam siklus ini, menjadi semacam keracunan AI berlapis:

AI mencemari data pelatihan, data pelatihan kemudian mencemari AI.

Namun, kebijakan Wikipedia juga menyisakan dua celah untuk AI: editor dapat menggunakan AI untuk memoles teks yang mereka tulis sendiri, dan dapat menggunakan AI untuk membantu penerjemahan. Tetapi kebijakan tersebut secara khusus memperingatkan bahwa AI akan "melampaui permintaan Anda, mengubah makna teks, membuatnya tidak sesuai dengan sumber yang dikutip".

Penulis manusia membuat kesalahan, Wikipedia selama lebih dari dua puluh tahun mengandalkan kolaborasi komunitas untuk terus memperbaikinya. AI berbuat salah dengan cara yang berbeda, hal-hal yang diada-adakannya terlihat lebih nyata daripada yang asli, dan dapat diproduksi secara massal.

Sebuah sekolah mempercayai penilaian AI, hasilnya kehilangan seorang pustakawan. Wikipedia memilih untuk tidak percaya, langsung menutup pintunya.

Tapi bagaimana jika bahkan pembuat AI sendiri mulai tidak percaya?

Pembuat AI Sendiri, Takut Duluan

Lembaga di luar sedang menutup pintu untuk AI, perusahaan AI sendiri juga sedang menarik diri.

Minggu yang sama, OpenAI menunda tanpa batas waktu "mode dewasa" ChatGPT. Fitur ini awalnya direncanakan diluncurkan pada bulan Desember tahun lalu, memungkinkan pengguna dewasa yang telah memverifikasi usia untuk melakukan percakapan erotis dengan ChatGPT.

CEO Sam Altman sendiri yang mengumumkannya pada bulan Oktober tahun lalu, dengan kalimat aslinya adalah "memperlakukan pengguna dewasa seperti orang dewasa".

Hasilnya, setelah ditunda tiga kali, langsung dibatalkan.

Menurut laporan Financial Times Inggris, dewan penasihat kesehatan internal OpenAI menentang fitur ini dengan suara bulat. Kekhawatiran para penasihat cukup spesifik: pengguna akan mengembangkan ketergantungan emosional yang tidak sehat pada AI, dan anak di bawah umur pasti akan menemukan cara untuk melewati verifikasi usia.

Seorang penasihat berkata lebih langsung: tanpa perbaikan signifikan, hal ini bisa menjadi "pelatih bunuh diri yang seksi".

Tingkat kesalahan sistem verifikasi usia lebih dari 10%. Dengan skala 800 juta pengguna aktif ChatGPT per minggu, 10% berarti puluhan juta orang mungkin salah diklasifikasikan.

Mode dewasa bukan satu-satunya produk yang dipotong bulan ini. Alat video AI Sora, fungsi pembayaran instan bawaan ChatGPT, semuanya diturunkan pada waktu yang sama. Altman mengatakan perusahaan akan fokus pada bisnis inti, memotong "tugas sampingan".

Tapi OpenAI bersamaan sedang mempersiapkan IPO.

Sebuah perusahaan yang sedang mengejar penawaran umum perdana, memotong fitur-fitur yang berpotensi memicu kontroversi, nama yang lebih akurat untuk tindakan ini mungkin bukan fokus.

Lima bulan lalu Altman masih mengatakan ingin memperlakukan pengguna seperti orang dewasa, lima bulan kemudian dia menemukan, perusahaannya sendiri belum搞清楚 (memahami sepenuhnya) apa yang boleh dan tidak boleh disentuh pengguna oleh AI.

Bahkan pembuat AI sendiri tidak memiliki jawabannya. Lalu siapa yang seharusnya menarik garis ini?

Selisih Kecepatan yang Tak Tertandingi

Jika Anda menyatukan ketiga hal ini, mudah untuk menarik kesimpulan inti:

Kecepatan AI memproduksi konten, dan kecepatan manusia memoderasi konten, sudah tidak berada pada tingkat yang sama.

Pilihan sekolah di Manchester itu, dalam konteks ini sangat mudah dipahami. Berapa lama waktu yang dibutuhkan untuk meminta pustakawan membaca 193 buku satu per satu baru membuat penilaian? Meminta AI menjalankannya, beberapa menit.

Kepala sekolah memilih skema beberapa menit itu, apakah Anda pikir dia benar-benar percaya pada penilaian AI? Saya rasa lebih karena dia tidak ingin menghabiskan waktu itu.

Ini adalah masalah ekonomi. Biaya produksi mendekati nol, biaya moderasi sepenuhnya ditanggung oleh manusia.

Jadi, setiap lembaga yang dipengaruhi AI, dipaksa untuk merespons dengan cara yang paling kasar: Wikipedia langsung melarang, OpenAI langsung memotong lini produk. Tidak ada skema yang merupakan hasil pertimbangan matang, semuanya adalah menutup dulu karena tidak sempat memikirkannya dengan jelas.

"Tutup dulu baru bicara" sedang menjadi norma.

Kemampuan AI beriterasi setiap beberapa bulan, sementara diskusi tentang konten yang boleh disentuh AI, bahkan belum memiliki kerangka internasional yang layak. Setiap lembaga hanya mengurus garis di halamannya sendiri, garis-garis itu saling bertentangan, dan tidak ada yang mengoordinasikannya.

Kecepatan AI masih meningkat. Tenaga moderator tidak akan bertambah. Selisih gunting ini hanya akan semakin besar, sampai suatu hari terjadi sesuatu yang jauh lebih serius daripada melarang '1984'.

Pada saat itu baru menarik garis, mungkin sudah terlambat.

Pertanyaan Terkait

QMengapa AI di sebuah sekolah di Manchester memutuskan untuk melarang buku '1984' karya George Orwell?

AAI melarang buku '1984' karena alasan 'mengandung tema penyiksaan, kekerasan, dan paksaan seksual'.

QApa yang terjadi pada pustakawan sekolah yang menolak rekomendasi AI untuk melarang buku-buku tersebut?

APustakawan tersebut diselidiki oleh sekolah dengan alasan 'keamanan anak', dilaporkan ke pemerintah daerah, dan akhirnya mengundurkan diri karena tekanan. Investigasi pemerintah daerah menyimpulkan bahwa ia melanggar prosedur keamanan anak.

QKeputusan apa yang diambil oleh Wikipedia mengenai penggunaan model bahasa besar (LLM) untuk menulis atau menyunting konten?

AWikipedia secara resmi melarang penggunaan model bahasa besar (LLM) untuk menghasilkan atau menulis ulang konten artikel, dengan suara 44 setuju dan 2 menentang.

QMengapa OpenAI membatalkan rencana 'mode dewasa' untuk ChatGPT?

AOpenAI membatalkan 'mode dewasa' karena kekhawatiran dari dewan penasihat kesehatan tentang ketergantungan emosional yang tidak sehat pengguna pada AI dan risiko remaja melewati verifikasi usia. Tingkat kesalahan verifikasi usia melebihi 10%.

QApa masalah utama yang dihadapi manusia dalam menghadapi konten yang dihasilkan AI menurut artikel ini?

AMasalah utamanya adalah kecepatan AI menghasilkan konten jauh melebihi kemampuan manusia untuk memverifikasi dan mengauditnya, menciptakan kesenjangan yang semakin besar. Biaya verifikasi oleh manusia tetap tinggi, sementara biaya generasi AI mendekati nol.

Bacaan Terkait

Dialog dengan Ray Dalio: Saat Ini Berada dalam Gelembung AI, 1% Portofolio Investasi Adalah Bitcoin

Sumber: The Diary Of A CEO Ray Dalio, pendiri Bridgewater Associates yang meramalkan krisis keuangan 2008, memperingatkan bahwa ledakan AI saat ini menunjukkan tanda-tanda klasik gelembung ekonomi yang dapat pecah dan memicu resesi. Dalam wawancara podcast, dia menjelaskan dinamika "siklus besar" yang didorong oleh ketimpangan kekayaan, defisit pemerintah, dan perubahan geopolitik. Dalio mengidentifikasi pola di mana antusiasme berlebihan terhadap teknologi revolusioner baru, seperti AI, menyebabkan harga aset melambung dan pinjaman berlebihan. Ketika kondisi berubah (seperti kenaikan suku bunga atau kebutuhan tunai), gelembung ini dapat pecah, menyebabkan penurunan harga aset, kerugian luas, dan kontraksi ekonomi. Untuk melindungi kekayaan di masa ketidakpastian, Dalio sangat menekankan pentingnya **diversifikasi portofolio**—termasuk saham, obligasi, emas, dan real estat—daripada mengandalkan uang tunai saja. Dia mengungkapkan bahwa sekitar **1% portofolionya adalah Bitcoin**, yang diakuinya sebagai aset keras, tetapi dia lebih menyukai **emas fisik** karena sejarahnya sebagai penyimpan nilai dan aset bebas liabilitas. Mengenai dampak AI, Dalio percaya bahwa teknologi ini akan menggantikan tidak hanya tenaga fisik tetapi juga kemampuan kognitif manusia, berpotensi memperlebar kesenjangan antara pemilik modal dan pekerja. Masa depan akan menguntungkan mereka yang dapat memadukan kecerdasan manusia (seperti emosi dan intuisi) dengan kemitraan AI. Secara geopolitik, Dalio menggambarkan dunia yang memasuki fase "penurunan" dalam tatanan global, dengan Amerika Serikat menghadapi tantangan internal dan eksternal, termasuk konflik seperti di Iran yang mengungkap kelemahannya. Dia memprediksi dunia mungkin menjadi lebih terregionalisasi di masa depan. Secara keseluruhan, kunci untuk navigasi melalui periode kompleks ini adalah pemahaman akan pola sejarah, adaptasi, dan diversifikasi yang cermat.

marsbit1j yang lalu

Dialog dengan Ray Dalio: Saat Ini Berada dalam Gelembung AI, 1% Portofolio Investasi Adalah Bitcoin

marsbit1j yang lalu

Rekor! Beli Bersih Asing 7,2 Triliun Won dalam Sehari, Wall Street: Tekanan Likuiditas di Pasar Saham Korea Telah Mereda

**Ringkasan: Rekor Pembelian Asing dan Peningkatan Likuiditas di Pasar Saham Korea** Aliran modal asing menunjukkan perubahan signifikan di pasar saham Korea (KOSPI). Pada 31 Juli, investor asing melakukan pembelian bersih rekor sebesar 7,2 triliun Won Korea dalam sehari, menandai pembalikan dari tren penjualan bersih besar-besaran dalam beberapa bulan terakhir. Secara bulanan, penjualan bersih asing menyusut drastis menjadi 9,8 triliun Won di Juli, turun dari 48,4 triliun dan 44,5 triliun Won pada Juni dan Mei. Tekanan penjualan dari lembaga domestik juga mereda. Dana pensiun dan reksa dana domestik justru menjadi pembeli bersih 1,0 triliun Won di Juli, setelah dua bulan sebelumnya menjadi penjual bersih. Faktor pendukung lainnya adalah peraturan baru dari Komisi Jasa Keuangan (FSC) yang memberlakukan syarat lebih ketat bagi investor ritel untuk masuk ke ETF leverage saham tunggal, yang langsung mengurangi volume perdagangan instrumen tersebut hingga sekitar 50%. Kebijakan ini diperkirakan dapat menekan volatilitas pasar. Citigroup mempertahankan target indeks KOSPI di level 10.000 poin, menyoroti memudarnya angin penentu likuiditas. Analis mereka menilai faktor fundamental seperti industri chip memori yang solid, valuasi historis yang rendah, fundamental ekonomi Korea yang kuat, dan dukungan kebijakan berpotensi menjadi pendorong bagi pasar.

marsbit1j yang lalu

Rekor! Beli Bersih Asing 7,2 Triliun Won dalam Sehari, Wall Street: Tekanan Likuiditas di Pasar Saham Korea Telah Mereda

marsbit1j yang lalu

Pembaruan! AI Generasi Berikut OpenAI Pecahkan 10 Masalah Kelas Medali Fields

**OpenAI Model Astra Pecahkan 10 Masalah Matematika Kelas Fields Medal!** OpenAI mengumumkan terobosan besar dari model internal terbarunya, Astra. Model ini dilaporkan telah membuat kemajuan signifikan dalam **10 masalah matematika yang belum terpecahkan**, dengan biaya komputasi hanya sekitar **$2000**. Hasilnya dipublikasikan dalam makalah setebal 249 halaman. Beberapa pencapaian utama meliputi: 1. **Menyelesaikan masalah "non-sofic group"** yang diajukan Mikhail Gromov tahun 1999, dengan membangun contoh kelompok yang tak hingga dan finitely presented yang bukan sofic. Ini dianggap sebagai kemajuan bersejarah. 2. **Memecahkan batas lama dalam masalah pengepakan bola berdimensi tinggi** (sphere packing), meningkatkan batas yang telah bertahan sejak 1978 untuk dimensi tak hingga. 3. **Menyangkal dugaan "Connes Rigidity"** dengan membangun keluarga tak terhitung dari kelompok berbeda yang menghasilkan aljabar von Neumann yang sama persis. Semua bukti telah diverifikasi menggunakan asisten pembuktian formal Lean 4, memastikan ketepatannya. Para ahli matematika menyebut temuan ini sebagai **momen bersejarah**, setara dengan prestasi penghargaan Fields Medal, dan menandai kemampuan AI untuk melakukan penalaran matematika mendalam di berbagai bidang. OpenAI juga membagikan proses penalaran model, menunjukkan langkah maju yang besar menuju AGI (Artificial General Intelligence).

marsbit2j yang lalu

Pembaruan! AI Generasi Berikut OpenAI Pecahkan 10 Masalah Kelas Medali Fields

marsbit2j yang lalu

Bagaimana Membuat Diri Sendiri Tak Tergantikan oleh Kecerdasan Buatan

**Ringkasan: Bagaimana Membuat Diri Anda Tak Tergantikan oleh AI** Artikel ini membahas ancaman nyata dalam era AI: bukan kehilangan pekerjaan, tetapi "perbudakan gaji"—ketergantungan pada sistem dan orang lain untuk bertahan hidup. Solusinya adalah menjadi "individu super" yang "tak bisa dipekerjakan" dengan membangun bisnis atau karya sendiri. Kunci untuk bertahan dan berkembang di masa depan bukan sekadar keterampilan teknis, tetapi menguasai lima elemen yang sulit digantikan AI: 1. **Otonomi (Agency):** Kemampuan bertindak tanpa menunggu perintah. 2. **Rasa (Taste):** Pengalaman untuk mengetahui apa yang bernilai untuk ditawarkan. 3. **Kemampuan Persuasi (Persuasion):** Keterampilan menarik perhatian dan pengakuan. 4. **Ketekunan (Persistence):** Memahami bahwa kegagalan adalah bagian dari proses. 5. **Iterasi (Iteration):** Kemampuan memperbaiki kesalahan berdasarkan umpan balik. Lima elemen ini dapat dikembangkan dengan **membuat konten** (media). Dibandingkan pemrograman (code), konten lebih unggul karena nilainya subjektif, membutuhkan penilaian manusia, dan merupakan alat distribusi yang ampuh untuk membangun koneksi dan otoritas. Untuk memulai transformasi: 1. **Ubah lingkungan** Anda secara drastis untuk memicu perubahan identitas. 2. **Gali "bahan mentah"** Anda: Identifikasi pengetahuan mendalam, masalah yang pernah Anda selesaikan, dan minat unik masa kecil Anda. 3. **Temukan "poros pemikiran balik"**: Tentukan pendapat kontra-intuitif atau keyakinan Anda yang bertentangan dengan arus utama dalam bidang Anda. 4. **Luncurkan ide pertama** Anda besok. Gabungkan jawaban dari langkah 2 dan 3, lalu publikasikan. Umpan balik nyata dari dunia adalah guru terbaik. Intinya, bangunlah *karier seumur hidup* yang autentik berdasarkan pengalaman dan sudut pandang unik Anda. Dengan memanfaatkan AI sebagai alat dan fokus pada pengembangan diri yang tak tergantikan, Anda dapat mengambil kendali atas hidup dan masa depan Anda.

marsbit3j yang lalu

Bagaimana Membuat Diri Sendiri Tak Tergantikan oleh Kecerdasan Buatan

marsbit3j yang lalu

Kunci Bitcoin Disimpan Offline Berkat Lemparan Dadu, Tetapi Tidak Semua Orang Akan Melakukannya

Berdasarkan insiden kerentanan generator angka acak pada perangkat hardware wallet Coldcard, artikel ini membahas metode pembuatan kunci Bitcoin menggunakan dadu untuk menghasilkan entropi mandiri. Claude Shannon mengukur ketidakpastian dengan konsep entropi, di mana satu lemparan dadu enam sisi setara dengan sekitar 2,585 bit. Praktik melempar dadu 50 hingga 99 kali dapat menghasilkan frasa pemulihan 12 kata yang aman (128 bit entropi), melampaui ketergantungan pada generator perangkat. Namun, insiden Coldcard mengungkap bahwa meskipun seed utama dibuat dari dadu aman, fungsi lain seperti dompet kertas, kunci kloning, dan password masih berpotensi menggunakan generator cacat. Peneliti keamanan Kevin Loaec menekankan bahwa perlindungan hanya berlaku untuk seed utama, bukan keseluruhan sistem. Proses manual ini membutuhkan ketelitian tinggi, rentan kesalahan, dan tidak praktis bagi kebanyakan pengguna baru. Oleh karena itu, meski kuat secara matematis, metode ini lebih cocok untuk pengguna berpengalaman. Artikel menyarankan pemilik Coldcard untuk memperbarui firmware, memeriksa fungsi yang pernah digunakan, dan mempertimbangkan skema multisignature dengan perangkat dari produsen berbeda untuk mitigasi risiko. Tujuan jangka panjang adalah perangkat yang dapat menghasilkan keacakan kuat secara mandiri, tanpa memerlukan prosedur rumit dari pengguna.

cryptonews.ru6j yang lalu

Kunci Bitcoin Disimpan Offline Berkat Lemparan Dadu, Tetapi Tidak Semua Orang Akan Melakukannya

cryptonews.ru6j yang lalu

Trading

Spot
活动图片