Google dan Anthropic menyatakan dukungan terhadap pendekatan baru yang memberikan kontrol lebih besar kepada pemilik situs web dalam menentukan penggunaan konten mereka untuk pelatihan kecerdasan buatan. Pada 30 Oktober 2026, sejumlah perusahaan TEKNOLOGI terkemuka mendukung proposal pengaturan bersama melalui file robots.txt yang sedang dibahas dalam lingkungan Internet Engineering Task Force (IETF). Inisiatif ini bertujuan menyederhanakan cara penerbit digital menyampaikan izin atau penolakan terhadap penggunaan konten untuk melatih model AI. Dengan pendekatan tersebut, pengelola website tidak perlu terus bergantung pada aturan berbeda untuk setiap penyedia AI, meskipun penerapannya masih membutuhkan pengembangan dan kesepakatan lebih lanjut.
Perusahaan Teknologi Mengembangkan Standar Penggunaan Konten Website
Inisiatif baru dalam ekosistem teknologi digital menunjukkan meningkatnya perhatian terhadap kendali pemilik konten. Google dan Anthropic menyatakan dukungan terhadap rancangan pengaturan bersama yang memberikan kesempatan kepada pemilik situs menyampaikan preferensi penggunaan konten untuk pelatihan AI. Usulan teknologi tersebut juga memperoleh komitmen dari Microsoft dan OpenAI. Tujuan utamanya adalah mempermudah proses pengelolaan izin dengan menggunakan sinyal yang dapat dipahami oleh berbagai penyedia AI. Pada sistem pengaturan yang umum digunakan, pengelola website sering perlu mengatur instruksi berbeda untuk setiap robot pengumpul data. Dengan mekanisme baru ini, proses pengaturan diharapkan menjadi lebih sederhana tanpa menghilangkan pilihan pengaturan khusus.
Partisipasi berbagai penyedia teknologi merupakan perkembangan yang penting karena penggunaan data internet memiliki peran besar dalam pengembangan model kecerdasan buatan. Berbagai perusahaan mengolah informasi dari sumber yang tersedia secara publik untuk membantu proses pengembangan teknologi. Namun, pemilik website juga membutuhkan kemampuan untuk menentukan bagaimana karya mereka dapat digunakan. Berkat dukungan terhadap sinyal preferensi bersama, penerbit berpotensi menyampaikan keputusan secara lebih jelas. Walaupun demikian, dukungan terhadap proposal tidak berarti seluruh perusahaan telah mengoperasikan mekanisme tersebut secara serentak. Pelaksanaan teknis masih dipengaruhi oleh jadwal pengembangan masing-masing perusahaan serta perkembangan pembahasan standar.
Mengenal Sinyal Pengaturan Konten untuk Pelatihan Kecerdasan Buatan
Mekanisme yang diusulkan mengandalkan file robots.txt yang secara umum digunakan untuk menetapkan instruksi kepada robot perayap website. File tersebut biasanya tersedia pada direktori utama domain agar dapat dibaca oleh sistem otomatis. Pada mekanisme baru tersebut, pengelola situs dapat menggunakan token kebijakan bernama __usage_ai-training untuk menyatakan preferensi terkait pelatihan AI. Sebagai contoh, pemilik website dapat memilih agar seluruh konten tidak digunakan untuk pelatihan model generatif. Di samping itu, aturan juga dapat disesuaikan untuk direktori tertentu sesuai kebutuhan. Kemampuan tersebut menawarkan pilihan yang lebih terstruktur dibandingkan pengelolaan instruksi terpisah bagi setiap penyedia AI.
Ketentuan mendasar yang sebaiknya diketahui adalah perbedaan antara kontrol pemanfaatan konten oleh model generatif dan pemblokiran akses website secara keseluruhan. Token kebijakan bersama ditujukan untuk menyampaikan keputusan tentang penggunaan konten dalam pelatihan AI, bukan otomatis meniadakan keberadaan halaman dari hasil pencarian internet. Melalui pendekatan ini, pemilik situs dapat mempertimbangkan kebijakan yang berbeda antara kebutuhan ditemukan pengguna dan pemanfaatan konten untuk pengembangan model. Namun, cakupan pengaturan dapat berbeda menurut interpretasi masing-masing penyedia layanan. Google, misalnya, menyatakan akan menerapkan sinyal penolakan bersama sebagai pengaturan Google-Extended apabila tidak terdapat instruksi khusus yang menyatakan sebaliknya. Karena itu, pengelola website tetap dianjurkan untuk memahami kebijakan setiap perusahaan sebelum menerapkan aturan.
Perbedaan Pengaturan Bersama dan Instruksi Khusus Perusahaan
Sebelum adanya proposal bersama, sejumlah perusahaan AI menghadirkan mekanisme tersendiri untuk mengendalikan penggunaan konten website. Google, misalnya, menyediakan Google-Extended sejak 2023 sebagai kontrol terhadap penggunaan konten dalam layanan AI tertentu. Di sisi lain, Anthropic menggunakan robot seperti ClaudeBot yang berperan dalam pengumpulan konten untuk pengembangan model. Instruksi khusus perusahaan menawarkan fleksibilitas, tetapi juga menambah pekerjaan bagi pengelola situs yang harus mengikuti berbagai kebijakan teknis. Usulan token bersama dirancang untuk meringankan kebutuhan tersebut. Dengan satu sinyal, pemilik website berpotensi menyampaikan preferensi umum kepada penyedia AI yang ikut mendukung mekanisme tersebut.
Meski demikian, pengaturan khusus masing-masing perusahaan masih dapat digunakan. Dengan kata lain, pengelola situs dapat menetapkan kebijakan umum sekaligus menambahkan pengecualian bagi penyedia tertentu. Google mengemukakan bahwa instruksi Google-Extended yang disebutkan secara eksplisit akan tetap diperhitungkan dalam mekanisme pengaturannya. Model pengendalian tersebut memungkinkan penerbit menentukan keputusan yang lebih sesuai dengan kebutuhan mereka. Dalam situasi tertentu, sebuah situs mungkin ingin mengendalikan penggunaan kontennya untuk sebagian layanan AI tetapi tetap memberikan akses bagi layanan tertentu. Namun, konsekuensi pengaturan tersebut harus dievaluasi berdasarkan dokumentasi setiap perusahaan karena istilah pelatihan, pencarian, dan penggunaan konten dalam jawaban AI tidak selalu memiliki cakupan identik.
Manfaat Pengaturan Konten AI bagi Penerbit dan Pemilik Website
Khususnya bagi penerbit digital, kehadiran standar pengaturan bersama berpotensi meningkatkan kendali atas penggunaan konten. Dalam pengelolaan konten digital, perusahaan media, blogger, dan pemilik platform informasi menerbitkan berbagai materi yang memerlukan waktu, biaya, serta tenaga kreatif. Apabila karya digital itu digunakan dalam proses pengembangan model AI, pemilik konten dapat mengajukan pertimbangan terkait izin, atribusi, dan manfaat ekonomi. Dengan mekanisme pengaturan bersama, penerbit dapat mengomunikasikan apakah konten mereka boleh digunakan untuk tujuan pelatihan. Pilihan tersebut tidak otomatis memastikan kompensasi finansial atau perlindungan hukum menyeluruh, tetapi dapat menjadi sarana komunikasi kebijakan yang lebih mudah dikenali oleh penyedia teknologi.
Dari sudut pandang bisnis digital, mekanisme pengaturan konten juga dapat mendorong hubungan yang lebih transparan antara penerbit dan pengembang AI. Perusahaan teknologi membutuhkan beragam informasi untuk meningkatkan kemampuan sistem. Pada saat yang sama, penerbit memiliki kebutuhan bahwa karya mereka digunakan sesuai kebijakan yang telah ditentukan. Mekanisme preferensi lintas perusahaan dapat mendukung komunikasi antara kedua pihak tersebut. Namun, manfaat nyata pendekatan ini ditentukan oleh kepatuhan penyedia layanan dan kejelasan implementasi teknis. Apabila semakin banyak perusahaan menerapkan mekanisme serupa, pengelola website dapat mendapatkan proses administrasi yang lebih sederhana tanpa harus memelihara banyak instruksi individual secara terus-menerus.
Tantangan dan Jadwal Penerapan Standar Pelatihan AI
Kendati disambut sejumlah perusahaan besar, proposal pengaturan konten untuk pelatihan AI masih memiliki beberapa tantangan sebelum dapat menjadi praktik umum. Salah satu persoalan adalah perbedaan jadwal implementasi antarpengembang. Google menargetkan dukungan terhadap sinyal bersama pada 2027. Microsoft menyampaikan rencana mulai menghormati pengaturan tersebut pada 1 Februari 2027. Sebagai perkembangan tambahan, OpenAI menjelaskan rencana penerapan dalam beberapa bulan setelah pengumuman, sedangkan Anthropic telah memulai pekerjaan implementasi. Ketidaksamaan tahapan pengembangan berarti pemilik situs tidak dapat langsung memastikan bahwa setiap penyedia AI telah menghormati sinyal bersama dengan cara yang sama. Pada tahap pengembangan, instruksi khusus perusahaan tetap penting bagi pengelola yang ingin mempertahankan kebijakan pembatasan konten.
Tantangan berikutnya berkaitan dengan status standardisasi dan kepatuhan terhadap instruksi website. Usulan pengaturan tersebut berada dalam lingkungan kerja AI Preferences atau AIPREF di Internet Engineering Task Force, tetapi belum berstatus sebagai standar internet final. Proses pengembangan masih memerlukan masukan dari berbagai pemangku kepentingan. Di samping itu, robots.txt pada dasarnya digunakan sebagai sarana penyampaian instruksi yang kepatuhannya ditentukan oleh perilaku robot pengakses situs. File tersebut bukan sistem yang secara teknis dapat mencegah seluruh pihak mengambil konten. Mekanisme yang diusulkan juga tidak secara otomatis menarik kembali data yang telah dikumpulkan sebelumnya. Karena itu, pengelola website tetap perlu memahami bahwa kebijakan konten, pengendalian akses, dan perlindungan hukum merupakan aspek yang berbeda.
Ringkasan Perkembangan Kontrol Pelatihan Kecerdasan Buatan
Komitmen Google, Anthropic, Microsoft, dan OpenAI terhadap standar pengaturan konten bersama menandai inisiatif menarik dalam membangun ekosistem kecerdasan buatan yang lebih transparan. Berkat penerapan token kebijakan dalam robots.txt, pemilik website memiliki kesempatan untuk menyampaikan preferensi pelatihan AI secara lebih sederhana. Meskipun demikian, pengaturan tersebut masih berada dalam tahap pengembangan dan membutuhkan dukungan teknis dari berbagai perusahaan agar dapat berfungsi secara luas. Keberhasilan jangka panjang akan dipengaruhi oleh kepatuhan penyedia AI, kejelasan standar, dan kebutuhan penerbit digital. Bagaimana pendapat Anda, apakah pengaturan bersama seperti ini akan mendorong penggunaan konten yang lebih bertanggung jawab? Sampaikan pandangan Anda mengenai penerapan teknologi pengaturan konten untuk pelatihan AI.
