Google dan Anthropic menyatakan dukungan terhadap pendekatan baru yang memberikan kontrol lebih besar kepada pemilik situs web dalam menentukan penggunaan konten mereka untuk pelatihan kecerdasan buatan. Pada 30 Oktober 2026, sejumlah perusahaan TEKNOLOGI terkemuka mendukung proposal pengaturan bersama melalui file robots.txt yang sedang dibahas dalam lingkungan Internet Engineering Task Force (IETF). Inisiatif ini bertujuan menyederhanakan cara penerbit digital menyampaikan izin atau penolakan terhadap penggunaan konten untuk melatih model AI. Dengan pendekatan tersebut, pengelola website tidak perlu terus bergantung pada aturan berbeda untuk setiap penyedia AI, meskipun penerapannya masih membutuhkan pengembangan dan kesepakatan lebih lanjut.
Inisiatif Baru untuk Memberikan Kendali kepada Pemilik Situs
Inisiatif baru dalam industri kecerdasan buatan memperlihatkan meningkatnya perhatian terhadap hak pengelola website. Google dan Anthropic menegaskan dukungan terhadap usulan pengaturan bersama yang membantu pemilik situs menyampaikan preferensi penggunaan konten untuk pelatihan AI. Inisiatif tersebut juga memperoleh komitmen dari Microsoft dan OpenAI. Sasaran pengembangan ini adalah mempermudah proses pengelolaan izin dengan menggunakan sinyal yang dapat dipahami oleh berbagai penyedia AI. Sebelumnya, pengelola website sering perlu memasukkan instruksi berbeda untuk setiap robot pengumpul data. Berkat rancangan tersebut, proses pengaturan diharapkan menjadi semakin praktis tanpa menghilangkan pilihan pengaturan khusus.
Keterlibatan sejumlah pengembang AI menandai perkembangan yang penting karena penggunaan data internet memiliki pengaruh signifikan dalam pengembangan model kecerdasan buatan. Banyak penyedia layanan memanfaatkan informasi dari sumber yang tersedia secara publik untuk mendukung proses pengembangan teknologi. Namun, pemilik website juga membutuhkan kemampuan untuk menentukan bagaimana karya mereka dapat digunakan. Melalui pengembangan sinyal preferensi bersama, penerbit memiliki kesempatan untuk menyampaikan keputusan secara lebih jelas. Meskipun begitu, dukungan terhadap proposal tidak berarti seluruh perusahaan telah mengoperasikan mekanisme tersebut secara serentak. Implementasi sistem masih bergantung oleh jadwal pengembangan masing-masing perusahaan serta perkembangan pembahasan standar.
Mengenal Sinyal Pengaturan Konten untuk Pelatihan Kecerdasan Buatan
Sistem pengaturan baru memanfaatkan file robots.txt yang selama ini digunakan untuk memberikan instruksi kepada robot perayap website. File tersebut biasanya disimpan pada direktori utama domain agar dapat dibaca oleh sistem otomatis. Dalam proposal terbaru, pengelola situs dapat menambahkan token kebijakan bernama __usage_ai-training untuk menyatakan preferensi terkait pelatihan AI. Sebagai contoh, pemilik website dapat memilih agar seluruh konten tidak digunakan untuk pelatihan model generatif. Selain itu, aturan juga dapat dibedakan untuk direktori tertentu sesuai kebutuhan. Kemampuan tersebut memberikan pilihan yang lebih terstruktur dibandingkan pengelolaan instruksi terpisah bagi setiap penyedia AI.
Hal penting yang sebaiknya diketahui adalah perbedaan antara kontrol pemanfaatan konten oleh model generatif dan pemblokiran akses website secara keseluruhan. Token kebijakan bersama ditujukan untuk menyampaikan keputusan tentang penggunaan konten dalam pelatihan AI, bukan otomatis menghilangkan keberadaan halaman dari hasil pencarian internet. Melalui pendekatan ini, pemilik situs dapat menyusun kebijakan yang berbeda antara kebutuhan ditemukan pengguna dan pemanfaatan konten untuk pengembangan model. Namun, hasil penerapan dapat tidak selalu sama menurut interpretasi masing-masing penyedia layanan. Google, misalnya, menyatakan akan menerapkan sinyal penolakan bersama sebagai pengaturan Google-Extended apabila tidak terdapat instruksi khusus yang menyatakan sebaliknya. Dengan mempertimbangkan kondisi tersebut, pengelola website tetap dianjurkan untuk memahami kebijakan setiap perusahaan sebelum menerapkan aturan.
Hubungan Standar Baru dengan Google-Extended dan Robot AI Lainnya
Sebelum adanya proposal bersama, sejumlah perusahaan AI menyediakan mekanisme tersendiri untuk mengatur penggunaan konten website. Google, misalnya, memperkenalkan Google-Extended sejak 2023 sebagai kontrol terhadap penggunaan konten dalam layanan AI tertentu. Sementara itu, Anthropic menggunakan robot seperti ClaudeBot yang berperan dalam pengumpulan konten untuk pengembangan model. Pengaturan terpisah menghadirkan fleksibilitas, tetapi juga meningkatkan pekerjaan bagi pengelola situs yang harus memahami berbagai kebijakan teknis. Usulan token bersama dirancang untuk menyederhanakan kebutuhan tersebut. Dengan satu sinyal, pemilik website direncanakan dapat menyampaikan preferensi umum kepada penyedia AI yang ikut mendukung mekanisme tersebut.
Walaupun menawarkan kemudahan, pengaturan khusus masing-masing perusahaan tidak langsung dihapuskan. Artinya, pengelola situs dapat menggunakan kebijakan umum sekaligus memberikan pengecualian bagi penyedia tertentu. Google menjelaskan bahwa instruksi Google-Extended yang disebutkan secara eksplisit akan tetap diperhitungkan dalam mekanisme pengaturannya. Sistem preferensi berlapis ini membantu penerbit menentukan keputusan yang lebih sesuai dengan kebutuhan mereka. Untuk memberikan gambaran, sebuah situs mungkin ingin membatasi penggunaan kontennya untuk sebagian layanan AI tetapi tetap memberikan akses bagi layanan tertentu. Namun, konsekuensi pengaturan tersebut harus diperiksa berdasarkan dokumentasi setiap perusahaan karena istilah pelatihan, pencarian, dan penggunaan konten dalam jawaban AI tidak selalu memiliki cakupan identik.
Manfaat Pengaturan Konten AI bagi Penerbit dan Pemilik Website
Untuk pemilik situs internet, kehadiran standar pengaturan bersama berpotensi memperkuat kendali atas penggunaan konten. Selama ini, perusahaan media, blogger, dan pemilik platform informasi membuat berbagai materi yang memerlukan waktu, biaya, serta tenaga kreatif. Ketika informasi tersebut digunakan dalam proses pengembangan model AI, pemilik konten dapat mengajukan pertimbangan terkait izin, atribusi, dan manfaat ekonomi. Berkat pendekatan yang lebih terstruktur, penerbit dapat mengomunikasikan apakah konten mereka boleh digunakan untuk tujuan pelatihan. Fasilitas pengendalian itu tidak otomatis menjamin kompensasi finansial atau perlindungan hukum menyeluruh, tetapi dapat memberikan sarana komunikasi kebijakan yang lebih mudah dikenali oleh penyedia teknologi.
Dalam perspektif industri, mekanisme pengaturan konten juga berpotensi memfasilitasi hubungan yang lebih transparan antara penerbit dan pengembang AI. Pengembang layanan AI memerlukan beragam informasi untuk meningkatkan kemampuan sistem. Sementara itu, penerbit berkepentingan bahwa karya mereka digunakan sesuai kebijakan yang telah ditentukan. Mekanisme preferensi lintas perusahaan dapat mendukung komunikasi antara kedua pihak tersebut. Namun, manfaat nyata pendekatan ini bergantung oleh kepatuhan penyedia layanan dan kejelasan implementasi teknis. Jika semakin banyak perusahaan mengadopsi mekanisme serupa, pengelola website dapat mendapatkan proses administrasi yang lebih sederhana tanpa harus memperbarui banyak instruksi individual secara terus-menerus.
Tantangan dan Jadwal Penerapan Standar Pelatihan AI
Kendati disambut sejumlah perusahaan besar, proposal pengaturan konten untuk pelatihan AI masih menghadapi beberapa tantangan sebelum dapat menjadi praktik umum. Hal yang perlu diperhatikan adalah perbedaan jadwal implementasi antarpengembang. Google merencanakan dukungan terhadap sinyal bersama pada 2027. Microsoft menyampaikan rencana mulai menghormati pengaturan tersebut pada 1 Februari 2027. Di sisi lain, OpenAI mengumumkan rencana penerapan dalam beberapa bulan setelah pengumuman, sedangkan Anthropic telah memulai pekerjaan implementasi. Ketidaksamaan tahapan pengembangan berarti pemilik situs tidak dapat langsung memastikan bahwa setiap penyedia AI telah membaca sinyal bersama dengan cara yang sama. Selama masa transisi, instruksi khusus perusahaan tetap relevan bagi pengelola yang ingin mempertahankan kebijakan pembatasan konten.
Tantangan berikutnya berkaitan dengan status standardisasi dan kepatuhan terhadap instruksi website. Proposal yang sedang dibahas berada dalam lingkungan kerja AI Preferences atau AIPREF di Internet Engineering Task Force, tetapi belum ditetapkan sebagai standar internet final. Tahapan standardisasi masih melibatkan masukan dari berbagai pemangku kepentingan. Hal penting lainnya, robots.txt pada dasarnya berperan sebagai sarana penyampaian instruksi yang kepatuhannya ditentukan oleh perilaku robot pengakses situs. File tersebut bukan sistem yang secara teknis dapat mencegah seluruh pihak mengambil konten. Mekanisme yang diusulkan juga tidak secara otomatis menarik kembali data yang telah dikumpulkan sebelumnya. Dengan mempertimbangkan batasan tersebut, pengelola website tetap sebaiknya memahami bahwa kebijakan konten, pengendalian akses, dan perlindungan hukum merupakan aspek yang berbeda.
Kesimpulan
Komitmen Google, Anthropic, Microsoft, dan OpenAI terhadap standar pengaturan konten bersama menandai perkembangan berarti dalam membangun ekosistem kecerdasan buatan yang lebih transparan. Melalui penggunaan token kebijakan dalam robots.txt, pemilik website berpotensi menyampaikan preferensi pelatihan AI secara lebih sederhana. Meskipun demikian, pengaturan tersebut masih berada dalam tahap pengembangan dan memerlukan dukungan teknis dari berbagai perusahaan agar dapat diterapkan secara konsisten. Efektivitas penerapan akan dipengaruhi oleh kepatuhan penyedia AI, kejelasan standar, dan kebutuhan penerbit digital. Menurut Anda, apakah pengaturan bersama seperti ini akan memberikan kendali lebih besar kepada pemilik website? Tuliskan pandangan Anda mengenai perkembangan teknologi pengaturan konten untuk pelatihan AI.
