Google, Microsoft, OpenAI, dan Anthropic mengumumkan pada 30 Oktober 2026 dukungan untuk satu sinyal bersama di robots.txt yang memungkinkan pemilik situs menolak pemakaian kontennya untuk melatih model AI generatif. Sinyal itu bernama __usage_ai-training, dan keempat perusahaan merujuk ke token yang sama. Dukungannya bertahap, dan baru Anthropic yang menyatakan sudah mulai menerapkannya.
Cara kerja token
Pemilik situs menulis token itu di grup robots.txt sebagai pengganti nama crawler, lalu menambahkan Disallow untuk seluruh situs atau Allow untuk folder tertentu, misalnya folder press kit. Menurut PPC Land, token ini menyatakan preferensi tentang penggunaan konten, bukan perintah crawling. Grup dengan User-agent bintang tidak dihitung sebagai preferensi dalam draf tersebut. Definisi pelatihan yang dipakai adalah penggunaan konten untuk mengubah parameter yang dipelajari model generatif.
Token itu didefinisikan dalam draf individual Internet-Draft yang ditulis Kevin Kelley dari Anthropic dan diajukan pada 30 Oktober sebagai masukan untuk kelompok kerja AIPREF di IETF. Draf tersebut tidak didukung IETF, tidak punya status formal, dan kedaluwarsa pada 3 Mei 2027 kecuali direvisi.
Jadwal tiap perusahaan
Google lewat John Mueller di blog Search Central menyatakan akan memperlakukan opt-out bersama sebagai larangan Google-Extended, dengan target awal 2027. Microsoft lewat Krishna Madhavan di blog Bing akan menghormati preferensi pelatihan dan grounding mulai 1 Februari 2027. Bing Webmaster Tools membuka preferensi transisi grounding pada 15 Desember 2026 bagi situs yang memakai NoArchive atau NoCache, dan pada 1 Maret 2027 Microsoft berhenti membaca keduanya sebagai preferensi.
OpenAI menyebut akan menerapkannya dalam beberapa bulan ke depan dan menjanjikan rincian menyusul. Kelley menulis di milis AIPREF bahwa Anthropic sudah mulai menerapkan dukungan, tanpa menyebut tanggal. DEV Community mencatat bahwa tanggal Microsoft dan Google yang dikutip dari SiliconANGLE tidak ia temukan di materi primer perusahaan, jadi jadwal itu perlu dicek lagi saat implementasi mendekat.
Yang tidak diatur token ini
Token ini tidak mengatur akses crawler, sehingga pemblokiran tetap memakai aturan crawl di robots.txt. Peringkat pencarian Google dan Bing tidak terpengaruh. Sinyalnya sukarela tanpa mekanisme penegakan, dan menurut draf, kesepakatan lisensi privat dapat menimpa preferensi pemilik situs. Di Microsoft, grounding hanya diatur di tingkat halaman, jadi token bersama berlaku untuk pelatihan saja. Di Google, token yang sama juga dipetakan ke Google-Extended, yang mencakup grounding Gemini di Gemini Apps dan Vertex AI.
Bagi pengelola situs, artinya sederhana: menambahkan token sekarang hanya akan berpengaruh pada perusahaan yang sudah mendukungnya, sedangkan sisanya baru efektif sepanjang 2027.
Sumber: PPC Land dan DEV Community. Gambar: PPC Land