Era pengumpulan konten gratis dari web akan segera berakhir. Inilah cara platform baru mengubah bot AI dari pengunjung yang tidak membayar menjadi pelanggan yang sesungguhnya.
Selama lebih dari dua puluh tahun, web berfungsi berdasarkan perjanjian tidak tertulis: Google dan mesin pencari lainnya mengindeks konten penerbit secara gratis, menampilkan cuplikan dan ringkasan di halaman mereka, tetapi sebagai imbalannya, mereka mengirimkan lalu lintas yang sangat besar kembali ke situs asli. Penerbit menerima 'penggunaan' konten mereka ini karena mereka menerima visibilitas, pembaca, dan sebagai konsekuensinya, pendapatan iklan.
Google News telah menyempurnakan model ini: Google News mengumpulkan berita dari ribuan sumber, menampilkan berita utama dan kutipan singkat, namun setiap klik akan membawa pengguna ke situs aslinya. Keseimbangan yang saling menguntungkan yang telah menopang ekosistem informasi digital.
Sekarang bayangkan Anda menjalankan sebuah situs berita dan menemukan bahwa setiap hari ribuan bot AI memindai artikel Anda, menggunakan konten untuk memberi makan templat mereka, dan menyajikan jawaban lengkap kepada pengguna, tanpa pernah mengirim lalu lintas kembali ke situs Anda. AI yang tidak menghasilkan tautan, dan tidak menghasilkan klik: AI merespons secara langsung. Selamat datang di realitas tahun 2025.
Menurut data Cloudflare, pada pertengahan tahun 2025, 80 persen aktivitas perayapan AI adalah untuk model pelatihan, sementara rujukan ke penerbit (terutama dari Google) menurun drastis. Model yang bekerja selama dua puluh tahun sedang runtuh: Google sendiri, dengan Tinjauan AI-nya, mengirimkan semakin sedikit lalu lintas ke situs asli. Rasio perayapan-ke-rujukan menunjukkan angka yang mengejutkan: Anthropic memiliki rasio 38.000 perayapan per pengunjung yang dikirim ke situsnya, sementara OpenAI mencapai 1.700:1.
Tetapi bagaimana jika bot dapat menjadi pelanggan berbayar dan bukan hanya konsumen konten gratis? Ini adalah waktunya untuk kesepakatan baru: jika AI tidak lagi dapat menjamin lalu lintas balik seperti yang dilakukan Google, setidaknya bot harus membayar untuk mengakses konten.
Juli 2025, Cloudflare mengumumkan bahwa mereka telah menjadi perusahaan infrastruktur Internet pertama yang memblokir perayap AI secara default, sekaligus memperkenalkan sistem 'Bayar Per Perayapan'. Kabarnya? Setiap domain baru yang mendaftar ke Cloudflare sekarang secara eksplisit ditanya apakah mereka ingin mengizinkan perayap AI untuk mengakses konten.
Namun, pengubah permainan yang sebenarnya adalah pasar di mana penerbit dapat membebankan biaya dari perusahaan AI setiap kali salah satu halaman mereka dipindai. Tidak lagi hanya 'izinkan' atau 'blokir', tetapi ada opsi ketiga: 'biaya'.
Bahkan sebelum adanya Cloudflare, TollBit sudah mulai membangun infrastruktur ini. Perusahaan rintisan ini, yang baru-baru ini mengumpulkan 24 juta dolar AS dalam Seri Atelah menciptakan sebuah platform di mana bot AI dapat secara langsung membayar situs web untuk menggunakan konten mereka.
TIME dan Adweek adalah salah satu pelanggan pertama pertama yang bereksperimen dengan model ini, dan menemukan bahwa AI mewakili kategori pelanggan baru dengan kebutuhan spesifik.
Menurut analisis terperinciTollBit sudah dapat menghasilkan sekitar $71 juta per tahun untuk mitra penerbitnya. Inilah caranya:
Dengan menggunakan CPM khas sebesar $15 untuk situs konten, ini berarti potensi pendapatan sebesar $195.000 per hari untuk ekosistem TollBit, atau lebih dari $71 juta per tahun.
TollBit menyarankan dua tingkat harga:
Perbedaannya bisa sangat besar, sehingga membuat model ini sangat menarik untuk konten premium dan khusus.
Analisis TollBit terhadap 160 situs web mengungkapkan bahwa perusahaan AI memindai rata-rata 2 juta kali pada Q4 2024. Setiap halaman dipindai rata-rata 7 kali.
Toshiyuki Panigrahi, salah satu pendiri TollBit, menjelaskan: "Trafik bot yang dihasilkan oleh platform AI ini hampir setara dengan trafik bot mesin pencari yang telah ada selama 20 tahun, dan ini luar biasa."
DataDome telah bermitra dengan TollBit dan platform lain untuk menawarkan solusi terintegrasi: perlindungan real-time dari bot berbahaya dan monetisasi bot yang sesuai.
Data mereka menunjukkan bahwa lalu lintas AI meningkat tiga kali lipat hanya dalam waktu enam bulan, dari 2,6 persen menjadi 8,2 persen dari semua lalu lintas bot yang terverifikasi.
Skyfire mewakili pendekatan yang berbedadengan membangun seluruh jaringan pembayaran untuk agen AI otonom. Dengan 8,5 juta dolar AS yang terkumpul dan kemitraan dengan perusahaan seperti DataDome, Skyfire bertujuan untuk menjadi infrastruktur pembayaran standar untuk ekonomi AI.
Sebelum menganalisis angka-angka tersebut, penting untuk ditekankan bahwa Pay Per Crawl tidak cocok untuk semua orang. Untuk situs dengan lalu lintas terbatas, mengizinkan akses gratis ke bot AI dapat secara strategis lebih menguntungkan: meningkatkan penemuan konten dalam sistem AI, membangun hubungan dengan platform yang sedang berkembang, dan memposisikan situs sebagai 'ramah AI' untuk peluang di masa depan.
Monetisasi langsung hanya akan menjadi menarik ketika volume yang dihasilkan sesuai dengan kompleksitas manajemen dan biaya implementasi.
Prashanth Chandrasekar, CEO Stack Overflowmeringkas situasi ini dengan sempurna: "Platform komunitas yang memberdayakan LLM harus diberi kompensasi atas kontribusinya sehingga mereka dapat berinvestasi kembali di komunitas mereka."
Dengan Perdagangan AI-ke-AI diproyeksikan mencapai $46 miliar dalam tiga tahun ke depanpenerbit yang memposisikan diri mereka lebih awal dalam ekosistem ini dapat menemukan diri mereka dengan keunggulan kompetitif yang signifikan.
Pay Per Crawl bukan lagi fiksi ilmiah, tetapi sebuah realitas operasional. Bagi para penerbit, pertanyaannya bukanlah apakah model ini akan bertahan, tetapi jika dan kapan mereka dapat beradaptasi untuk menangkap nilai.
La verità scomoda: non tutti dovrebbero monetizzare subito. Per siti con traffico limitato (<50K visite/mese), mantenere accesso libero ai bot AI può essere più vantaggioso strategicamente, costruendo visibilità e relazioni per future opportunità. La soglia di convenienza per la monetizzazione diretta si raggiunge generalmente con volumi di traffico significativi.
Proyeksi menunjukkan potensi pendapatan yang menarik untuk penerbit menengah dan besar, terutama untuk konten berkualitas dan trafik yang besar. Namun, kesuksesan akan bergantung pada kemampuan:
Bagi penerbit dengan trafik besar yang mau bereksperimen, tahun 2025 bisa menjadi tahun di mana AI tidak lagi menjadi biaya dan akhirnya menjadi peluang bisnis. Bagi yang lainnya, ini mungkin merupakan waktu yang tepat untuk membangun fondasi untuk menangkap peluang ini di masa depan.
Sumber utama: