Vercel menambahkan kontrol terpisah untuk perayap AI dan asisten AI dalam aturan yang dikelola Firewall AI Bots. Sebuah proyek dapat mencatat atau memblokir kategori ini secara independen.
Agen yang berbeda memiliki tujuan yang berbeda
- Perayap AI mengumpulkan konten untuk pengindeksan atau pelatihan model.
- Asisten AI mengambil halaman sebagai respons terhadap tindakan pengguna atau permintaan pencarian.
- Kumpulan aturan dapat memblokir satu kategori sambil mengizinkan kategori lainnya, dan Vercel mengatakan akan memperbarui aturan saat bot baru ditambahkan.
Kontrol beroperasi di firewall, bukan melalui robots.txt halaman. Putuskan akses otomatis mana yang diizinkan oleh situs, dan uji kebijakan sebelum menerbitkannya sehingga layanan yang berguna tidak diblokir secara tidak sengaja.
Vercel mengatakan aturan terkelola tersedia di semua paket. Tinjau aturan dan dokumentasi saat ini karena klasifikasi bot dan perilaku produk dapat berubah.