Websites beslissen zelf of je AI-agent binnen mag, en robots.txt is maar de voordeur
Amazon, Yelp en banken houden AI-agenten buiten, Delta en Shopify laten ze binnen. We lazen de robots.txt-bestanden en zochten uit wat er verder speelt.
AI-kunst, ontwerp en AI-nieuws
Amazon, Yelp en banken houden AI-agenten buiten, Delta en Shopify laten ze binnen. We lazen de robots.txt-bestanden en zochten uit wat er verder speelt.