Über GlobalFoodRecipesBot

GlobalFoodRecipesBot liest öffentliche Rezeptseiten von einer kleinen Anzahl von Partner- und Referenzseiten. Er hält sich an robots.txt (einschließlich Crawl-delay), wartet mehrere Sekunden zwischen Anfragen, drosselt sich, wenn ein Server dies verlangt, und lädt niemals Videos herunter.

Websitebetreiber können ihn mit User-agent: GlobalFoodRecipesBot in robots.txt blockieren oder uns unter hello@globalfoodrecipes.com kontaktieren.