Sobre o Globalfoodrecipesbot
O GlobalFoodRecipesBot lê páginas públicas de receitas de um pequeno número de sites parceiros e de referência. Respeita o robots.txt (incluindo o Crawl-delay), aguarda vários segundos entre pedidos, reduz a velocidade quando um servidor o solicita e nunca descarrega vídeos.
Os proprietários de sites podem bloqueá-lo com User-agent: GlobalFoodRecipesBot no robots.txt ou contactar-nos em hello@globalfoodrecipes.com.