О A11ywatchbot

A11ywatchbot - это веб-паук для веб-движка доступности a11ywatch.com.

Веб-паук собирает HTML-код для проверки веб-сайтов, которые сканируются через A11yWatch.com. Только платные аккаунты имеют доступ к полному сканированию веб-сайтов.

Requests from A11ywatchbot set the User-Agent to:
Mozilla/5.0 (compatible; A11ywatchbot/1.0; +https://a11ywatch.com/a11ywatchbot)
and originate from IPs where reverse DNS shows it in the *.a11ywatch.com domain. For example:

$ host 3.142.27.87 87.27.142.3.in-addr.arpa

domain name pointerec2-3-142-27-87.us-east-2.compute.amazonaws.com

Standard directives in robots.txt that target A11ywatchbot are respected. For example, the following will allow A11ywatchbot to crawl all pages, except those under /app/:

User-Agent: A11ywatchbot

Allow: /Disallow: /app/

A11ywatchbot also supports the crawl-delay directive in robots.txt files. It interprets the value as the minimum duration, in seconds, between the start of consecutive requests. For example, assume you have specified the following in your robots.txt file:

User-Agent: A11ywatchbot

Crawl-delay: 5

У нас есть открытая версия краулера, расширяющая спайдер - самый быстрый веб-краулер OSS, доступный на GitHub. Мы активно поддерживаем оба проекта на GitHub.

Если у вас возникли вопросы или вы считаете, что A11ywatchbot влияет на работу вашего сайта, не стесняйтесь связаться с нами по адресу support@a11ywatch.com.

Оставайтесь включительными с уверенностью

Начните сейчас с A11yWatch для автоматизированных, эффективных и доступных инструментов для веб-доступности.

Начать