Robots Exclusion Checker — rozszerzenie SEO dla Google Chrome
Jest to rozszerzenie SEO dla Google Chrome, które jest przydatne dla każdego dewelopera witryny, aby sprawdzić, czy jego witryna jest blokowana przez roboty. txt lub meta roboty.
Roboty Sprawdzanie wykluczeń to bardzo popularna funkcja, która jest powszechnie używana przez webmasterów do kontrolowania wyszukiwania silnik roboty i roboty sieciowe, które przeglądają strony internetowe. Roboty są używane przez wyszukiwarki do indeksowania i katalogowania stron internetowych w witrynie. Nie mogą czytać kodu HTML ani innego kodu znajdującego się na stronie internetowej. Roboty służą do określenia, czy witryna została zablokowana przez plik robotów.txt.
Oprócz tego istnieje klient użytkownika funkcja. Możesz wybrać agenta użytkownika dla wyszukiwarek do testowania stron internetowych. Korzystając z tego, będziesz w stanie określić, do jakiego rodzaju robota mają dostęp wyszukiwarki. Jest to przydatne dla każdego programisty, który musi wiedzieć, czy witryna jest blokowana przez roboty.
