Do czego służy plik robots.txt?

728x90

Plik robots.txt jest jednym z pierwszych plików, sprawdzanym przez roboty indeksujące witrynę. W pliku tym definiowane są informacje dotyczące części serwisu, których nie chcesz udostępniać robotom.

Do procesu wyszukiwania nowych materiałów w sieci Internet wykorzystywane są tak zwane roboty (boty), które podążają za hiperłączami (linkami) i indeksują całą zawartość danej strony WWW do katalogu wyszukiwarki. Robota indeksującego można określić jako część wyszukiwarki internetowej (np. Google), która przegląda i analizuje strony WWW, by następnie dodać o nich informacje do bazy wyszukiwarki.

WAŻNE! Plik “robots.txt” ogranicza dostęp do Twojej strony WWW robotom wyszukiwarek, które przeszukują Internet. Dla przykładu, możesz zabronić indeksowanie całej lub tylko wybranej części Twojej strony WWW! Przykładowo, możesz nie chcieć, aby Twoje prywatne dane pojawiły się w wynikach wyszukiwania Google.

Plik robots.txt dla sklepu internetowego możesz edytować w opcji menu KONFIGURACJA –> MARKETING –> POZYCJONOWANIE. Aby zmodyfikować jego zawartość:

  1. Zaloguj się do Twojego Panelu eSklep.
  2. Przejdź do opcji menu KONFIGURACJA –> MARKETING –> POZYCJONOWANIE.
  3. Kliknij zakładkę Zaawansowane, która znajduje się po lewej stronie ekranu.
    zaawansowane-pozycjonowanie
  4. Na ekranie zostanie wyświetlony formularz, w którym będziesz mógł zdefiniować reguły znajdujące się w pliku robots.txt dla Twojego sklepu.
    robots
  5. Wpisz reguły dot. indeksowania, które mają obowiązywać w Twoim sklepie internetowym i kliknij przycisk Zapisz. Podczas uzupełniania reguł możesz skorzystać z poniższych przykładów.

Wykluczenie całego serwisu z procesu indeksowania:

User-agent: *
Disallow: /

Wykluczenie części serwisu z procesu indeksowania:

User-agent: *
Disallow: /katalog1/
Disallow: /katalog2/

Wykluczenie całego serwisu z procesu indeksowania przez robota Google:

User-agent: Googlebot
Disallow: /

Jeżeli chcesz, aby roboty wyszukiwarek miały dostęp do całego serwisu, wprowadź poniższy zapis:

User-agent: *
Disallow:

WAŻNE! Modyfikacja pliku .htaccess nie jest objęta pomocą techniczną, a wprowadzanie jakichkolwiek zmian może spowodować problemy z funkcjonowaniem sklepu lub jego całkowite unieruchomienie. W razie niedogodności z funkcjonowaniem sklepu skontaktuj się z Biurem Obsługi Klienta.

Więcej rozwiązań

  • Czy artykuł był pomocny ?
  • Tak   Nie

Tematy powiązane

Szukaj
Generic filters
Tylko dokładne dopasowania
Szukaj w tytułach
Szukaj w treści
Wyświetl posty typu:
lub