Do czego służy plik robots.txt?

Ostatnia aktualizacja: 3 listopada 2023
23 października 2023 r. usługa eSklep została zastąpiona przez sklepy Shoper od home.pl.
Załóż sklep i:

  • Wygodnie sprzedawaj w wielu kanałach, m.in. Allegro i OLX,
  • Łatwo zmieniaj jego wygląd, dzięki gotowym szablonom,
  • Zarządzaj sprzedażą z dowolnego urządzenia,
  • Docieraj z ofertą do klientów przez blog i newsletter.

Chcesz sprawdzić, jak to działa? Przetestuj sklep Shoper od home.pl przez 14 dni za darmo.

CHCĘ PRZETESTOWAĆ SKLEP ZA DARMO

Szukasz innej platformy do sprzedaży w sieci? Poznaj więcej możliwości na otwarcie sklepu internetowego.

Plik robots.txt jest jednym z pierwszych plików, sprawdzanym przez roboty indeksujące witrynę. W pliku tym definiowane są informacje dotyczące części serwisu, których nie chcesz udostępniać robotom. Jego odpowiednia konfiguracja wpłynie na pozycjonowanie Twojej witryny internetowej.

Do procesu wyszukiwania nowych materiałów w sieci Internet wykorzystywane są tak zwane roboty (boty), które podążają za hiperłączami (linkami) i indeksują całą zawartość danej strony WWW do katalogu wyszukiwarki. Robota indeksującego można określić jako część wyszukiwarki internetowej (np. Google), która przegląda i analizuje strony WWW, by następnie dodać o nich informacje do bazy wyszukiwarki.

WAŻNE! Plik „robots.txt” ogranicza dostęp do Twojej strony WWW robotom wyszukiwarek, które przeszukują Internet. Dla przykładu, możesz zabronić indeksowanie całej lub tylko wybranej części Twojej strony WWW! Przykładowo, możesz nie chcieć, aby Twoje prywatne dane pojawiły się w wynikach wyszukiwania Google.

Plik robots.txt dla sklepu internetowego możesz edytować w opcji menu Ustawienia > Zaawansowane > SEO. Aby zmodyfikować jego zawartość:

  1. Zaloguj się do Twojego Panelu eSklep.
  2. Przejdź do opcji menu  Ustawienia > Zaawansowane > SEO
  3. Kliknij zakładkę Zaawansowane, która znajduje się po lewej stronie ekranu.
  4. Na ekranie zostanie wyświetlony formularz, w którym będziesz mógł zdefiniować reguły znajdujące się w pliku robots.txt dla Twojego sklepu.
  5. Wpisz reguły dot. indeksowania, które mają obowiązywać w Twoim sklepie internetowym i kliknij przycisk Zapisz. Podczas uzupełniania reguł możesz skorzystać z poniższych przykładów.

Wykluczenie całego serwisu z procesu indeksowania:

User-agent: *
Disallow: /

Wykluczenie części serwisu z procesu indeksowania:

User-agent: *
Disallow: /katalog1/
Disallow: /katalog2/

Wykluczenie całego serwisu z procesu indeksowania przez robota Google:

User-agent: Googlebot
Disallow: /

Jeżeli chcesz, aby roboty wyszukiwarek miały dostęp do całego serwisu, wprowadź poniższy zapis:

User-agent: *
Disallow:

WAŻNE! Modyfikacja pliku .htaccess nie jest objęta pomocą techniczną, a wprowadzanie jakichkolwiek zmian może spowodować problemy z funkcjonowaniem sklepu lub jego całkowite unieruchomienie. W razie niedogodności z funkcjonowaniem sklepu skontaktuj się z Biurem Obsługi Klienta.
Więcej rozwiązań
  • Czy artykuł był pomocny ?
  • Tak   Nie

Powiązane artykuły

  • Jak załączyć plik PDF do strony informacyjnej?
    Do każdej, tworzonej w sklepie strony informacyjnej, możesz dodać dodatkowy załącznik w formie pliku PDF. Plik ten może zawierać dowolne informacje – może być to...
  • Jak dodać moduł w podsumowaniu zamówienia?
    W związku z wymogami Ustawy o prawach konsumenta, klient powinien zostać poinformowany o możliwości odstąpienia od umowy kupna. Taka informacja może pojawić się zarówno w...
  • Jak dodać zawartość modułu suwak/slider?
    Jak dodać moduł suwak/slider? Czym różni się obraz tła od zdjęcia Jak prawidłowo dodawać kolejne slajdy do modułu suwak/slider? Jak dodać moduł suwak/slider? Aby dodać...
  • Jak usunąć oznaczenie „Bestseller” lub „Nowość”?
    W sklepie internetowym Shoper możesz ustawić automatyczne lub ręczne przypisywanie oznaczeń Nowość lub Bestseller. Dzięki temu możesz sam decydować, jaka forma promocji danego produktu będzie...
  • Formularz reCaptcha
    reCAPTCHA to rozwiązanie, które umożliwia ochronę stron internetowych przed spamem. Umożliwia wprowadzenie na stronie WWW, np. w formularzu kontaktowym, rejestracji, logowania, dynamicznego elementu, zabezpieczenia, które...
jak się zalogować, jak zmienić hasło, jak opłacić, gdzie faktura, przypisanie domeny.
lub
sprawdź kategorie pomocy
i wyświetl 2553 wpisów
AdWords baner reklamowy blogspot Click Web do pobrania faktury ZW hosting hurtownia AB konfiguracja serwera konto użytkownika kopia bezpieczeństwa książka adresowa messenger na skróty opcja opinie pakiet usług pamięć podręczna pierwsze kroki plugin Poczta e-mail podgląd podstawowe informacje pojemność pomoc Pop-up kreator projekt graficzny promocja regulamin rekord SPF relacyjny system rezygnacja skrzynki e-mail SoundCloud stała ukryta kopia uprawnienia VAT wariant kolorystyczny webmail WHOIS widok konsoli wyrażenia regularne wyszukiwarka zmiana danych