Słowo kluczowe: automat

Do czego służy plik robots.txt?

Plik “robots.txt” jest jednym z mechnizmów “Robots Exclusion Protocol”, który został stworzony w celu informowania automatów (botów) o tym, czego nie powinny robić na stronie […]