Slo-Tech
|
Avtor Matej Huš
|
sreda, 15. oktober 2025 ob 22:25 |
Vsako spletišče je imelo v korenskem direktoriju datoteko robots.txt, v kateri so bila navodila za pajke, ki se plazijo po internetu. V njej smo lahko na primer Googlove robotke prijazno prosili,...
|