Back to Question Center
0

Semalt: robots.txt: blokuje všechny webové stránky kromě několika webových stránek?

1 answers:

Mám několik pochybností ohledně robotů. txt . Řekni, že má doména stackoverflow. com ,

A) Bude níže uvedený kód pro všechny prolézací moduly následující?

     User-agent: *Zakázat: /Povolit: / $
Povolit: / a / $
Povolit: / a / přihlásit. php
Povolit: / a / přihlásit. php? return = / pligg /    
  1. Přijetí http: // stackoverflow - boat market value guide. com / přijme http: // stackoverflow. com taky?

  2. Přijetí http: // stackoverflow. com / a /

  3. Přijetí http: // stackoverflow. com / a / login. php

  4. Přijetí http: // stackoverflow. com / a / login. php? return = / pligg /

  5. Nepřijímáte žádnou jinou stránku na http: // stackoverflow. com

B) Který je správný: roboty. txt nebo robot. txt ?

February 13, 2018