Back to Question Center
0

Semalt all robots robots.txt

1 answers:

私の ロボット. txt ファイル私は自分のサイトでインデックスを作成することが許可されていないロボットのリストを持っており、残りのすべての他のロボットを許可する必要がありますが、私はこれらの2つのルール間の実際の違いを知りたい:

   ユーザエージェント:*
Disallow:   

およびこれ:

   ユーザエージェント:*
許可:/   
- 6SE9221-3CC40 SIEMENS
February 13, 2018
Semalt all robots robots.txt
Reply