reorganized levels,
added content updated dependencies
This commit is contained in:
parent
6214c827eb
commit
7f356d807a
32 changed files with 11143 additions and 2043 deletions
15
docs/dev/fragments/base/02-robots.md
Normal file
15
docs/dev/fragments/base/02-robots.md
Normal file
|
@ -0,0 +1,15 @@
|
|||
# robots.txt
|
||||
|
||||
Le fichier `robots.txt` est un fichier placé à la racine du dossier web. Il permet de donner des instructions aux moteurs de recherche qui visitent un site.
|
||||
|
||||
Dans sa configuration la plus simple, il permet d'autoriser ou d'interdire l'indexation d'un site par les moteurs de recherche.
|
||||
|
||||
[Documentation plus complète.](http://robots-txt.com/)
|
||||
|
||||
## Autoriser
|
||||
|
||||
<<< @/snippets/robots.txt#allow
|
||||
|
||||
## Interdire
|
||||
|
||||
<<< @/snippets/robots.txt#disallow
|
Loading…
Add table
Add a link
Reference in a new issue