Robot Exclusion Profil
Ce document est une spécification microformat draft. Bien que les "drafts" soient en quelque sorte mâtures dans le processus de développement, la stabilité de ce document ne peut être garantie, et les implémenteurs doivent être prêts à rester informés des futurs développements et modifications. Suivez cette page wiki, ou suivez les discussions sur la liste de discussion microformats-new pour rester informé.
Spécification Brouillon du 18-06-2005
Auteurs
- Peter Janes
- (traduction française : Christophe Ducamp)
Copyright
De par la sortie dans le domaine public des pages utilisateur des auteurs et contributeurs (Peter Janes, Ryan King, Tantek Çelik), cette spécification est versée dans le domaine public.
Obligation de Contribution dans le Domaine Public. Du fait que les auteurs aient diffusé leurs travaux dans le domaine public, afin de maintenir ce statut de travail dans le domaine public, tous les contributeurs sur cette page sont aussi d'accord pour publier leurs contributions sur cette page dans le domaine public. Les contributeurs peuvent indiquer leur accord en ajoutant le modèle de sortie dans le domaine public (http://microformats.org/wiki/Template:public-domain-release) à leurs pages-utilisateur selons les instructions "Voluntary Public Domain Declarations" (http://microformats.org/wiki/Category:public_domain_license). Les contributions non publiées dans le domaine public peuvent être révoquées/retirées.
Brevets
L'auteur ne détient ni n'a l'intention d'appliquer quelque brevet sur tout ce qui est requis pour mettre en oeuvre cette spécification.
Abstract
Le Profil Robot Exclusion est un retravail de la balise Robots META (et des extensions moins standards) sous un microformat.
Introduction
La balise Robots META est utilisée pour fournir une direction spécifique-à-une-page pour les crawlers web. Tout en étant utile dans beaucoup de cas, sa nature spécifique-à-une-page veut dire qu'elle ne peut pas être utilisée pour empêcher les crawlers d'indexer seulement certaines sections d'un document. Plusieurs tentatives ont été produites pour créer des solutions plus granulaires à travers différentes méthodes mais ont été perçues comme des raccourcis qui limitent leur utilisation ; Le Profil Exclusion Robot détinit un microformat qui peut être appliqué à n'importe quel élément ou ensemble d'éléments dans une page.
Comme d'autres microformats tels que hCalendar, le Profil Robot Exclusion définit un ensemble de noms de classe qui peuvent être appliqués aux éléments (X)HTML. class peut être appliqué à presque tout élément (X)HTML, ce qui veut dire que les auteurs peuvent être aussi spécifiques ou générer comme ils le souhaitent dans leurs applications. Ceci diffère de l'attribut similaire rel="nofollow" qui ne peut être appliqué qu'à un lien spécifique (et ne fait pas référence au contenu) dans la ligne. (Il est intéressant de noter que ce comportement est complètement englobé par l'utilisation de class="robots-nofollow" sur le même élément.) Les classes sont aussi additives, ainsi plusieurs valeurs peuvent être spécifiées en une fois, par ex. class="robots-nofollow robots-noindex". Pour l'exclusion de robot en particulier, ceci permet aux auteurs de spécifier plusieurs règles pour un élément sans ajouter quelque balisage supplémentaire non nécessaire.
Format
Profile URI
http://exemple.org/xmdp/robots-profile# (évidemment conteneur)
Les classes définies par le Profil Robot Exclusion devraient être considérées sans sens quand le profil URI n'est pas présent dans le document attribut profile du <head>.
Profil XMDP
<dl class="profile"> <dt id="robots-nofollow">robots-nofollow</dt> <dd> Informe les robots que les liens contenus par l'élément ne doivent pas être suivis. </dd> <dt id="robots-follow">robots-follow</dt> <dd> Informe les robots que les liens contenus par l'élément doivent être suivis. </dd> <dt id="robots-noindex">robots-noindex</dt> <dd> Informe les robots que le contenu de l'élément ne doit pas être inclus comme section de la page. </dd> <dt id="robots-noanchortext">robots-noanchortext</dt> <dd> Informe les robots que le document en lien cible ne doit pas être indexé sous l'ancre texte. </dd> <dt id="robots-anchortext">robots-anchortext</dt> <dd> Informe les robots que le document en lien cible doit être indexé sous l'ancre texte. </dd> <dt id="robots-index">robots-index</dt> <dd> Informe les robots que le contenu de l'élément doit être inclus comme section de la page. </dd> <dt id="robots-noarchive">robots-noarchive</dt> <dd> Informe les caches des robots que le contenu de l'élément ne doit pas être inclus dans leur copie cachée. </dd> <dt id="robots-archive">robots-archive</dt> <dd> Informe les caches des robots que le contenu de l'élément doit être inclus dans leur copie cachée. </dd> </dl>
Exemples
Retirer le contenu de la page :
<head profile=”http://exemple.org/xmdp/robots-profile#”> ... <div class=”robots-noindex”>Il était une fois un homme de Nantucket…</div> <p>Cette page ne parle pas de <span class=”robots-noindex”>pornographie</span>.</p>
Afficher le nofollow en conjonction avec votelinks, et l'appliquer en parallèle avec rel-nofollow :
<head profile=”http://exemple.org/xmdp/robots-profile#”>
...
<p class=”robots-nofollow”>Ceci est <a href=”http://exemple.com/bogus”>un lien bogus</a>
et ceci se fait comme <a href=”http://exemple.net/bogus”>ça</a>.</p>
<p>Je n'aime pas <a rel="nofollow" rev="vote-against" class="robots-nofollow"
href="http://example.com/disagree">cette page</a>
mais j'aime vraiment <a rev="vote-for" href="http://exemple.com/agree">celle-là</a>.</p>
Empêcher les images d'être sauvegardées par les moteurs de recherche, les forcer à être retrouvées à partir du site web original :
<head profile="http://exemple.org/xmdp/robots-profile#"> ... <p><img src="exemple.png" class="robots-noarchive" alt="Image privée" /></p>
Une conséquence à cela est que les petits résumés qu'affichent les moteurs de recherche avec les liens résultants excluent aussi le robots-noarchive. Nous suggérons de remplacer les petits segments exclus avec une ellipse [...]. Les segments non archivés d'une taille comparable aux segments qu'utile normalement le moteur de recherche pour les résumés peuvent juste être omis. Probablement un affichage d'un document complètement caché qui a des segments non archivés devrait inclure aussi quelque locution pour afficher les endroits où le texte a été retiré, peut importe sa taille.
Un exemple plus complexe est disponible qui montre aussi comment la métadonnée robots peut être visualisée.
Références
Normative
Informative
- A Standard for Robot Exclusion
- Googlebot Frequently Asked Questions
- The ROBOTS META Tag
- RelNoFollow Draft Specification
- Cette page a été contribuée à partir du wiki des développeurs de technorati.