Robot Exclusion Profil

(Difference between revisions)

Jump to: navigation, search
m (XMDP Profile)
Current revision (14:15, 2 September 2009) (view source)
m ([fr : sync'd with original page])
 
(2 intermediate revisions not shown.)
Line 1: Line 1:
-
= Profil Robot Exclusion =
+
<entry-title>Robot Exclusion Profil</entry-title>
-
__TOC__
+
{{DraftSpecification-fr}}
== Spécification Brouillon du 18-06-2005 ==
== Spécification Brouillon du 18-06-2005 ==
Line 8: Line 8:
=== Copyright ===
=== Copyright ===
-
Cette spécification est © 2004-2005 par l'auteur. Néanmoins, l'auteur a pour intention de soumettre cette spécification à un corps de standards avec une politique libérale de copyright telle que le [http://gmpg.org/ GMPG]. Voir les [http://gmpg.org/principles Principes GMPG] pour plus de détails. Quiconque souhaitant contribuer à cet effort DOIT lire ces principes, tout spécialement ceux considérant le copyright et la licence, et être d'accord avec eux avant de contribuer.
+
De par la sortie dans le domaine public des pages utilisateur des auteurs et contributeurs ([[User:PeterJ|Peter Janes]], [[User:RyanKing|Ryan King]], [[User:Tantek|Tantek Çelik]]), cette spécification est versée dans le domaine public.
 +
 
 +
Obligation de Contribution dans le Domaine Public. Du fait que les auteurs aient diffusé leurs travaux dans le domaine public, afin de maintenir ce statut de travail dans le domaine public, tous les contributeurs sur cette page sont aussi d'accord pour publier leurs contributions sur cette page dans le domaine public. Les contributeurs peuvent indiquer leur accord en ajoutant le modèle de sortie dans le domaine public (http://microformats.org/wiki/Template:public-domain-release) à leurs pages-utilisateur selons les instructions "Voluntary Public Domain Declarations" (http://microformats.org/wiki/Category:public_domain_license). Les contributions non publiées dans le domaine public peuvent être révoquées/retirées.
=== Brevets ===
=== Brevets ===
Line 14: Line 16:
== Abstract ==
== Abstract ==
-
Le Profil Robot Exclusion est un retravail de la balise Robots META (et des extensions moins standards) sous un [[microformat-fr|microformat]].
+
Le Profil Robot Exclusion est un retravail de la balise [[Robots META]] (et des extensions moins standards) sous un [[microformat-fr|microformat]].
== Introduction ==
== Introduction ==
-
La balise [http://www.robotstxt.org/wc/meta-user.html Robots META] est utilisée pour fournir une direction spécifique-à-une-page pour les crawlers web. Tout en étant utile dans beaucoup de cas, sa nature spécifique-à-une-page veut dire qu'elle ne peut pas être utilisée pour empêcher les crawlers d'indexer seulement certaines sections d'un document. Plusieurs tentatives ont été produites pour créer des solutions plus granulaires à travers différentes méthodes mais ont été perçues comme des raccourcis qui limitent leur utilisation ; Le Profil Exclusion Robot détinit un microformat qui peut être appliqué à n'importe quel élément ou ensemble d'éléments dans une page.
+
La balise [[Robots META]] est utilisée pour fournir une direction spécifique-à-une-page pour les crawlers web. Tout en étant utile dans beaucoup de cas, sa nature spécifique-à-une-page veut dire qu'elle ne peut pas être utilisée pour empêcher les crawlers d'indexer seulement certaines sections d'un document. Plusieurs tentatives ont été produites pour créer des solutions plus granulaires à travers différentes méthodes mais ont été perçues comme des raccourcis qui limitent leur utilisation ; Le Profil Exclusion Robot détinit un microformat qui peut être appliqué à n'importe quel élément ou ensemble d'éléments dans une page.
Comme d'autres microformats tels que [[hcalendar-fr|hCalendar]], le Profil Robot Exclusion définit un ensemble de noms de classe qui peuvent être appliqués aux éléments (X)HTML. <code>class</code> peut être appliqué à presque tout élément (X)HTML, ce qui veut dire que les auteurs peuvent être aussi spécifiques ou générer comme ils le souhaitent dans leurs applications.  Ceci diffère de l'attribut similaire <code>rel="nofollow"</code> qui ne peut être appliqué qu'à un lien spécifique (et ne fait pas référence au contenu) dans la ligne. (Il est intéressant de noter que ce comportement est complètement englobé par l'utilisation de <code>class="robots-nofollow"</code> sur le même élément.)  Les classes sont aussi additives, ainsi plusieurs valeurs peuvent être spécifiées en une fois, par ex. <code>class="robots-nofollow robots-noindex"</code>.  Pour l'exclusion de robot en particulier, ceci permet aux auteurs de spécifier plusieurs règles pour un élément sans ajouter quelque balisage supplémentaire non nécessaire.
Comme d'autres microformats tels que [[hcalendar-fr|hCalendar]], le Profil Robot Exclusion définit un ensemble de noms de classe qui peuvent être appliqués aux éléments (X)HTML. <code>class</code> peut être appliqué à presque tout élément (X)HTML, ce qui veut dire que les auteurs peuvent être aussi spécifiques ou générer comme ils le souhaitent dans leurs applications.  Ceci diffère de l'attribut similaire <code>rel="nofollow"</code> qui ne peut être appliqué qu'à un lien spécifique (et ne fait pas référence au contenu) dans la ligne. (Il est intéressant de noter que ce comportement est complètement englobé par l'utilisation de <code>class="robots-nofollow"</code> sur le même élément.)  Les classes sont aussi additives, ainsi plusieurs valeurs peuvent être spécifiées en une fois, par ex. <code>class="robots-nofollow robots-noindex"</code>.  Pour l'exclusion de robot en particulier, ceci permet aux auteurs de spécifier plusieurs règles pour un élément sans ajouter quelque balisage supplémentaire non nécessaire.
Line 23: Line 25:
== Format ==
== Format ==
=== Profile URI ===
=== Profile URI ===
-
<code><nowiki>http://exemple.org/xmdp/robots-profile#</nowiki></code> (évidemment préliminaire)
+
<code><nowiki>http://exemple.org/xmdp/robots-profile#</nowiki></code> (évidemment conteneur)
Les classes définies par le Profil Robot Exclusion devraient être considérées sans sens quand le profil URI n'est pas présent dans le document attribut <code>profile</code> du <code>&lt;head&gt;</code>.
Les classes définies par le Profil Robot Exclusion devraient être considérées sans sens quand le profil URI n'est pas présent dans le document attribut <code>profile</code> du <code>&lt;head&gt;</code>.
Line 72: Line 74:
</nowiki></pre>
</nowiki></pre>
-
Afficher le <code>nofollow</code> en conjonction avec [[vote-links-fr|votelinks]], et l'appliquer en parallèle avec [[rel-nofollow-fr|relnofollow]] :
+
Afficher le <code>nofollow</code> en conjonction avec [[vote-links-fr|votelinks]], et l'appliquer en parallèle avec [[rel-nofollow-fr|rel-nofollow]] :
<pre><nowiki>
<pre><nowiki>
Line 92: Line 94:
<p><img src="exemple.png" class="robots-noarchive" alt="Image privée" /></p>
<p><img src="exemple.png" class="robots-noarchive" alt="Image privée" /></p>
</nowiki></pre>
</nowiki></pre>
 +
 +
Une conséquence à cela est que les petits résumés qu'affichent les moteurs de recherche avec les liens résultants excluent aussi le <code>robots-noarchive</code>. Nous suggérons de remplacer les petits segments exclus avec une ellipse [<code>...</code>]. Les segments non archivés d'une taille comparable aux segments qu'utile normalement le moteur de recherche pour les résumés peuvent juste être omis. Probablement un affichage d'un document complètement caché qui a des segments non archivés devrait inclure aussi quelque locution pour afficher les endroits où le texte a été retiré, peut importe sa taille.
Un [http://peterjanes.ca/2005/robots/example exemple plus complexe] est disponible qui montre aussi comment la métadonnée robots peut être [http://tantek.com/log/2005/06.html#d03t2359 visualisée].
Un [http://peterjanes.ca/2005/robots/example exemple plus complexe] est disponible qui montre aussi comment la métadonnée robots peut être [http://tantek.com/log/2005/06.html#d03t2359 visualisée].
Line 98: Line 102:
=== Normative ===
=== Normative ===
* [http://gmpg.org/xmdp/ XMDP]
* [http://gmpg.org/xmdp/ XMDP]
-
* [http://www.robotstxt.org/wc/meta-user.html Le Tag Robots META Tag]
+
* [http://www.robotstxt.org/wc/meta-user.html Le Tag Robots META Tag]  
-
 
+
=== Informative ===
=== Informative ===
* [http://www.robotstxt.org/wc/norobots.html A Standard for Robot Exclusion]
* [http://www.robotstxt.org/wc/norobots.html A Standard for Robot Exclusion]
Line 112: Line 115:
* [http://www.joesapt.net/ Joe D'Andrea]
* [http://www.joesapt.net/ Joe D'Andrea]
-
== Problématiques ==
+
== pages en rapport ==
-
Ce sont des problématiques ouvertes qui ont émergé dans différents forums. Les problématiques d'efficacité et de "dommages collatéraux" provenant de [[relnofollow#open_issues|rel="nofollow"]] s'appliquent aussi.
+
* <span id="Issues-fr"> [[robots-exclusion-issues]]</span>
-
 
+
* [[robots-exclusion-brainstorming]]
-
=== Précédence ===
+
-
* Est-ce que les valeurs plus anciennes prennent la précédence ou plus tard ? Est-ce que <code>class="robots-nofollow robots-follow"</code> veut dire la même chose que  <code>class="robots-nofollow"</code> ou <code>class="robots-follow"</code>?
+
-
* Le tag <code>meta</code> suggère de ne pas utiliser de directives en conflit ou se répétant et ainsi ne spécifie pas la précédence.
+
-
* L'interaction avec [[rel-nofollow-fr|relnofollow]] : que veut dire <code>class="robots-follow" rel="nofollow"</code> ?  Actuellement, [[rel-nofollow-fr|relnofollow]] n'a pas de profil URI défini, aussi le Robot Exclusion Profile prend la précédence. Dans le futur, selon [http://gmpg.org/xmdp/description#multiple Using Multiple Profiles] de XMDP , <q>les URIs dans l'attribut 'profile' doivent être traités les plus significatives (en premier) jusqu'aux moins significatives (en dernier).</q>
+
-
 
+
-
=== Spécificité ===
+
-
* Ne permet pas le contrôle d'UAs spécifiques à la [http://www.robotstxt.org/wc/norobots.html A Standard for Robot Exclusion]
+
-
 
+
-
Si c'est vraiment nécessaire de contrôler des UAs spécifiques, il y a ici une solution possible.
+
-
Exemple :
+
-
 
+
-
<pre><nowiki>
+
-
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
+
-
<html>
+
-
<head>
+
-
<link rel="schema.RobotExclusion" href="http://example.org/.../" />
+
-
<meta name="RobotExclusion.RobotName1" content="Foo Bot" />
+
-
<meta name="RobotExclusion.RobotName2" content="Bar Bot" />
+
-
<meta name="RobotExclusion.RobotName3" content="Evil Bot" />
+
-
</head>
+
-
<body>
+
-
<h1>Page</h1>
+
-
<p class="robots-noindex">Ce paragraphe ne devrait pas être indexé par quelque robot.</p>
+
-
<p class="robot3-noindex">Ce paragraphe devrait être indexé par chaque robot mis à part "Evil Bot".</p>
+
-
<p class="robots-noindex robot1-index">Ce paragraphe devrait être indexé par n'importe quel robot mis à part "Foo Bot".</p>
+
-
</div>
+
-
</body>
+
-
</html>
+
-
</nowiki></pre>
+
-
Bien sûr c'est une perte de bande passante s'il y a des méta tags "RobotExclusion.RobotName" sur chaque page d'un site web. De ce fait les métatags devraient être stockés sur une page - peut-être la page principale - ainsi ils peuvent être facilement maintenus.
+
-
 
+
-
<pre><nowiki>
+
-
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
+
-
<html>
+
-
<head>
+
-
<link rel="schema.RobotExclusion" href="http://example.org/.../" />
+
-
<link rel="RobotExclusion.Names" href="http://mypage.com/" />
+
-
</head>
+
-
<body>
+
-
<h1>Page</h1>
+
-
<p class="robots-noindex">Ce paragraphe ne devrait pas être indexé par quelque robot.</p>
+
-
<p class="robot3-noindex">Ce paragraphe devrait être indexé par chaque robot mis à part "Evil Bot".</p>
+
-
<p class="robots-noindex robot1-index">Ce paragraphe devrait être indexé par n'importe quel robot mis à part "Foo Bot".</p>
+
-
</div>
+
-
</body>
+
-
</html>
+
-
</nowiki></pre>
+
-
 
+
-
=== Mots-clés ===
+
-
* Les mots-clés <code>all</code> et <code>none</code> sont définis par le Tag Robots META comme des raccourcis pratiques pour activer ou désactiver la combinaison de <code>nofollow</code> et <code>noindex</code>, mais viennent avant le <code>noarchive</code> de Google et ne devraient pas être considérés pour l'inclure. Le résultat, pour des buts de clarté et simplicité (le [http://gmpg.org/xmdp/description#principles principe du Minimalisme XMDP]), ils ne sont pas inclus dans cette version du Profile Robot Exclusion Profile.
+
-
=== Appropriation en tant que microformat ===
+
[[Category:Draft Specifications]]
-
* Est-ce que le Profile Robot Exclusion n'est pas conçu d'abord pour les machines et ensuite pour les humaines au lieu de l'inverse ? Oui, tout comme [[rel-nofollow-fr|relnofollow]], le microformat déployé qu'il est conçu pour remplacer.
+
[[Category:robots-exclusion]]
-
* J'aimerais donner écho à ce problème. Nous avons besoin de discuter si oui ou non c'est un microformat approprié. --[[User:RyanKing|RyanKing]] 13:34, 17 Jan 2006 (PST)
+

Current revision

Ce document est une spécification microformat draft. Bien que les "drafts" soient en quelque sorte mâtures dans le processus de développement, la stabilité de ce document ne peut être garantie, et les implémenteurs doivent être prêts à rester informés des futurs développements et modifications. Suivez cette page wiki, ou suivez les discussions sur la liste de discussion microformats-new pour rester informé.

Contents

Spécification Brouillon du 18-06-2005

Auteurs

Copyright

De par la sortie dans le domaine public des pages utilisateur des auteurs et contributeurs (Peter Janes, Ryan King, Tantek Çelik), cette spécification est versée dans le domaine public.

Obligation de Contribution dans le Domaine Public. Du fait que les auteurs aient diffusé leurs travaux dans le domaine public, afin de maintenir ce statut de travail dans le domaine public, tous les contributeurs sur cette page sont aussi d'accord pour publier leurs contributions sur cette page dans le domaine public. Les contributeurs peuvent indiquer leur accord en ajoutant le modèle de sortie dans le domaine public (http://microformats.org/wiki/Template:public-domain-release) à leurs pages-utilisateur selons les instructions "Voluntary Public Domain Declarations" (http://microformats.org/wiki/Category:public_domain_license). Les contributions non publiées dans le domaine public peuvent être révoquées/retirées.

Brevets

L'auteur ne détient ni n'a l'intention d'appliquer quelque brevet sur tout ce qui est requis pour mettre en oeuvre cette spécification.

Abstract

Le Profil Robot Exclusion est un retravail de la balise Robots META (et des extensions moins standards) sous un microformat.

Introduction

La balise Robots META est utilisée pour fournir une direction spécifique-à-une-page pour les crawlers web. Tout en étant utile dans beaucoup de cas, sa nature spécifique-à-une-page veut dire qu'elle ne peut pas être utilisée pour empêcher les crawlers d'indexer seulement certaines sections d'un document. Plusieurs tentatives ont été produites pour créer des solutions plus granulaires à travers différentes méthodes mais ont été perçues comme des raccourcis qui limitent leur utilisation ; Le Profil Exclusion Robot détinit un microformat qui peut être appliqué à n'importe quel élément ou ensemble d'éléments dans une page.

Comme d'autres microformats tels que hCalendar, le Profil Robot Exclusion définit un ensemble de noms de classe qui peuvent être appliqués aux éléments (X)HTML. class peut être appliqué à presque tout élément (X)HTML, ce qui veut dire que les auteurs peuvent être aussi spécifiques ou générer comme ils le souhaitent dans leurs applications. Ceci diffère de l'attribut similaire rel="nofollow" qui ne peut être appliqué qu'à un lien spécifique (et ne fait pas référence au contenu) dans la ligne. (Il est intéressant de noter que ce comportement est complètement englobé par l'utilisation de class="robots-nofollow" sur le même élément.) Les classes sont aussi additives, ainsi plusieurs valeurs peuvent être spécifiées en une fois, par ex. class="robots-nofollow robots-noindex". Pour l'exclusion de robot en particulier, ceci permet aux auteurs de spécifier plusieurs règles pour un élément sans ajouter quelque balisage supplémentaire non nécessaire.

Format

Profile URI

http://exemple.org/xmdp/robots-profile# (évidemment conteneur)

Les classes définies par le Profil Robot Exclusion devraient être considérées sans sens quand le profil URI n'est pas présent dans le document attribut profile du <head>.

Profil XMDP

<dl class="profile">
 <dt id="robots-nofollow">robots-nofollow</dt>
 <dd>
  Informe les robots que les liens contenus par l'élément ne doivent pas être suivis.
 </dd>
 <dt id="robots-follow">robots-follow</dt>
 <dd>
  Informe les robots que les liens contenus par l'élément doivent être suivis.
 </dd>
 <dt id="robots-noindex">robots-noindex</dt>
 <dd>
  Informe les robots que le contenu de l'élément ne doit pas être inclus comme section de la page. 
 </dd>
 <dt id="robots-noanchortext">robots-noanchortext</dt>
 <dd>
  Informe les robots que le document en lien cible ne doit pas être indexé sous l'ancre texte.
 </dd>
 <dt id="robots-anchortext">robots-anchortext</dt>
 <dd>
  Informe les robots que le document en lien cible doit être indexé sous l'ancre texte.
 </dd>
 <dt id="robots-index">robots-index</dt>
 <dd>
  Informe les robots que le contenu de l'élément doit être inclus comme section de la page. 
 </dd>
 <dt id="robots-noarchive">robots-noarchive</dt>
 <dd>
  Informe les caches des robots que le contenu de l'élément ne doit pas être inclus dans leur copie cachée.
 </dd>
 <dt id="robots-archive">robots-archive</dt>
 <dd>
  Informe les caches des robots que le contenu de l'élément doit être inclus dans leur copie cachée.
 </dd>
</dl>

Exemples

Retirer le contenu de la page :

<head profile=”http://exemple.org/xmdp/robots-profile#”>
...
<div class=”robots-noindex”>Il était une fois un homme de Nantucket…</div>
<p>Cette page ne parle pas de <span class=”robots-noindex”>pornographie</span>.</p>

Afficher le nofollow en conjonction avec votelinks, et l'appliquer en parallèle avec rel-nofollow :

<head profile=”http://exemple.org/xmdp/robots-profile#”>
...
<p class=”robots-nofollow”>Ceci est <a href=”http://exemple.com/bogus”>un lien bogus</a> 
et ceci se fait comme <a href=”http://exemple.net/bogus”>ça</a>.</p>

<p>Je n'aime pas <a rel="nofollow" rev="vote-against" class="robots-nofollow"
                   href="http://example.com/disagree">cette page</a>
mais j'aime vraiment <a rev="vote-for" href="http://exemple.com/agree">celle-là</a>.</p>

Empêcher les images d'être sauvegardées par les moteurs de recherche, les forcer à être retrouvées à partir du site web original :

<head profile="http://exemple.org/xmdp/robots-profile#">
...
<p><img src="exemple.png" class="robots-noarchive" alt="Image privée" /></p>

Une conséquence à cela est que les petits résumés qu'affichent les moteurs de recherche avec les liens résultants excluent aussi le robots-noarchive. Nous suggérons de remplacer les petits segments exclus avec une ellipse [...]. Les segments non archivés d'une taille comparable aux segments qu'utile normalement le moteur de recherche pour les résumés peuvent juste être omis. Probablement un affichage d'un document complètement caché qui a des segments non archivés devrait inclure aussi quelque locution pour afficher les endroits où le texte a été retiré, peut importe sa taille.

Un exemple plus complexe est disponible qui montre aussi comment la métadonnée robots peut être visualisée.

Références

Normative

Informative

Remerciements

pages en rapport

Categories

Robot Exclusion Profil was last modified: Wednesday, September 2nd, 2009

Views