Ce que vous pouvez faire est de vérifier ce que voit un robot à partir de votre site.
Comme déjà mentionné, les robots ne sont pas humains et ils ne voient pas les images, les films Flash, JavaScript, des cadres, des pages protégées par mot de passe et des répertoires, donc si vous avez des tonnes de ceux-ci sur votre site, vous feriez mieux d'exécuter le Araignée Simulateur
ci-dessous pour voir si ces friandises sont visibles par l'araignée. Si elles ne sont pas visibles, ils ne seront pas spidered, pas indexés, non traitée, etc. - en un mot, ils seront inexistants pour les moteurs de recherche
.