Technologie d'erreur 403 Nos indexeurs utilisent l'infrastructure cloud et s'identifient comme des robots d'indexation (plus d'informations). Seules les entreprises légitimes utilisent des robots connus. Les entreprises éthiques exigent contractuellement que d'autres entreprises éthiques comme la nôtre indexent le Web uniquement de manière identifiable, en utilisant un agent utilisateur de robot identifiable et en respectant les directives robots.txt.Certains sites bloquent le trafic provenant des réseaux cloud et des indexeurs qui s'identifient comme des robots dans leur en-tête d'agent utilisateur. Si un site nous bloque ou est configuré pour bloquer le trafic avec un message d'erreur 403 ou 202, il est étiqueté avec la technologie d'erreur 403.