Ometrix

Diffbot

OFFICIEL

Unknown

Diffbot AI crawler

9

Score de légitimité

robots.txt

Respecté

Fréquence

Moyen

Impact serveur

Faible

Recommandation

Autoriser

Données techniques

User-Agent Pattern

Diffbot

Détection JS

const isDiffbot = /Diffbot/i.test(navigator.userAgent);
Capability de rendu:

Qu'est-ce que Diffbot ?

Diffbot is an AI-powered web crawler that automatically extracts structured data from web pages. Diffbot's technology is used for knowledge graphs, e-commerce, and content analysis.

Types de contenu ciblés

textstructured_data