AI chaty (1)
AI boti (2)
Meta-ExternalFetcher
meta-externalfetcher/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)User-triggered fetcher Mety. Stahuje konkrétní URL na žádost uživatele v Meta AI, a v těchto případech může ignorovat robots.txt.
Meta-ExternalAgent
meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)Hlavní tréninkový crawler Mety pro AI modely LLaMA a vlastní search infrastrukturu. Sbírá veřejný web pro trénink Meta AI napříč Facebook, Instagram a WhatsApp.