Meta-Media-Crawler blockiert (Instagram / Threads)

​

Symptom

{
  "status": "error",
  "errors": [{
    "action": "post",
    "code": 479,
    "retryAvailable": false,
    "message": "The social network could not fetch the media from this URL, even after Ayrshare re-hosted it on its own CDN (Instagram/Meta subcode 2207052). Ensure the file is publicly reachable by Meta's crawlers (facebookexternalhit / Facebot) — check your robots.txt and any WAF/bot rules — not only in a browser. Retrying the same URL will not help until hosting is fixed.",
    "details": "Media download has failed.: The media could not be fetched from the provided URI. Restricted by robots.txt (HTTP error code 403). Meta subcode 2207052.",
    "platform": "instagram",
    "status": "error"
  }],
  "postIds": [],
  "id": "..."
}

{
  "status": "error",
  "errors": [{
    "action": "post",
    "code": 440,
    "retryAvailable": true,
    "message": "The social network could not ingest the media in time. This is usually transient (for example Meta subcode 2207032 'download too slow' or 2207003 'create media fail'). Retry the post.",
    "details": "Media download has failed.: Media download took too long / could not create media...",
    "platform": "instagram",
    "status": "error"
  }],
  "postIds": [],
  "id": "..."
}

{
  "status": "error",
  "errors": [{
    "retryAvailable": true,
    "status": "error",
    "code": 138,
    "details": "Media download has failed.: The media could not be fetched from the provided URI. Video download failed with: HTTP error code 403. Restricted by robots.txt",
    "action": "post",
    "platform": "instagram",
    "message": "Instagram Error: Instagram cannot process your post at this time. Please try your post again."
  }],
  "postIds": [],
  "id": "..."
}

{
  "status": "error",
  "errors": [{
    "status": "error",
    "code": 379,
    "message": "Error posting to Threads.",
    "action": "post",
    "platform": "threads"
  }],
  "postIds": [],
  "id": "..."
}

​

Warum das passiert

​

Fix: Aktualisieren Sie Ihre robots.txt

​

Empfohlen: Meta explizit erlauben, andere Crawler offen lassen

User-agent: facebookexternalhit
Allow: /

User-agent: *
Allow: /

​

Fortgeschritten: Nur für Social-Media-Publisher freigeben

User-agent: facebookexternalhit
Allow: /

User-agent: Twitterbot
Allow: /

User-agent: LinkedInBot
Allow: /

User-agent: Pinterest
Allow: /

User-agent: *
Disallow: /

​

Prüfen, ob Meta Ihre URL abrufen kann

curl -v --compressed -H "Range: bytes=0-524288" -H "Connection: close" \
  -A "facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)" \
  "$URL"

• Healthy response: HTTP 200 oder 206 mit Binärdaten im Body.
• Blocked response: HTTP 403 oder eine leere/HTML-Fehlerseite.

​

Wenn dies das Problem nicht behebt

• 24-Stunden-Verbreitungsverzögerung – Meta cached robots.txt. Warten Sie nach Änderungen bis zu 24 Stunden, bevor Sie es erneut versuchen.
• WAF- oder Bot-Fight-Regeln – Cloudflare Bot Fight Mode, AWS-WAF-Managed-Bot-Regelgruppen und ähnliche Dienste können die Crawler-IP-Bereiche von Meta blockieren, selbst wenn robots.txt dies erlaubt. Prüfen Sie Ihre WAF-Logs und fügen Sie eine Ausnahme für facebookexternalhit hinzu.
• Hotlink-Schutz / Referer-Prüfungen – Einige CDNs blockieren Anfragen von Rechenzentrums-IPs oder ohne gültigen Referer-Header. Setzen Sie Metas Crawler auf die Whitelist oder deaktivieren Sie den Hotlink-Schutz für Medien-Pfade.
• Ablauf von Signed-/Presigned-URLs – Wenn Ihre Medien-URL einen Ablaufzeitstempel besitzt (häufig bei S3-Presigned-URLs), stellen Sie sicher, dass sie nicht abläuft, bevor Metas Crawler sie abrufen kann. Bei geplanten Beiträgen erzeugen Sie URLs, die bis deutlich nach der geplanten Zeit gültig sind.
• Managed Media Hosting – Wenn Sie einen Dienst wie Cloudinary, Imgix oder ähnlich nutzen, bei dem Sie robots.txt nicht bearbeiten können, prüfen Sie in deren Dokumentation eine Allow-List-Einstellung für Meta-/Facebook-Crawler.

• Die fehlgeschlagene postId aus der Fehlerantwort
• Die Ausgabe des oben genannten curl-Verifizierungsbefehls
• Den Inhalt Ihrer robots.txt

​

Fehlgeschlagenen Beitrag wiederholen

• Code 440 (vorübergehend, retryAvailable: true): Für die Ingestion ist einfach die Zeit abgelaufen, oder es ist ein vorübergehender Meta-Fehler aufgetreten. Versuchen Sie es direkt über den Retry-Post-Endpunkt erneut; Änderungen an Ihrem Hosting sind nicht nötig.
• Code 479 (retryAvailable: false): Meta konnte die Medien selbst dann nicht abrufen, nachdem Ayrshare sie auf seinem eigenen CDN erneut gehostet hatte. Ein erneuter Versuch mit der unveränderten, blockierten URL schlägt daher wieder fehl. Beheben Sie zuerst das Hosting: Erlauben Sie die Crawler von Meta (facebookexternalhit / Facebot) in robots.txt und in Ihrer WAF, oder hosten Sie die Medien auf einem CDN, das Meta erreichen kann. Prüfen Sie dies mit dem curl-Befehl oben und versuchen Sie es dann über den Retry-Post-Endpunkt erneut.

​

Siehe auch

• Instagram API
• Threads API
• Instagram Media Guidelines
• Threads Media Guidelines
• Ayrshare Error Codes
• Video Publishing Fails