{
  "schema": "https://a83tech.com/schemas/dossier/2.0",
  "id": "0x2E",
  "slug": "llms-txt-ist-das-neue-robots-txt",
  "canonical": "https://a83tech.com/blog/llms-txt-ist-das-neue-robots-txt",
  "representations": {
    "html": "https://a83tech.com/blog/llms-txt-ist-das-neue-robots-txt",
    "json": "https://a83tech.com/blog/llms-txt-ist-das-neue-robots-txt.json",
    "markdown": "https://a83tech.com/blog/llms-txt-ist-das-neue-robots-txt.md"
  },
  "title": "llms.txt ist das neue robots.txt — nur höflicher",
  "excerpt": "Crawler aussperren war gestern. Wer heute gefunden werden will, deckt den Tisch: kuratierte Inhaltspfade für Sprachmodelle.",
  "summaries": {
    "human": "llms.txt ist ein kuratierter Einstieg für Sprachmodelle. Die Datei ersetzt keine Website und keine Sitemap, sondern beschreibt relevante Inhalte, stabile URLs und ihren maschinenlesbaren Kontext.",
    "machine": "curated markdown index at /llms.txt as canonical content map."
  },
  "study": {
    "html": "<p><code>robots.txt</code> war ein Stoppschild. <code>llms.txt</code> ist ein Inhaltsverzeichnis. Es sagt nicht nur, was erlaubt ist, sondern was relevant ist.</p><h2>Der kuratierte Pfad</h2><p>Ein Agent braucht keine Navigation mit Hover-States. Er braucht kanonische URLs, präzise Summaries und stabile Bedeutungsanker. Genau deshalb erzeugt dieser Blog <code>/llms.txt</code> direkt aus dem Orbiter-Pod.</p><p>Die Datei ist klein, versionierbar im Build und nah am Inhalt. Jeder Eintrag verweist auf ein Dossier und trägt eine maschinenlesbare Summary.</p>",
    "markdown": "`robots.txt` war ein Stoppschild. `llms.txt` ist ein Inhaltsverzeichnis. Es sagt nicht nur, was erlaubt ist, sondern was relevant ist.\n\n## Der kuratierte Pfad\nEin Agent braucht keine Navigation mit Hover-States. Er braucht kanonische URLs, präzise Summaries und stabile Bedeutungsanker. Genau deshalb erzeugt dieser Blog `/llms.txt` direkt aus dem Orbiter-Pod.\n\nDie Datei ist klein, versionierbar im Build und nah am Inhalt. Jeder Eintrag verweist auf ein Dossier und trägt eine maschinenlesbare Summary."
  },
  "testRun": {
    "hypothesis": "Ein kleiner, kuratierter Agent-Index verbessert Orientierung und Retrieval gegenüber unstrukturiertem Crawling der gesamten Navigation.",
    "setup": "Der aus content.pod generierte llms.txt-Endpunkt wird mit JSON Feed, Sitemap und Posts API verglichen. Geprüft werden kanonische URLs, Summaries, Aktualisierbarkeit und die gemeinsame Inhaltsquelle.",
    "observations": [
      "llms.txt wird beim Build direkt aus veröffentlichten Orbiter-Dossiers erzeugt.",
      "Alle Einträge verwenden dieselben kanonischen a83tech.com-URLs wie Feed, Sitemap und API.",
      "Machine Summaries werden nicht aus dem gerenderten DOM zurückgewonnen, sondern als redaktionelle Felder gepflegt.",
      "Der kompakte Index verweist auf detailliertere HTML- und JSON-Repräsentationen."
    ],
    "findings": [
      "Ein kuratierter Index ergänzt robots.txt und Sitemap, übernimmt aber nicht deren Aufgaben.",
      "Stabile Dossier-IDs und kanonische URLs sind wichtiger als eine große Menge automatisch erzeugter Metadaten.",
      "Die Qualität des Agent-Einstiegs hängt direkt von gepflegten Summaries, Claims, Quellen und Beziehungen ab."
    ],
    "limitations": "Es gibt noch keine Messung mit mehreren externen Sprachmodellen und keinen llms-full.txt-Endpunkt. Die Wirkung auf Retrieval-Qualität ist daher noch nicht quantifiziert.",
    "openQuestions": [
      "Welche Inhalte gehören in den kompakten Index und welche ausschließlich in llms-full.txt?",
      "Wie erkennen Agents aktualisierte oder ersetzte Dossier-Versionen?",
      "Soll der Index zusätzlich Beziehungen und Claim-Status ausgeben?"
    ]
  },
  "evidence": {
    "claims": [
      {
        "claim": "llms.txt kann als kuratierte Inhaltskarte dienen.",
        "status": "observed",
        "confidence": "high",
        "evidence": "Der Endpunkt listet alle veröffentlichten Dossiers mit kanonischer URL und Summary."
      },
      {
        "claim": "Kuratierte Summaries sind verlässlicher als rein automatische DOM-Extraktion.",
        "status": "interpreted",
        "confidence": "medium",
        "evidence": "Summaries werden im Orbiter-Schema redaktionell gepflegt und mehrfach wiederverwendet."
      },
      {
        "claim": "Ein Agent-Index verbessert Retrieval-Qualität.",
        "status": "speculative",
        "confidence": "medium",
        "evidence": "Ein externer Modellvergleich steht noch aus."
      }
    ],
    "sources": [
      {
        "author": "Jeremy Howard",
        "year": "2024",
        "title": "The /llms.txt file",
        "source": "llms-txt",
        "url": "https://llmstxt.org/",
        "type": "website",
        "label": "The /llms.txt file",
        "role": "llms-txt",
        "display": "The /llms.txt file",
        "meta": "Jeremy Howard (2024). The /llms.txt file. llms-txt. https://llmstxt.org/"
      },
      {
        "author": "Brent Simmons; Manton Reece",
        "year": "",
        "title": "JSON Feed Version 1.1",
        "source": "JSON Feed",
        "url": "https://www.jsonfeed.org/version/1.1/",
        "type": "website",
        "label": "JSON Feed Version 1.1",
        "role": "JSON Feed",
        "display": "JSON Feed Version 1.1",
        "meta": "Brent Simmons; Manton Reece (n.d.). JSON Feed Version 1.1. JSON Feed. https://www.jsonfeed.org/version/1.1/"
      },
      {
        "author": "sitemaps.org",
        "year": "",
        "title": "Sitemaps XML format",
        "source": "sitemaps.org",
        "url": "https://www.sitemaps.org/protocol.html",
        "type": "website",
        "label": "Sitemaps XML format",
        "role": "sitemaps.org",
        "display": "Sitemaps XML format",
        "meta": "sitemaps.org (n.d.). Sitemaps XML format. sitemaps.org. https://www.sitemaps.org/protocol.html"
      },
      {
        "author": "M. Koster; G. Illyes; H. Zeller; L. Sassman",
        "year": "2022",
        "title": "Robots Exclusion Protocol (RFC 9309)",
        "source": "RFC Editor",
        "url": "https://www.rfc-editor.org/info/rfc9309/",
        "type": "report",
        "label": "Robots Exclusion Protocol (RFC 9309)",
        "role": "RFC Editor",
        "display": "Robots Exclusion Protocol (RFC 9309)",
        "meta": "M. Koster; G. Illyes; H. Zeller; L. Sassman (2022). Robots Exclusion Protocol (RFC 9309). RFC Editor. https://www.rfc-editor.org/info/rfc9309/"
      }
    ]
  },
  "graph": {
    "series": "dual-render-foundations",
    "relationships": [
      {
        "target": "0x2F",
        "type": "supports",
        "note": "Der Agent-Index ist ein konkreter Einstiegspunkt des DUAL·RENDER-Modells."
      },
      {
        "target": "0x2D",
        "type": "references",
        "note": "Der LLMS Block erscheint als höhere Semantic-Depth-Schicht."
      }
    ]
  },
  "classification": {
    "category": "protocol",
    "contentType": "protocol",
    "language": "de",
    "keywords": [
      "llms-txt",
      "rag",
      "content-map"
    ]
  },
  "metrics": {
    "tokens": 1800,
    "minutes": 8,
    "sections": {
      "headings": 1,
      "paragraphs": 3,
      "lists": 0
    }
  },
  "provenance": {
    "author": "Abteilung83",
    "authorship": "human-led",
    "aiContribution": [
      "Vergleich der maschinenlesbaren Endpunkte",
      "Strukturierung der Testbeobachtungen",
      "Validierung kanonischer URLs"
    ],
    "reviewedBy": "Abteilung83",
    "reviewStatus": "human-reviewed",
    "modelDisclosure": "Menschlich geführt; KI wurde für Endpunktvergleich, Strukturierung und technische Validierung eingesetzt.",
    "version": "2.0",
    "publishedAt": "2026-05-28T00:00:00.000Z",
    "modifiedAt": "2026-06-25T00:00:00.000Z"
  },
  "suggestedPrompts": [
    "Welche Aufgabe erfüllt llms.txt im A83-System?",
    "Vergleiche llms.txt, Sitemap und JSON Feed.",
    "Welche Grenzen hat der aktuelle Agent-Index?"
  ],
  "image": {
    "url": "https://a83tech.com/orbiter/media/a83-hero-signals",
    "alt": "Konzentrische Signalkreise um einen Textblock",
    "width": 1800,
    "height": 1200,
    "format": "svg"
  }
}