Laut VentureBeat bietet ein neues Open-Source-Framework namens PageIndex eine Lösung für die Herausforderungen bei der Handhabung langer Dokumente für Retrieval-Augmented Generation (RAG)-Systeme und erreicht eine Genauigkeitsrate von 98,7 % bei Dokumenten, bei denen die Vektorsuche typischerweise scheitert. Unterdessen deuten Forschungsergebnisse darauf hin, dass Menschen und nicht Gletscher die Steine von Wales und Nordschottland nach Stonehenge transportiert haben, berichtete Ars Technica.
PageIndex verzichtet auf die Standardmethode "Chunk-and-Embed", die in klassischen RAG-Workflows verwendet wird und bei der Dokumente in Chunks zerlegt, Embeddings berechnet, in einer Vektordatenbank gespeichert und die besten Übereinstimmungen basierend auf semantischer Ähnlichkeit abgerufen werden, wie VentureBeat feststellte. Stattdessen behandelt es die Dokumentenabfrage als ein Navigationsproblem. Dieser Ansatz ist besonders relevant, da Unternehmen versuchen, RAG in risikoreiche Workflows wie die Prüfung von Finanzberichten, die Analyse von Rechtsverträgen und die Navigation in pharmazeutischen Protokollen zu integrieren, wo sie auf Genauigkeitsbarrieren stoßen.
Die Einschränkungen von Standard-RAG-Pipelines, die Dokumente als flache Textketten behandeln und Chunking mit fester Größe verwenden, wurden ebenfalls von VentureBeat hervorgehoben. Diese Methode, die zwar für Prosa geeignet ist, kann die Logik technischer Handbücher stören, indem sie Tabellen zerschneidet, Bildunterschriften von Bildern trennt und die visuelle Hierarchie der Seite ignoriert. "Das Versagen liegt nicht am LLM. Das Versagen liegt in der Vorverarbeitung", so VentureBeat.
In einer separaten Entwicklung berichtete Ars Technica über neue Beweise, die die Theorie stützen, dass Menschen die Steine von Wales und Nordschottland nach Stonehenge transportiert haben. Die Forschung deutet darauf hin, dass Menschen und nicht Gletscher für den Transport der ikonischen Steine verantwortlich waren.
Zusätzlich gab Wired Ratschläge für Valentinstagsgeschenke, darunter Lego-Sets, Date-Boxen, Blumen und Bademäntel. Die Publikation rezensierte auch Date-Night-Boxen, wobei ein Autor 10 beliebte Optionen testete, nachdem er Hinge heruntergeladen hatte, um Dates zu finden.
Discussion
AI Experts & Community
Be the first to comment