Der Newsletter Interconnects startet zwei kostenlose Projekte zum Ökosystem offener Modelle, einen Artifacts Hub und ein täglich aktualisiertes Adoption Dashboard. Diese Tools erweitern die Analysen, die die Publikation bisher spezifischen Modellen und monatlichen Berichten widmete.
Das erste Projekt, Artifacts Hub, ist eine ausgewählte Übersicht über Trendmodelle auf Hugging Face, der Plattform zum Teilen von KI-Modellen. Es hebt die über Open Router erfassten Inferenz-Tokens hervor, also die bei der Modellnutzung verarbeiteten Texteinheiten, die Modellintelligenz laut Artificial Analysis sowie von dem Team anhand von Hugging-Face-Daten erstellte Adoptionsindikatoren. Die Seite listet derzeit 792 Modelle aus den letzten zwei Jahren auf, seien es textzentrierte große Sprachmodelle oder multimodale Generative Modelle.
Um dieses Inventar zu erstellen, gibt Interconnects an, die Daten jedes auf Hugging Face veröffentlichten Modells zu verfolgen und die wichtigsten paar tausend großen Sprachmodelle zu analysieren, deren Liste öffentlich auf GitHub einsehbar und regelmäßig aktualisiert wird. Eine Auswahl von einigen hundert davon wird anschließend detaillierter erklärt.
Für die beliebtesten Modelle ermöglicht der Hub mit wenigen Klicks, die Lücke zur Intelligenzgrenze zu sehen, gemessen am Intelligence Index von Artificial Analysis. Er ermöglicht auch den Vergleich der Adoption auf Hugging Face und Open Router für ähnliche Modelle, die Einblicke in die Scores der sogenannten RAM-Metrik (relative adoption metric), die Downloads zur Verfügbarkeitsdauer und Modellgröße ins Verhältnis setzt, oder den VAIL-Ähnlichkeitsindex, der verwandte Generationsmodelle verknüpft. Diese Arbeit wurde in Zusammenarbeit mit Project VAIL, einem auf KI-Verifikation spezialisierten Startup, durchgeführt, das der Newsletter als einen seiner treuesten Unterstützer beschreibt.
Ein Dashboard zur Kluft zwischen den USA und China
Das zweite Projekt, das Adoption Dashboard, zeigt die Anzahl der Downloads und abgeleiteten Modelle, gegliedert nach geografischer Region und Organisation. Laut der Publikation verdeutlicht es die Kluft zwischen den USA und China sowie den Aufstieg neuer Akteure im offenen Ökosystem.
Interconnects gibt an, dass der Vergleich zwischen den beiden Ländern, bereits in seinem Bericht The ATOM Project vorgestellt, regelmäßig in Branchendiskussionen auftauchte, ohne ausreichend aktuell gehalten zu werden. Das Dashboard vereint nun die Daten aus diesem Bericht und dem Ökosystem mit täglicher Aktualisierung.
Die Publikation präzisiert, dass diese Tools Teil ihrer Mission sind, die darauf abzielt, das Ökosystem offener Modelle zu unterstützen, während Nutzer versuchen, sie einzusetzen, insbesondere kosteneffizient im Vergleich zu Spitzenmodellen. Sie dankt Hugging Face, Open Router und Artificial Analysis für ihren Beitrag sowie Project VAIL und lädt ihre Leser ein, ihr Feedback und Ideen zur Datennutzung an [email protected] zu senden.
