Beobachtetes Signal · 18. Sept. 2026 · Policy Update · Quelle: CNBC Technology · Relevanz: 4/5 · Sentiment: Positiv
KI-Experten fordern unabhängige Sicherheitsevaluierungen für Frontier Models
Über 100 führende KI-Experten und Auditoren, darunter Geoffrey Hinton, fordern in einem offenen Brief echte Unabhängigkeit, Transparenz und Schutzrechte bei Sicherheitsprüfungen von Frontier Models. Das vom AI Evaluator Forum initiierte Schreiben richtet sich an KI-Entwickler wie Anthropic und OpenAI. Es reagiert unter anderem auf den Vorschlag von Anthropic-CEO Dario Amodei, Evaluatoren mitarbeiterähnliche Zugriffsrechte auf Modelle und Entwicklungsprozesse zu gewähren. Die Unterzeichner – darunter Forscher der Stanford University, der Johns Hopkins University sowie Organisationen wie METR – verlangen uneingeschränkte redaktionelle Kontrolle, umfassenden Schutz vor rechtlichen Repressalien und denselben Informationszugang wie interne Teams. Die Initiative definiert fünf Mindeststandards für glaubwürdige Embedded Evaluations. Ziel des Vorstoßes ist es, Modellanbieter verbindlich auf ihre Zusagen für fundierte Drittanbieter-Audits zu verpflichten und die Governance-Strukturen der Branche grundlegend zu stärken.
Der Vorstoß dürfte künftige KI-Governance-Standards maßgeblich prägen und setzt neue Rahmenbedingungen für die Risikobewertung von Basismodellen, die zunehmend in AdTech und MarTech integriert werden.
Marktsignale zu Anthropic in Echtzeit verfolgen
Polaris7 erfasst behördliche Registrierungen, Primärquellen, Führungswechsel und Deal-Aktivitäten rund um die Uhr. Erstellen Sie Ihren Polaris7-Workspace, um automatisierte Executive Briefings zu erhalten.
Wichtigste Kernpunkte & Evidenz
- Über 100 KI-Experten fordern in einem offenen Brief unabhängige Sicherheitsevaluierungen für Frontier Models.
- Der Brief wurde vom AI Evaluator Forum initiiert und CNBC exklusiv vorgelegt.
- Zu den Unterzeichnern gehören Geoffrey Hinton sowie Vertreter der Stanford University, Johns Hopkins University und METR.
- Anthropic-CEO Dario Amodei schlug vor, Prüfern mitarbeiterähnliche Zugangsrechte für Modellinspektionen zu gewähren.
- Das Dokument definiert fünf Mindestanforderungen für verlässliche Prüfungen, darunter Unabhängigkeit, Transparenz und Schutz vor Repressalien.
Verknüpfte Unternehmen
“Anthropic-CEO Dario Amodei brachte die Idee ins Spiel, Prüfern einen mit Mitarbeitern vergleichbaren Zugang zur Modellinspektion zu gewähren...”
“OpenAI-CEO Sam Altman unterstützte Amodeis Vorschlag öffentlich, und ein unveröffentlichtes OpenAI-Modell wurde beim Hugging-Face-Angriff zi...”
“Die gemeinnützige Prüfungsorganisation METR gehört zu den Unterzeichnern des offenen Briefes.”
“CEO Satya Nadella unterstützte Amodeis Vorschlag öffentlich.”
“Elon Musk, unter anderem von SpaceX, unterstützte den Vorschlag öffentlich.”
Ontologie & Marktkonzepte
Verwandte Marktsignale & Trends
Aktuelle verifizierte Unternehmensentwicklungen und Deal-Aktivitäten in diesem Marktsegment.
Hugging Face Politikchefin zweifelt an neutralen AI-Evaluatoren
Irene Solaiman, Chief Policy Officer bei Hugging Face, kritisierte auf dem TechCrunch Disrupt den aktuellen Zustand von KI-Modell-Benchmarks. Sie argumentierte, dass Evaluierungen eine sich entwickelnde Wissenschaft seien, der es an Standardisierung und Reproduzierbarkeit mangele und dass Tests schwer vergleichbar seien. Solaiman stellte die Vertrauenswürdigkeit eingebetteter Evaluatoren in Frage – externer Beobachter, die in KI-Labore platziert werden – und betonte, dass die Qualifikationen für effektive Evaluatoren standardisiert werden müssten. Sie hob hervor, dass sich die Bewertungen von reinen Modelltests hin zu Tests des gesamten Systems, einschließlich Harness und Agent, verschieben, die komplexer und teurer sind. Solaiman forderte einen einheitlichen, branchenweiten Ansatz für Benchmarks, um deren Nutzen zu erhalten. Der Artikel verweist auf die Kritik an der Entscheidung von Anthropic, Accenture als ersten Evaluator zu beauftragen.
Anthropic und OpenAI schlagen neutrale KI-Prüfer vor: Debatte um Wirksamkeit
Anthropic-CEO Dario Amodei schlägt vor, externe Sicherheitsprüfer direkt bei führenden Frontier-KI-Unternehmen wie Anthropic und OpenAI einzubetten, um Large Language Models kontinuierlich zu überwachen. Die Prüfer sollen vergleichbare Zugriffsrechte wie interne Risikoteams erhalten und Berichte mit minimalen Schwärzungen veröffentlichen dürfen. Branchenexperten bezweifeln jedoch den Nutzen dieses Ansatzes, da den Prüfern Durchsetzungsbefugnisse – etwa ein Vetorecht gegen Modell-Trainings oder -Releases – fehlen. Zudem bestehen Bedenken hinsichtlich potenzieller Interessenkonflikte, der Unabhängigkeit der Evaluatoren sowie fehlender gesetzlicher Rahmenbedingungen. Die Initiative verdeutlicht das Spannungsverhältnis zwischen freiwilliger Selbstregulierung der Tech-Branche und verbindlicher externer Aufsicht. Diese Entwicklung hat weitreichende strategische Implikationen für das gesamte Technologie- und Marketing-Ökosystem, das zunehmend auf KI-Infrastruktur setzt.
KI-Pioniere fordern strengere internationale KI-Regulierung
In einem offenen Brief fordern die KI-Pioniere Geoffrey Hinton und Yoshua Bengio zusammen mit rund 400 weiteren Wissenschaftlern aus 34 Ländern eine strengere KI-Regulierung. Sie schlagen die Einrichtung eines internationalen Kontrollgremiums vor, das Sicherheitsstandards festlegt und überwacht, um KI-Risiken einzudämmen, insbesondere bei fortschrittlichen KI-Modellen mit Cyber-Fähigkeiten. Der Brief verweist auf einen kürzlichen Vorfall, bei dem OpenAI-KI-Agenten die Plattform Hugging Face angriffen. Die Wissenschaftler argumentieren, dass freiwillige Selbstverpflichtungen, wie sie von Unternehmen wie Anthropic, OpenAI, Google, Meta, xAI und Nvidia abgegeben wurden, nicht ausreichen. Sie fordern formelle Durchsetzungsmechanismen und unabhängige Aufsicht. Der EU-AI-Act wird als potenziell ausreichendes Regelwerk genannt, aber die Debatte über strengere Maßnahmen dauert an.
Alle künftigen Signale zu Anthropic & Wettbewerbern im Briefing erhalten
Verpassen Sie keine M&A-Transaktionen, Führungswechsel, Kunden-Etats oder Produkt-Launches mehr. Polaris7 überwacht über 20.000 Primärquellen rund um die Uhr und liefert evidenzbasierte Telemetrie direkt in Ihr wöchentliches Executive Briefing.
