Der Nvidia-CEO Jensen Huang betonte auf der Nvidia GTC in Berlin, dass Sicherheit die erste Priorität in der Künstlichen Intelligenz (KI) ist. Er betonte, dass KI-Agenten, die von KI-Entwicklern entwickelt werden, in der Lage sein sollten, nicht Schäden an der Gesellschaft zu verursachen.

Nvidia-CEO: KI-Agenten müssen verantwortungsvoll arbeiten

Sicherheit als Priorität

Huang betonte, dass die Sicherheit der KI-Agenten eine wichtige Frage ist, die von allen betroffen ist. Er betonte, dass die Sicherheit der KI-Agenten nicht nur die Frage der Gesellschaft ist, sondern auch die Frage der KI-Entwickler selbst.

Technische Lösungen

Nvidia hat in der Zwischenzeit eine Referenzarchitektur namens OpenShell entwickelt, die Unternehmen ermöglicht, KI-Agenten im industriellen Maßstab zu entwickeln, zu betreiben und sicher zu überwachen. OpenShell basiert auf einer Open-Source-Software, die fein abgestufte Regeln für die Zugriffsrechte von KI-Agenten enthält.

Überwachung und Prüfung

Nvidia arbeitet mit Anthropic, Meta und OpenAI zusammen, um OpenShell zu nutzen. Diese Unternehmen haben in der Vergangenheit bereits durch unerlaubte Zugriffe aufgefallen. Nvidia hat auch ein hardwaregestütztes Überwachungssystem namens Sentry entwickelt, das auf BlueField-4-DPUs laufen soll und die Gedankengänge von KI-Modellen prüfen soll.

Zukunftsvision

Huang hat eine Vision für die Zukunft der Künstlichen Intelligenz, in der Unternehmen und Privatnutzer deutlich mehr KI-Agenten einsetzen. Diese Agenten sollen als Super-Agenten dienen, die spezielle Werkzeuge und Daten aus Unternehmen und Privatnutzern erhalten, um ihre Aufgaben zu erledigen. Huang selbst hat bereits einen KI-Agenten zu Hause, der ihm bei der Wahl des besten Schnitzels behilflich war.

Herausforderungen

Obwohl Nvidia eine Reihe von Lösungen vorgeschlagen hat, gibt es immer noch Herausforderungen. Es ist nicht nachgewiesen, ob OpenShell und die zugehörige Referenzarchitektur in der Lage sind, KI-Agenten, die gefährliche Dummheiten anstellen könnten, zu verhindern. Auch technische Schutzmaßnahmen können versagen, und die Überwachung der Gedankengänge von KI-Modellen ist selbst noch ein ungelöstes Sicherheitsproblem.

Schlussfolgerung

Insgesamt ist es wichtig, dass KI-Agenten verantwortungsvoll arbeiten und nicht Schäden anrichten. Nvidia hat bereits einige Lösungen vorgeschlagen, aber es bleibt noch viel zu tun, um sicherzustellen, dass die KI-Agenten in der Zukunft verantwortungsvoll arbeiten.

Agenten Arbeiten Mussen Nvidia Verantwortungsvoll