Projekt 1000 - "Agentic AI: Prüfanforderungen für LLM-basierte agentische künstliche Intelligenz (PRAKI)"

1. Eigenerklärung zu Artikel 5k der Verordnung (EU) 833/2014 Im Rahmen des EU-Sanktionspakets im Zusammenhang mit dem Angriffskrieg Russlands auf die Ukraine wurde durch Verordnung (EU) 2022/1269 des Rates vom 27.04.2023 folgender Artikel in die Verordnung (EU) 833/2014 aufgenommen: Artikel 5k (1) Es ist verboten, öffentliche Aufträge oder Konzessionen, die in den Anwendungsbereich der Richtlinien über die öffentliche Auftragsvergabe sowie unter Artikel 10 Absatz 1, Absatz 3, Absatz 6 Buchstaben a bis e, Absatz 8, Absatz 9 und Absatz 10 und die Artikel 11, 12, 13 und 14 der Richtlinie 2014/23/EU, unter Artikel 7 Buchstaben a bis d, Artikel 8, Artikel 10 Buchstaben b bis f und h bis j der Richtlinie 2014/24/EU, unter Artikel 18, Artikel 21 Buchstaben b bis e und g bis i, Artikel 29 und Artikel 30 der Richtlinie 2014/25/EU sowie unter Artikel 13 Buchstaben a bis d, f bis h und j der Richtlinie 2009/81/EG fallen, an folgende Personen, Organisationen oder Einrichtungen zu vergeben bzw. Verträge mit solchen Personen, Organisationen oder Einrichtungen weiterhin zu erfüllen: a) russische Staatsangehörige, in Russland ansässige natürliche Personen oder in Russland niedergelassene juristische Personen, Organisationen oder Einrichtungen, b) juristische Personen, Organisationen oder Einrichtungen, deren Anteile zu über 50 % unmittelbar oder mittelbar von einer der unter Buchstabe a genannten Organisationen gehalten werden, oder c) natürliche oder juristische Personen, Organisationen oder Einrichtungen, die im Namen oder auf Anweisung einer der unter Buchstabe a oder b genannten Organisationen handeln, einschließlich — wenn auf sie mehr als 10 % des Auftragswerts entfällt — Unterauftragnehmer, Lieferanten oder Unternehmen, deren Kapazitäten im Sinne der Richtlinien über die öffentliche Auftragsvergabe in Anspruch genommen werden. Bestätigen Sie, dass keine der o.g. Ausschlussgründe für eine öffentliche Auftragsvergabe oder Konzessionsvergabe bzw. eine Vertragsweiterführung auf Sie zutreffen und dass Sie auch im Rahmen der Vertragsausführung keine Änderungen vornehmen (z.B. durch Einbindung eines Unterauftragnehmers oder eines Lieferanten), die gegen die o.g. Ausschlussgründe verstoßen? Bitte die Frage nur mit „JA“ (→ Bestätigung) oder „NEIN“ (→ keine Bestätigung) beantworten. Mindestanforderung: Die Frage wurde mit „Ja“ beantwortet. Wurde die Frage mit „Nein“ beantwortet, so führt dies zum Ausschluss aus dem Vergabeverfahren. Ihnen ist bewusst, dass eine wissentlich falsche Angabe der Erklärung zum Ausschluss aus dem Vergabeverfahren führt und nach Vertragsschluss den Auftraggeber zur außerordentlichen Kündigung berechtigt. Führen Sie im Angebot lediglich den Titel des Kriteriums sowie Ihre Antwort auf. Verzichten Sie auf die wörtliche oder sinngemäße Zitierung des Kriteriums.

2. Referenzen: Expertise zu LLM-basierten agentischen KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zur Verwendung von LLM-basierten agentischen KI-Systemen als Anwendungsgebiet besitzt. Gehen Sie dabei auf folgende Punkte ein: • Auftraggeber inkl. Fachbereich • Zeitraum und Auftragsvolumen • detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise zur Verwendung von LLM-basierten agentischen KI-Systemen benötigt und angewandt wurde.

3. Referenzen: Expertise zur Prüfung von KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zur Prüfung von KI-Systemen besitzt. Gehen Sie dabei auf folgende Punkte ein: • Auftraggeber inkl. Fachbereich • Zeitraum und Auftragsvolumen • detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise zur Prüfung von KI-Systemen benötigt und angewandt wurde.

4. Referenzen: Expertise zur Sicherheit von KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zur Sicherheit von KI-Systemen (insb. zu KI-spezifischen Angriffen und Verteidigungen) besitzt. Gehen Sie dabei auf folgende Punkte ein: • Auftraggeber inkl. Fachbereich • Zeitraum und Auftragsvolumen • detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise zur Sicherheit von KI-Systemen benötigt und angewandt wurde.

5. Referenzen: Expertise zur Sicherheit von IT-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zur Sicherheit von IT-Systemen besitzt. Gehen Sie dabei auf folgende Punkte ein: • Auftraggeber inkl. Fachbereich • Zeitraum und Auftragsvolumen • detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise zur Sicherheit von IT-Systemen benötigt und angewandt wurde.

6. Technische Ausrüstung Geben Sie einen kurzen Überblick über das technische Equipment, welches Ihnen zur Verfügung steht und von Ihnen zur Erbringung der hier ausgeschriebenen Leistung, insbesondere bei der Durchführung der Erprobung in AP 5 eingesetzt wird. Mindestanforderung: Der Bieter ist aus Sicht des BSI in der Lage, die hier zu vergebende Leistung mit Hilfe der beschriebenen technischen Ausrüstung erfolgreich zu erbringen.