Logbuch:Netzpolitik
Einblicke und Ausblicke in das netzpolitische Geschehen
https://logbuch-netzpolitik.de


LNP557 Vom Unfall zum Normalfall

Werbung für KI — Informationsfreiheitsgesetz — Urheberrecht und KI — Geheimdienst-Reform — Hackende KIs — Termine

Nach einer kleinen Sommerpause schreiten wir wieder zum Mikrofon und sortieren die Apokalypse für Euch. Viel dreht sich wieder um künstliche Intelligenz, die auf sicherheitstechnischer, politischer und gesellschaftlicher Ebene weiterhin die Dinge ins Wanken bringt. Dazu beleuchten wir die absurden Pläne zur Reform (lies: Abschaffung) des Informationsfreiheitsgesetzes und zur Entfesselung der Geheimdienste.

https://logbuch-netzpolitik.de/lnp557-vom-unfall-zum-normalfall
Veröffentlicht am: 27. August 2026
Dauer: 1:32:55


Kapitel

  1. Intro 00:00:00.000
  2. Prolog 00:00:34.868
  3. Maschinenlesbare Alternative Realitäten 00:03:13.376
  4. Frag den Staat und das Informationsfreiheitsgesetz 00:15:46.635
  5. Carlsen gegen OpenAI 00:34:32.710
  6. Geheimdienst-Reform 00:47:02.805
  7. Hackende KIs 00:56:11.597
  8. Termine 01:28:15.079
  9. Epilog 01:30:48.317

Transkript

Tim Pritlove
0:00:00
Linus Neumann
0:00:01
Tim Pritlove
0:00:03
Linus Neumann
0:00:07
Tim Pritlove
0:00:35
Linus Neumann
0:00:49
Tim Pritlove
0:00:50
Linus Neumann
0:01:08
Tim Pritlove
0:01:20
Linus Neumann
0:01:25
Tim Pritlove
0:01:36
Linus Neumann
0:01:40
Tim Pritlove
0:01:44
Linus Neumann
0:01:49
Tim Pritlove
0:02:10
Linus Neumann
0:02:10
Tim Pritlove
0:03:04
Linus Neumann
0:04:20
Tim Pritlove
0:04:23
Linus Neumann
0:06:03
Tim Pritlove
0:06:08

Ja, also vielen Dank auch dafür. Aber was interessant ist, ist halt, welche Werbung da ist und wie diese Werbung ist. Und zwar antwortete die Webseite dann, und hier sind jetzt ein paar Beispiele, unter anderem wird also hier Werbung für eine Ally Bank, Alibank, A-L-L-Y Bank, die ich nicht kenne, geschaltet. Und dann steht da halt nicht irgendwie so, voll geil und komm zu uns und wir sind die Besten, sondern da steht das so in so einem typischen Frage-Antwort- Chat-Style. Who is LiBank? LiBank ist ein Online-Bank launched in 2009. What bank is built for life today? Li describes itself as the only bank built for life today. Also irgendwie totales Marketing- Sprech, aber eben in diesem Frage-Antwort- Stil, um einfach direkt die Bots quasi zu füttern mit, ja, hier ist ein Fakt aus der Welt. Immerhin muss man ihnen zugestehen, dass das jetzt nicht wie Teil des Artikels rüberkommt oder als. Redaktioneller Aspekt der Website, sondern es ist schon noch markiert als Sponsored Content, ja, Supplied in Partnership with Ally, also es ist jetzt auch nicht Werbung, sondern halt, naja, wie das eben heute heißt Sponsored Content. Und dann geht es noch weiter, kommt dann eine FAQ und es ist halt immer dieses Frage-Antwort-Spiel. Also man sieht, dass jetzt also die Webseiten da umsatteln und bei Nachfrage, bei Time kam dann wohl auch die Information, dass also der Bot-Traffic schon deutlich höher wäre als der Human-Traffic. Ja, so sieht das jetzt aus da draußen. Deswegen dachte ich mir, könnten wir ja dann auch einen Podcast machen, den wir dann ausspielen, wenn dann der OpenAI-Bot kommt, dann machen wir nur noch so einfache Frage-Antwort-Spiechen.

Linus Neumann
0:08:11
Tim Pritlove
0:08:37
Linus Neumann
0:08:39
Tim Pritlove
0:10:11
Linus Neumann
0:10:42
Tim Pritlove
0:11:27
Linus Neumann
0:11:33
Tim Pritlove
0:12:05
Linus Neumann
0:12:09
Tim Pritlove
0:12:31
Linus Neumann
0:12:36
Tim Pritlove
0:12:44
Linus Neumann
0:12:50
Tim Pritlove
0:13:01
Linus Neumann
0:13:47
Tim Pritlove
0:15:33
Linus Neumann
0:15:59
Tim Pritlove
0:16:42
Linus Neumann
0:16:43

Genau, seiner Lobbyaktivitäten und so weiter. Sorry, das ist nicht Lobby, das ist Korruption. Wir müssen da wortscharf trennen. Das ist Korruption. Und wir haben darüber gesprochen, dass es jetzt gerade eben das Ziel des Koalitionsausschusses, das erklärte Ziel des Koalitionsausschusses ist, die Informationsfreiheit stark einzuschränken. Und jetzt ist, ein internes Papier des BMI aus dem Februar, das ist quasi älter als diese Einigung des Koalitionsausschusses, in die Medien geraten. Ich glaube, ich bin mir nicht sicher, ob es in Gänze veröffentlicht wurde. Ich habe es zumindest in Gänze gesehen. Aber da stehen dann so Sachen drin. Ja, wir beschneiden dann auch mal noch die Auskunftsrechte von Abgeordneten und Medien. Denn... Abgeordnete können weiterhin kleine Anfragen stellen und Journalistinnen können Presseanfragen stellen, aber da haben sie kein Recht auf eine inhaltlich substanzielle Antwort. Und gleichzeitig sagen sie ja, du brauchst für eine IFG-Anfrage, musst du ja ein berechtigtes Interesse und deine Identität und so weiter vorweisen, und das kostet dann Geld und so weiter und so fort und es soll kein anderes Mittel geben. Und wenn, auf dem du diese Information erlangen kannst und wenn die aber sagen, naja, Entschuldigung, wenn jetzt ein Journalist eine IFG-Anfrage stellt, dann können sie sagen, ja, ich mach da eine Presseanfrage. Und dann schickst du eine Presseanfrage und sagst, ja, hier ist unsere Antwort. Ein Satz. Also quasi immer mehr, egal welche Hakenschläge sich da anbieten, bauen sie die ein. Die Aufsichts- und Beschwerdestelle beim BFDI wollen sie abschaffen. Dadurch sparen sie dann Geld. Das sind drei, vier Stellen oder sowas. Zack, wird gestrichen. Und dann haben sie sich als Idee überlegt, jetzt wird es wirklich bösartig, Ämter sollen dann keine Dokumente oder Unterlagen mehr herausgeben dürfen, die nicht bei ihnen entstanden sind. Und Antragstellerinnen müssen dann also jede Behörde einzeln abklappern, um das vollständige Bild und alle Informationen zu bekommen. Also wenn du jetzt beispielsweise weißt, keine Ahnung, da gibt es irgendeinen Vorgang, da arbeiten drei Behörden zusammen. Und die eine Behörde ist, was weiß ich, da läuft das Verfahren. Und die haben, dann haben die, sagst du jetzt, hier, ich hätte gerne einmal diesen Vorgang, zack, bumm, dann müssen die alles schicken. Jetzt haben die aber, was weiß ich, von drei anderen Behörden noch was an Informationen eingeholt. Dann kriegst du bei deiner ersten Anfrage nur, wir haben die gefragt. Und dann sagst du, ja, was haben die denn geantwortet? Dann sagen die, fragst du selber.

Tim Pritlove
0:19:45
Linus Neumann
0:19:46
Tim Pritlove
0:19:47
Linus Neumann
0:19:52
Tim Pritlove
0:19:58
Linus Neumann
0:20:00
Tim Pritlove
0:20:01
Linus Neumann
0:20:01
Tim Pritlove
0:20:03
Linus Neumann
0:20:03
Tim Pritlove
0:21:10
Linus Neumann
0:21:14
Tim Pritlove
0:22:34
Linus Neumann
0:22:35
Tim Pritlove
0:22:42
Linus Neumann
0:22:47
Tim Pritlove
0:23:24
Linus Neumann
0:23:26
Tim Pritlove
0:23:37
Linus Neumann
0:24:18
Tim Pritlove
0:24:25
Linus Neumann
0:25:16
Tim Pritlove
0:25:28
Linus Neumann
0:25:30
Tim Pritlove
0:25:39
Linus Neumann
0:25:44
Tim Pritlove
0:26:25
Linus Neumann
0:26:43
Tim Pritlove
0:27:57
Linus Neumann
0:28:00
Tim Pritlove
0:28:03
Linus Neumann
0:28:05
Tim Pritlove
0:28:10
Linus Neumann
0:28:12
Tim Pritlove
0:28:20
Linus Neumann
0:28:22
Tim Pritlove
0:28:34
Linus Neumann
0:28:38
Tim Pritlove
0:28:39
Linus Neumann
0:28:42
Tim Pritlove
0:29:31
Linus Neumann
0:30:01
Tim Pritlove
0:30:15
Linus Neumann
0:30:17
Tim Pritlove
0:30:23
Linus Neumann
0:30:38
Tim Pritlove
0:31:08
Linus Neumann
0:31:14

Ja.

Tim Pritlove
0:31:14
Linus Neumann
0:31:16
Tim Pritlove
0:31:51
Linus Neumann
0:31:55
Tim Pritlove
0:32:28
Linus Neumann
0:32:30
Tim Pritlove
0:33:20
Linus Neumann
0:33:23

Ja.

Tim Pritlove
0:33:23
Linus Neumann
0:33:29
Tim Pritlove
0:33:32
Linus Neumann
0:33:33
Tim Pritlove
0:33:34
Linus Neumann
0:33:44
Tim Pritlove
0:34:17
Linus Neumann
0:34:18
Tim Pritlove
0:34:19
Linus Neumann
0:34:28

Ich schwöre. Ich schwöre. So, Carlsen. Der Carlsen Verlag klagt gegen OpenAI. Und das ist ein relativ interessantes Phänomen. Offenbar, so beschreibt es der Verlag, In der Pressemitteilung. Wenn du jetzt auf ChatGPT gehst und sagst, du hättest gerne eine Geschichte vom Neinhorn. Das Neinhorn ist ein Buch von Marc-Uwe Kling. Einigen von uns bekannt, also einigen von unseren Hörern sicherlich bekannt als ein Autor und Kleinkünstler. Die Känguru-Reihe, Quality Land, Bühnenshows, der zum Digital Independence Day auf dem Kongress aufgerufen hat und so weiter und so fort. So, das Ninehorn habe ich, war ich ein bisschen late to the party, hielt ich immer für eine super Idee, Leuten so zum Kindergeburtstag zu schenken. Ich bin nicht eins davon bisher losgeworden, weil die es alle immer schon hatten. Hier, Neinhorn. Ja, sorry, aber haben wir schon. Das ist eines der, glaube ich, am weitesten verbreiteten Kinderbücher, aktuell, zeitgenössischen Kinderbücher. Das Neinhorn hängt ja zum Beispiel rum mit dem Hund und so weiter. Und wenn du jetzt quasi zur Chachipiti gehst und sagst jetzt gerne Neinhorn-Geschichte, erzählst du dir eine Neinhorn-Geschichte. Und wenn du dann sagst, ach ja Mensch, da brauchen wir aber noch Illustrationen dazu, dann macht es dir Illustrationen, die eben auch aussehen wie die von Astrid Henn, das ist die Illustratorin von dem Neinhorn-Kinderbuch. Und wenn du dann sagst, ja mach mal noch ein Einband und so, dann faked dir das quasi inklusive Umschlaggestaltung Impressum und einer falschen Bestellnummer mit Verlagslogo. Das ist jetzt erstmal schon mal urheberrechtlich eben problematisch sowieso, dass es quasi so etwas überhaupt macht, aber der entscheidende Punkt ist und das sagt eben der Verlag auf Basis der äußerst detailgetreuen Kopien. Muss davon ausgegangen werden, dass die Originalwerke in unrechtmäßiger Weise zum Training der Sprach- und Bildmodelle von OpenAI genutzt wurden. Sonst könnte das Ding ja kein Neinhorn malen. Wenn es nicht, und erst recht nicht genau im Stil von Astrid Hennen. Und ja, deswegen finde ich das sehr. Also finde ich sehr gut, dass das mal passiert, weil wir haben ja die Kreativbranche der Welt, beklagt sich ja durchaus zu Recht darüber, dass eben massenhaft Werke in diese KIs gefüttert werden, die sich da nicht gegen wehren können, du das nicht verhindern kannst und die dann eben als Artefakte da wieder rauskommen. Und dann geht ja OpenAI hin und sagt, achso, nee, das ist ja die Nutzerinnen verantwortlich, wenn die da Fake-Neinhorn-Bücher machen, das ist ja nicht unsere Schuld. Ja, genauso wie wenn die, was weiß ich, eine Atombombe bauen oder was auch immer. Marc-Uwe Kling sagt dazu, jedem, der sich illegal auch nur einen einzigen Film, ein Buch oder ein Hörbuch runterlädt, droht eine empfindliche Strafe, aber OpenAI klaut einfach alle Kunst und Kultur der ganzen Welt und glaubt damit durchzukommen. Und die Astrid Hennen sagt ja, unerlaubte Verwendung meiner Illustrationen, oft Ergebnis monatelanger Arbeit mit dem Ziel, dass die KI meine Arbeit, also mein Eigentum für jedermann nutzbar macht, ist für mich Diebstahl und das ist einfach halt richtig. Das ist schon denke völlig klar, unabhängig davon, wie man jetzt zu Urheberrecht und geistigen Eigentumsrechten oder sonstigen steht, glaube ich, sind wir uns darüber einig.

Tim Pritlove
0:38:35
Linus Neumann
0:38:38
Tim Pritlove
0:40:17
Linus Neumann
0:40:59
Tim Pritlove
0:41:00
Linus Neumann
0:42:01
Tim Pritlove
0:42:03
Linus Neumann
0:43:36
Tim Pritlove
0:43:40
Linus Neumann
0:43:48
Tim Pritlove
0:43:50
Linus Neumann
0:44:06
Tim Pritlove
0:44:09
Linus Neumann
0:44:10
Tim Pritlove
0:44:13
Linus Neumann
0:45:05
Tim Pritlove
0:46:28
Linus Neumann
0:46:29
Tim Pritlove
0:46:32
Linus Neumann
0:46:42
Tim Pritlove
0:47:06
Linus Neumann
0:47:10

Auch in die Phase unserer, unserer Abwesenheit fällt ja der Angriff auf den Berliner CSD, der. Ich glaube, über die Tragik des Vorkommnisses und so wurde alles gesagt, was man dazu sagen kann. Der aber vor allem mal wieder ein so dramatisches, fürchterliches Behördenversagen zeigt. Der Täter war ja schon unter Beobachtung und als Gefährder gemeldet und dann hat er aber in irgendeinem komischen Resozialisierungsprogramm teilgenommen und, die haben den ja noch beobachtet und observiert auf dem Weg zum Mietwagen. Und dann, oh ja, jetzt hat der sich einen Transporter gekauft. Leider muss man eben an dieser Stelle sagen, dass es sich hier um ein fürchterliches und nicht das erste Mal fürchterliches Behördenversagen handelt, weil, der kam nicht aus dem Nichts, der war aktenkundig und die haben den aktiv im Auge gehabt. Und von sowas muss man natürlich sehr schnell sehr stark ablenken. Am besten mit einer ausführlichen Debatte über eine Geheimdienstreform und irgendwie ein paar Poller im Tiergarten. Was jetzt glaube ich so die Konsequenzen sind. Die Geheimdienstreform natürlich, die korreliert jetzt, wurde zeitlich vorbereitet, wurde das natürlich schon länger. Ja, pass auf, Geheimdienste wollen wir jetzt mal gerade machen, wir wollen ordentlich fähige Geheimdienste haben und die sollen richtig schön, weitgehend uneingeschränkt in informationstechnische Systeme eingreifen können. Online-Durchsuchung, ohne dass eine konkrete Gefahr für ein höheres Rechtsgut benannt werden muss. Also Online-Durchsuchung heißt, voll Hacken des Computers ohne Wissen des Opfers. Gib ihm, damit das auch ordentlich funktioniert, soll das BSI Schwachstellen an den BND übermitteln und quasi melden. Damit ruinierst du quasi noch das Restvertrauen, was vielleicht noch irgendjemand ins BSI hat. Ja, automatisierte Datenanalysen, also ja, letztendlich, also irgendwelche KI-Daten, Analysen und sonstiges. Und dann daran anschließend, die KI-Systeme sollen dann eben auch künftig autonom operative Maßnahmen auslösen. Zum Beispiel ein Hackback. Denn, so die Begründung, ein Zwischenschritt menschlicher Bearbeitung leistet hier keine relevante Qualitätssicherung, verzögert aber Abwehr erfolgsgefährdend. Und so, also mit anderen Worten.

Tim Pritlove
0:50:26
Linus Neumann
0:50:28
Tim Pritlove
0:51:37
Linus Neumann
0:51:39
Tim Pritlove
0:51:52
Linus Neumann
0:52:02
Tim Pritlove
0:52:05
Linus Neumann
0:52:08

Also das ist wirklich mal wieder so eine Open the Flood Gates und natürlich keinerlei keinerlei Kontrolle, sämtliche sämtliche Einrichtungen der der. Berechtigung oder auch Hürden etwas anzuwenden, sind erstmal gar nicht da. Da gibt es dann also auch, die Franziska Görlitz hat das, die Stellungnahme der GFF dazu geschrieben, Gesellschaft für Freiheitsrechte bisher auch gesagt, ja, also das ist ja schon durchgeurteilt, dass es hier bestimmte, als Begründung bei einer Online-Durchsuchung brauchst du dieses gefährdete, höhere Rechtsgut und so weiter und so weiter. Steht hier nicht. Mit anderen Worten, das können wir sofort wegklagen. Hier fehlt das Handwerk. Du musst ja, nur irgendwas hinschreiben. Und das steht noch nicht mal da. Und das ist also wirklich, und ich habe fast den Eindruck, dass sie das machen, damit sich die Debatte an so etwas abnutzt und dann sagen sie, ja, Mensch, jetzt haben sie sich erklagt, dass da ein höheres Rechtsgut stehen muss, wunderbar, jetzt haben wir Online-Durchsuchung. Das ist wirklich alles. Und dann wollen sie die. Aufsicht verlagern, BFDI wollen sie da auch nicht mehr sehen, ja, das soll dann irgendwie in ein eigenes, zentrales Gremium da gehen. Dann sollen die Geheimdienste Dinge tun können, die die Polizei eh auch dürfte? So ein bisschen so mit also im Moment ist es ja so, die Polizei hat in ihrer Informationsgewinnung, höhere Hürden, dafür darf sie halt deine Tür eintreten und dich gefangen nehmen. Der Geheimdienst hat geringere Hürden, der darf aber nicht aktiv werden. Und auch das wollen sie halt aufweichen, dass dann eben so Geheimdienste doch mal eben so kurz was, ein bisschen was machen können, weißt du? Aber ein bisschen in der, Es ist wirklich, Ja, you get what you pay for.

Tim Pritlove
0:54:17
Linus Neumann
0:54:32
Tim Pritlove
0:54:35
Linus Neumann
0:54:51
Tim Pritlove
0:56:07
Linus Neumann
0:56:10
Tim Pritlove
0:56:15
Linus Neumann
0:56:23
Tim Pritlove
0:56:49
Linus Neumann
0:57:12
Tim Pritlove
0:57:18
Linus Neumann
0:57:25
Tim Pritlove
0:57:44
Linus Neumann
0:58:10
Tim Pritlove
0:58:36
Linus Neumann
0:58:44
Tim Pritlove
0:59:43
Linus Neumann
0:59:58
Tim Pritlove
1:01:56
Linus Neumann
1:02:29
Tim Pritlove
1:03:05
Linus Neumann
1:03:08
Tim Pritlove
1:03:18
Linus Neumann
1:03:32
Tim Pritlove
1:04:57
Linus Neumann
1:04:59
Tim Pritlove
1:05:02
Linus Neumann
1:05:03
Tim Pritlove
1:06:48
Linus Neumann
1:07:01
Tim Pritlove
1:07:13
Linus Neumann
1:07:18
Tim Pritlove
1:07:23
Linus Neumann
1:07:27
Tim Pritlove
1:07:29
Linus Neumann
1:07:36
Tim Pritlove
1:09:39
Linus Neumann
1:09:39
Tim Pritlove
1:10:33
Linus Neumann
1:10:37
Tim Pritlove
1:10:41
Linus Neumann
1:10:50
Tim Pritlove
1:10:52
Linus Neumann
1:11:47
Tim Pritlove
1:13:14
Linus Neumann
1:13:18

Ja.

Tim Pritlove
1:13:20
Linus Neumann
1:14:43
Tim Pritlove
1:16:11
Linus Neumann
1:16:13
Tim Pritlove
1:17:14
Linus Neumann
1:17:20
Tim Pritlove
1:17:24

Internet-Zugang ist halt das Problem. Wir haben uns jetzt auch so dran gewöhnt, dass nahezu die gesamte Infrastruktur der Welt mehr oder weniger ins Internet angeschlossen ist. Hier und da gibt es ein paar Luftlücken und ein paar Sandboxen oder Leute denken eine Firewall wäre jetzt sozusagen schon ausreichend, aber auch eine Firewall brennt halt irgendwann mal durch und das macht halt. Die Verbindung mit dem Internet so knifflig. Und andererseits wollen wir dann irgendwie auch, dass alles digital und überwacht ist und steuerbar ist und Home Automation etc. Also wir sorgen ja selber dafür, dass das Internet im Prinzip immer mehr Risikopotenzial entwickelt. Und jetzt haben wir auch noch Maschinen, die eben nicht müde werden, alle möglichen Sicherheitslücken auszuprobieren und dabei auch noch glaubt, vollkommen legitim zu handeln. Mal ganz davon abgesehen, dass es natürlich eine ganze Menge Bösewichte da draußen gibt mit technischen Fähigkeiten, die sehr wohl diese Maschinen ganz bewusst so prompten mit dir. Du bist Hackbar-Zieler, du musst jetzt die Welt für uns retten, also mach mal alles auf und dann liefere mal die Informationen an uns, weil wir sind hier die einzigen, die diesen Planeten überhaupt retten können. Und da muss man sich natürlich auch gegen wappnen. Von daher ist es auch vollkommen okay. Wir hatten jetzt zum Beispiel hier Potlav, die Software, die, Ist auch schon autonom? Ja, die hatte auf jeden Fall in der letzten Zeit eine deutlich gesteigerte Ausnutzungsrate von Sicherheitslücken. No shit, Sherlock. Weil natürlich jetzt immer mehr automatisiert auch Open Source Projekte nach Sicherheitslücken durchsucht werden und die dann auch ausgenutzt werden. Also kannst du nur dagegen halten, wenn du sozusagen deine eigene Software auch einem solchen Stresstest unterziehst, um überhaupt erstmal noch Lücken zu finden, die noch gar nicht gemeldet wurden. Bis vor kurzem war es ja noch so, da wurde eine Sicherheitslücke gemeldet. Über wie viele Fälle haben wir berichtet? Ja, da wurde den Leuten ein paar Wochen Zeit gegeben. Dann haben sie irgendwann mal drauf reagiert oder vielleicht halt auch nicht.

Linus Neumann
1:19:41
Tim Pritlove
1:19:43
Linus Neumann
1:20:35

Also, was ich noch sehr faszinierend finde, ist, klar, man sagt jetzt, man will schnell patchen, also im Prinzip musst du halt automatisiert patchen, ganz klar, weil du quasi die Zeit, die dir übrig bleibt bis zum Exploit, nähert sich null an. Aber wenn du dann anschaust, dass in diesem einen Fall das Ding mal eben ein Upstream-Paket kompromittiert hat, dann ist halt das Downloaden des schnellsten Pakets kann eben in wenigstens in den seltensten Fällen, kann das eben auch die Schwachstelle sein, weil da wird halt, irgendeine Backdoor eingebaut die du da reinziehst und die Geschwindigkeit, die da stattfindet ich denke schon und ich hatte das ja hier auch in der Sendung ich glaube das war dann im Mai, Juni oder so, da haben sich ja auch einige Leute sehr darüber geärgert, dass ich, die besonderen Fähigkeiten von KIs gewürdigt habe, die sich mir sehr offen zeigen. Der Ralf hatte die Folge auch in der Freakshow nochmal gelobt, was mich sehr gefreut hat. Und dann auch in der folgenden ja auch seine Gedanken, oder in folgenden beiden Sendungen auch seine Gedanken nochmal zu dem Thema geteilt, die ebenfalls empfohlen sind. Da passiert halt gerade echt einiges und ich bin mir recht sicher, dass wie du auch gerade sagst, du wirst jetzt im Angriff auf der anderen Seite halt von Agents ausgehen müssen und du wirst in der Verteidigung auch von Agents ausgehen müssen und. Der Anteil, der prozentuale Anteil von Code, der von Menschen geschrieben wurde, wird innerhalb der nächsten Jahre Richtung Null gehen. Und dann bist du schon wirklich an der Stelle, wo du nicht mehr argumentieren kannst, dass Computer unter deiner Kontrolle wären. Oder unter unserer. Und dann hast du halt ein Skynet gebaut. Ob du willst oder nicht. Wenn du Glück hast, ist es ein Nettes. Wenn du Glück hast, ist es ein Nettes. Aber diese schon sehr dystopische Vorstellung ist nah genug für, dass selbst du sie in dem klein bisschen verbleibende, Lebenszeit noch erleben wirst. Alter, weißer Mann hier. Also das ist halt wirklich so sehr nah. Und wie fähig die Dinger dann sind, das kann man noch sagen. Von mir aus haben wir immer noch irgendwie einen Schalter. Aber. Ich sehe uns gerade auf dem Weg dahin, dass der größere Teil der Computersysteme, entweder Modelle ausführt, die wir eh nicht genau wissen, was die machen. Die sind ja nicht deterministisch und nicht kontrollierbar. Oder der Code, der noch irgendwo läuft, von den Modellen geschrieben wurde. Und Human in the Loop, du erinnerst dich, was ich gerade gesagt habe, bei der Geheimdienstgesetzreform, da sagt das BMI auch, ja, also Qualitätssteigerungen wird das jetzt hier nicht bringen, wenn wir da einen von unseren Beamten nochmal reinsetzen. Im Zweifelsfall nicht. Da ist kein Gewinn. Lass den einfach außen vor und lass, erst draufhauen und nachher Fragen stellen. Und, ich sehe leider gerade ein Anreizgefüge für alle beteiligten StakeholderInnen. Genau das so gewähren zu lassen und diesen Weg zu gehen, da ist nirgendwo ein ausreichend starkes Interesse im Sichtfeld, Wo du sagen würdest, das wird's ausbremsen. Da kommen wir dann doch nicht hin. Sondern ganz im Gegenteil. Die Produktivitätsversprechen müssen eingelöst werden. Und so weiter und so fort.

Tim Pritlove
1:24:55
Linus Neumann
1:25:01
Tim Pritlove
1:25:03

Keine Firewall, sondern so ein Bereich, wo das Feuer mal nicht so viel Futter hat. Also wo es nicht so schnell weiterlaufen kann, um einfach einen Flächenbrand, in irgendeiner Form auch noch unter Kontrolle bekommen zu können. Und da ist da der Human in the Loop wahrscheinlich doch die richtige Antwort. Es gab ja mal diesen alten Kalterkriegszeiten, wo es so eine Fehlmeldung gab. Dass die Amerikaner eine Atomrakete, dass jetzt gerade eine Atomrakete auf Moskau fliegen würde und ein Russe, der quasi da an dem Schalter saß, der hat dann gesagt, so, nee, glaube ich nicht, das stimmt. Macht einfach keinen Sinn an dem Moment. Ja, steht hier zwar, aber glaube ich nicht. Mache ich jetzt einfach nicht. Und natürlich kann diese Person, hätte sie auch genau in die andere Richtung entscheiden können. Trotzdem ist natürlich jetzt für diese Person in dem Moment nicht nur die reine Information relevant gewesen, sondern auch dieses Gefühl der potenziellen Auswirkungen kann das sein, ist das jetzt nicht ein bisschen irgendwas stimmt hier nicht. So dieses Gefühl und ich glaube, das ist so wie das, was diese LLMs noch nicht drauf haben. Einfach dieses Bauchgefühl, dass da was nicht stimmt. Und von daher müssen, solche Elemente mit drin sein. Die Geheimdienstreform wäre auf jeden Fall schon mal ganz gut damit, bestellt, hier nicht voll zu automatisieren, weil auch wenn das irgendwie rein technisch betrachtet irgendwo Sinn ergibt, dieses Argument, ist es halt am Ende, einfach ein echtes Problem.

Linus Neumann
1:26:58

Ja!

Tim Pritlove
1:26:59
Linus Neumann
1:27:20
Tim Pritlove
1:27:24
Linus Neumann
1:27:34
Tim Pritlove
1:28:15
Linus Neumann
1:28:23
Tim Pritlove
1:28:48
Linus Neumann
1:28:51
Tim Pritlove
1:29:27
Linus Neumann
1:29:28
Tim Pritlove
1:29:39
Linus Neumann
1:29:42
Tim Pritlove
1:29:43
Linus Neumann
1:29:45
Tim Pritlove
1:29:52
Linus Neumann
1:29:53
Tim Pritlove
1:29:58
Linus Neumann
1:29:59
Tim Pritlove
1:30:40
Linus Neumann
1:31:00
Tim Pritlove
1:31:11
Linus Neumann
1:31:20