Hoppa till huvudinnehåll

Secure AI

Artificiell Intelligens (AI) håller på att bli en central del för svensk industri, offentlig sektor och samhället i stort. Men i takt med att användandet ökar, ökar även riskerna. Traditionell cybersäkerhet fokuserar på att skydda infrastruktur, medan AI-säkerhet handlar om att säkerställa att AI-system i sig själva agerar på ett säkert, robust och etiskt sätt – även om de utsätts för manipulation eller attack.

AI Swedens initiativ Secure AI erbjuder en unik nationell förmåga att:

  • Identifiera och hantera sårbarheter i AI-system, som manipulation, "data poisoning" och modelläckage.
  • Utveckla och validera motåtgärder som gör AI pålitlig och motståndskraftig.
  • Öka förståelsen för hur du skyddar integriteten data som används för att träna AI eller som skickas till en AI-modell.
  • Stödja efterlevnad av EU:s AI-förordning genom konkreta metoder, verktyg och utvärderingar.
  • Kompetensutveckling genom forskare, studenter och branschexperter.

Vi har arbetat med AI-säkerhet sedan 2021, och Secure AI fungerar som Sveriges samarbetsnav för att säkerställa att AI-system förblir säkra, pålitliga och i linje med våra värderingar – även inför växande hot.

Projects and talent programs

Golden honeycomb pattern on a computer component with a metallic shine

AI-Powered Honeypots

Honeypots are decoy computing systems that mimic real environments to trick attackers into interacting with them. There are two ways a honeypot can increase security: (1) by occupying attacker...
Man presenting on "LeakPro" to a small audience with "AI Sweden" banner visible.

LeakPro: Leakage profiling and risk oversight for machine learning models

Many recent works have highlighted the possibility of extracting data from trained machine-learning models. However, these examples are typically performed under idealistic conditions and it is...
Woman placing notes on a whiteboard

AI Security Graduate Program

The AI Security Graduate Program is about talents securing robust, ethical, and sustainable AI, within your organization. Together with partners, AI Sweden and Nexer Tech Talent cultivate Sweden's...

Keynotes and publications on Secure AI

Selected keynotes and publications. Visit our listing of scientific publications and AI Swedens Youtube channel for a comprehensive list.

Figure from the publication

Destabilizing a Social Network Model via Intrinsic Feedback Vulnerabilities

Rogers, Lane H., Emma J. Reid, and Robert A. Bridges. SafeThings Workshop, IEEE S&P 2025, arXiv preprint

[pdf]
Screen shot from the talk

Emerging Threats & Solutions in Protecting The Electric Grid

Dr. Mary Bell, DSU

(45 min)

Youtube
Screen shot from Bobby Bridges' lecture

Can 'Lying Smartly' Preserve Privacy?

Dr. Robert (“Bobby”) Bridges, Innovation lead at AI Sweden

(63 min)

Youtube
Excerpt from the publication

Poisoning Attacks on Federated Learning for Autonomous Driving

Sonakshi Garg, Hugo Jönsson, Gustav Kalander, Axel Nilsson, Bhhaanu Pirange, Viktor Valadi, Johan Östman. In: SCAI 2024.

[pdf]
Screen shot from the webinar

AI trends seminar 2025 - Impact on AI Security and trust

Rebecka Cedering Ångström, Principal researcher, Ericsson 
Mauricio Muñoz, Senior research engineer, AI Sweden

(16 min)

Youtube

Latest news

Johan Östman and Maja Haak presenting LeakPro projekt in the Edge Lab
Vad kan forskning inom AI-säkerhet tillföra i kampen mot organiserad brottslighet? Johan Östman...
EU Minister Jessica Rosencrantz at AI Sweden with partners.
Sveriges och Europas konkurrenskraft, innovation och AI-säkerhet. Det var några av ämnena när EU...
Johan Östman and Tim Isbister posing in front of AI Sweden poster
När årets upplaga av den stora AI-konferensen International Conference on Learning Representations...
Mauricio and Bobby
Genom rekryteringen av två internationella AI-experter stärker AI Sweden sin tekniska spetskompetens...
Dr. Robert (Bobby) Bridges calculating and writing on a whiteboard
Går det att använda AI för att göra honeypots mer attraktiva för angripare och därmed få dem att...
A large group of students
Hur kan AI bidra till att upptäcka misstänkta fartygsrörelser till havs, stärka IT-infrastrukturens...

Engagera dig

För AI Sweden partners – kontakta Mats Nordlund.

Vill du veta mer om partnerskap?

Mats Nordlund
Mats Nordlund
Director of AI Labs
+46 (0)70-398 08 37