Project detail

Nástroje boje proti hlasovým DeepFakes

Duration: 01.01.2024 — 31.12.2026

Funding resources

Ministerstvo vnitra ČR - Programu bezpečnostního výzkumu ČR 2021-2026: vývoj, testování a evaluace nových bezpečnostních technologií (SECTECH) - II. veřejná soutěž

- part funder (2024-01-01 - 2026-12-31)

On the project

Deepfakes jsou novou aplikací umělé inteligence s významným dopadem na počítačovou bezpečnost. Jejich tvorba je stále snazší než kdykoli předtím a tyto nástroje lze využít k oklamání jednotlivců i organizací, zejména v kombinaci s taktikami sociálního inženýrství, jako je phishing. Tento projekt se proto zaměřuje na pochopení možných způsobů použití a souvisejících hrozeb při zákeřném používání deepfakes se záměrem najít spolehlivé strategie pro zmírnění těchto hrozeb. Tím můžeme zajistit, aby tyto inovace byly využívány eticky a zodpovědně, a vytvořit tak udržitelnější a spravedlivější budoucnost pro všechny. Aktivity projektu jsou zaměřeny na 4 oblasti: zlepšení jádra technologie pro detekci mluvčího, vývoj technologie pro identifikaci upraveného a uměle vytvořeného hlasu, implementaci těchto technologií do systémů firmy Phonexia a vývoj standardizovaného testovaní odolnosti hlasových biometrických systému vůči zmíněným hrozbám. Testování bude zohledňovat aktuální kvalitu metod pro tvorbu deepfakes s cílem zajistit co nejvyšší robustnost systému.

Description in English
Deepfakes are a new application of artificial intelligence with a significant impact on computer security. They are becoming easier than ever to create, and these tools can be used to deceive individuals and organizations, especially when combined with social engineering tactics such as phishing.  This project therefore focuses on understanding the possible uses and associated threats in the malicious use of deepfakes, with the intention of finding reliable strategies to mitigate these threats. By doing so, we can ensure that these innovations are used ethically and responsibly, creating a more sustainable and fairer future for all.  The project's activities are focused on 4 areas: improvement of the core technology for speaker detection, development of technology for identification of modified and artificially created voice, implementation of these technologies in the systems of the Phonexia company and development of standardized testing of the resistance of voice biometric systems to the mentioned threats. Testing will take into account the current quality of methods for creating deepfakes in order to ensure the highest possible robustness of the system.

Keywords
Deepfakes; umělá inteligence; počítačová bezpečnost

Key words in English
Deepfakes; artificial intelligence; computer security

Mark

VB02000060

Default language

Czech

People responsible

Hanáček Petr, doc. Dr. Ing. - fellow researcher
Plchot Oldřich, Ing., Ph.D. - fellow researcher
Matějka Pavel, Ing., Ph.D. - principal person responsible

Units

Department of Computer Graphics and Multimedia
- (2023-04-20 - 2026-12-31)
Department of Intelligent Systems
- (2023-04-20 - 2026-12-31)

Results

FIRC, A.; MALINKA, K.; HANÁČEK, P. Deepfake Speech Detection: A Spectrogram Analysis. SAC '24: Proceedings of the 39th ACM/SIGAPP Symposium on Applied Computing. 2024. p. 0-0.
Detail