Detail projektu

ROXANNE - Real time network, text, and speaker analytics for combating organized crime

Období řešení: 1. 9. 2019 - 31. 12. 2022

Typ projektu: grant

Kód: 833635

Agentura: Evropská komise EU

Program: Horizon 2020

Název česky
Síťová, textová analýza a analýza řeči v reálném čase pro boj s organizovaným zločinem
Typ
grant
Klíčová slova

Boj proti kriminalitě, Boj proti obchodování s lidmi, Analýza řeči, Analýza kriminální sítě, Organizovaný zločin, Boj proti terorismu, Platforma pro analýzu, Právní a etický rámec

Abstrakt

Objevování zločineckých sítí a identifikace jejich členů je jedním z hlavních aspektů poslání LEAs. ROXANNE přispěje k dosažení tohoto cíle tím, že překoná silné stránky řečových a jazykových technologií (SLT), vizuální analýzy (VA) a síťové analýzy (NA). Pokud bude financována, ROXANNE dosáhne významného zvýšení rychlosti vyšetřovacích procesů a zlepšení identifikace osob prostřednictvím řeči v rámci kriminálních případů, kdy je analyzováno velké množství legálně zachycených komunikací (s vícejazyčnými atributy). Technický vývoj bude soustředěn kolem platformy ROXANNE, která posílí schopnost analyzovat kriminální síť tím, že poskytne rámec pro získávání důkazů a zpravodajských informací založených na řečových, jazykových a video technologiích. Záměrem není nahradit lidi, ale automatizovat časově náročné úkoly a podporovat rozhodování LEA. Jeho časná verze nabídne předběžné schopnosti SLT, VA a NA ke shromažďování zpětné vazby koncových uživatelů. Konečná verze poskytne vícejazyčné pravděpodobné nástroje, které propojí technologie SLT a NA, které budou podporovány při zpracování přirozeného jazyka (NLP) a relační analýzy v grafu synoptické kriminální činnosti. ROXANNE dosáhne plného souladu s příslušnými právními a etickými rámcimi INTERPOL a EU, včetně inovativních přístupů k řízení ochrany údajů, jako je ochrana soukromí od návrhu. Zvláštní úsilí bude vynaloženo, aby se zajistilo, že výsledky společnosti ROXANNE dosáhnou rozsáhlé přijetí ze strany donucovacích orgánů. Snaha bude posílena prostřednictvím řady vzdělávacích a osvětových kampaní a přímého zapojení LEA z devíti evropských zemí, které otestují naše řešení na základě skutečných údajů. Navíc partner ROXANNE INTERPOL a EUROPOL (člen externí poradní rady) poskytnou poradenství a poradenství. Konsorcium má 24 partnerů s komplementárními dovednostmi, včetně vedoucích pracovníků v klíčových technologických oblastech, které mají dopad na trestní vyšetřování.

Řešitelé
Černocký Jan, prof. Dr. Ing. (UPGM FIT VUT) , hlavní řešitel
Szőke Igor, Ing., Ph.D. (UPGM FIT VUT) , spoluřešitel
Černá Aneta, DiS
Karafiát Martin, Ing., Ph.D. (UPGM FIT VUT)
Veselý Karel, Ing., Ph.D. (UPGM FIT VUT)
Žižka Josef, Ing. (UPGM FIT VUT)
Žmolíková Kateřina, Ing., Ph.D. (UPGM FIT VUT)
Podpora

[img]
Tento projekt získal financování z programu Evropské unie pro výzkum a inovace Horizont 2020 na základě grantové dohody č. 833635.

Publikace

2023

  • SKOWRON Marcin, BACKFRIED Gerhard, NAVAS Eva, BERZINŠ Aivars, VAN Den Bogaert Joachim, DE Jong Franciska, DEMARCO Andrea, POLÁK Peter, KOVÁČ Marek, POLÁK Peter, ROHDIN Johan A., ROSNER Michael, SANCHEZ Jon, SARATXAGA Ibon a SCHWARZ Petr. Deep Dive Speech Technology. European Language Equality. Cham: Springer Nature Switzerland AG, 2023, s. 289-312. ISBN 978-3-031-28819-7. Detail
  • NIGMATULINA Iuliia, MADIKERI Srikanth, VILLATORO-TELLO Esaú, MOTLÍČEK Petr, ZULUAGA-GOMEZ Juan, PANDIA Karthick a GANAPATHIRAJU Aravind. Implementing contextual biasing in GPU decoder for online ASR. In: Proceedings of the Annual Conference of International Speech Communication Association, INTERSPEECH. Dublin: International Speech Communication Association, 2023, s. 4494-4498. ISSN 1990-9772. Detail

2022

  • SILNOVA Anna, STAFYLAKIS Themos, MOŠNER Ladislav, PLCHOT Oldřich, ROHDIN Johan A., MATĚJKA Pavel, BURGET Lukáš, GLEMBEK Ondřej a BRUMMER Johan Nikolaas Langenhoven. Analyzing speaker verification embedding extractors and back-ends under language and channel mismatch. In: Proceedings of The Speaker and Language Recognition Workshop (Odyssey 2022). Beijing: International Speech Communication Association, 2022, s. 9-16. Detail
  • LANDINI Federico Nicolás, PROFANT Ján, DIEZ Sánchez Mireia a BURGET Lukáš. Bayesian HMM clustering of x-vector sequences (VBx) in speaker diarization: Theory, implementation and analysis on standard tasks. Computer Speech and Language, roč. 71, č. 101254, 2022, s. 1-16. ISSN 0885-2308. Detail
  • ALAM Jahangir, BURGET Lukáš, GLEMBEK Ondřej, MATĚJKA Pavel, MOŠNER Ladislav, PLCHOT Oldřich, ROHDIN Johan A., SILNOVA Anna a STAFYLAKIS Themos a kol. Development of ABC systems for the 2021 edition of NIST Speaker Recognition evaluation. In: Proceedings of The Speaker and Language Recognition Workshop (Odyssey 2022). Beijing: International Speech Communication Association, 2022, s. 346-353. Detail
  • SOLEWICZ Yosef, COHEN Noa, ROHDIN Johan A., MADIKERI Srikanth a ČERNOCKÝ Jan. Speaker recognition on mono-channel telephony recordings. In: Proceedings of Odyssey 2022. Beijing: International Speech Communication Association, 2022, s. 193-199. Detail
  • STAFYLAKIS Themos, MOŠNER Ladislav, PLCHOT Oldřich, ROHDIN Johan A., SILNOVA Anna, BURGET Lukáš a ČERNOCKÝ Jan. Training Speaker Embedding Extractors Using Multi-Speaker Audio with Unknown Speaker Boundaries. In: Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH. Incheon: International Speech Communication Association, 2022, s. 605-609. ISSN 1990-9772. Detail

2021

  • LANDINI Federico Nicolás, GLEMBEK Ondřej, MATĚJKA Pavel, ROHDIN Johan A., BURGET Lukáš, DIEZ Sánchez Mireia a SILNOVA Anna. Analysis of the BUT Diarization System for Voxconverse Challenge. In: ICASSP 2021 - 2021 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP). Toronto, Ontario: IEEE Signal Processing Society, 2021, s. 5819-5823. ISBN 978-1-7281-7605-5. Detail
  • KARAFIÁT Martin, VESELÝ Karel, ČERNOCKÝ Jan, PROFANT Ján, NYTRA Jiří, HLAVÁČEK Miroslav a PAVLÍČEK Tomáš. Analysis of X-Vectors for Low-Resource Speech Recognition. In: ICASSP 2021 - 2021 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP). Toronto, Ontario: IEEE Signal Processing Society, 2021, s. 6998-7002. ISBN 978-1-7281-7605-5. Detail
  • LANDINI Federico Nicolás, LOZANO Díez Alicia, BURGET Lukáš, DIEZ Sánchez Mireia, SILNOVA Anna, ŽMOLÍKOVÁ Kateřina, GLEMBEK Ondřej, MATĚJKA Pavel, STAFYLAKIS Themos a BRUMMER Johan Nikolaas Langenhoven. BUT System Description for The Third DIHARD Speech Diarization Challenge. In: Proceedings available at Dihard Challenge Github. on-line by LDC and University of Pennsylvania, 2021, s. 1-5. Detail
  • STAFYLAKIS Themos, ROHDIN Johan A. a BURGET Lukáš. Speaker embeddings by modeling channel-wise correlations. In: Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH. Brno: International Speech Communication Association, 2021, s. 501-505. ISSN 1990-9772. Detail

2020

  • ALAM Jahangir, BOULIANNE Gilles, BURGET Lukáš, DAHMANE Mohamed, DIEZ Sánchez Mireia, GLEMBEK Ondřej, LALONDE Marc, LOZANO Díez Alicia, MATĚJKA Pavel, MIZERA Petr, MOŠNER Ladislav, NOISEUX Cédric, MONTEIRO Joao, NOVOTNÝ Ondřej, PLCHOT Oldřich, ROHDIN Johan A., SILNOVA Anna, SLAVÍČEK Josef, STAFYLAKIS Themos, ST-CHARLES Pierre-Luc, WANG Shuai a ZEINALI Hossein. Analysis of ABC Submission to NIST SRE 2019 CMN and VAST Challenge. In: Proceedings of Odyssey 2020 The Speaker and Language Recognition Workshop. Tokyo: International Speech Communication Association, 2020, s. 289-295. ISSN 2312-2846. Detail
  • LOZANO Díez Alicia, SILNOVA Anna, PULUGUNDLA Bhargav, ROHDIN Johan A., VESELÝ Karel, BURGET Lukáš, PLCHOT Oldřich, GLEMBEK Ondřej, NOVOTNÝ Ondřej a MATĚJKA Pavel. BUT Text-Dependent Speaker Verification System for SdSV Challenge 2020. In: Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH. Shanghai: International Speech Communication Association, 2020, s. 761-765. ISSN 1990-9772. Detail
  • SILNOVA Anna, BRUMMER Johan Nikolaas Langenhoven, ROHDIN Johan A., STAFYLAKIS Themos a BURGET Lukáš. Probabilistic embeddings for speaker diarization. In: Proceedings of Odyssey 2020 The Speaker and Language Recognition Workshop. Tokyo: International Speech Communication Association, 2020, s. 24-31. ISSN 2312-2846. Detail
  • MOŠNER Ladislav, PLCHOT Oldřich, ROHDIN Johan A. a ČERNOCKÝ Jan. Utilizing VOiCES dataset for multichannel speaker verification with beamforming. In: Proceedings of Odyssey 2020 The Speaker and Language Recognition Workshop. Tokyo: International Speech Communication Association, 2020, s. 187-193. ISSN 2312-2846. Detail
Nahoru