Detail publikace
Multi-Channel Extension of Pre-trained Models for Speaker Verification
Serizel Romain (LORIA)
Burget Lukáš, doc. Ing., Ph.D. (UPGM FIT VUT)
Plchot Oldřich, Ing., Ph.D. (UPGM FIT VUT)
Vincent Emmanuel (LORIA)
Peng Junyi, Msc. Eng. (UPGM FIT VUT)
Černocký Jan, prof. Dr. Ing. (UPGM FIT VUT)
V této práci se zaměřujeme na návrh vícekanálové řeči systém zpracování založený na velkých předem vyškolených modelech. Tyto modely jsou obvykle trénovány pro jednokanálové scénáře prostřednictvím samokontrolované učení (SSL). Běžný přístup k použití modely SSL s daty pole mikrofonů je mají předřadit s vícekanálovým vylepšením řeči. Nevýhodou je, že prostorové informace lze využít pouze předzpracováním fázi a chyby vylepšení se přenesou do modelu SSL. Naším cílem je tento problém zmírnit navržením METRO, multi- kanál Rozšíření pRetrénovaných modelů. Prokládá se zpracování kanálů s výměnou informací mezi kanály, případně sloučení kanálů do jednoho. Zatímco náš přístup je gen- Nyní se zaměříme na ověření vícekanálových reproduktorů. Náš experimenty na korpusu MultiSV ukazují pozoruhodné zlepšení porovnává nejlépe publikované výsledky na datovém souboru
@INPROCEEDINGS{FITPUB13322, author = "Ladislav Mo\v{s}ner and Romain Serizel and Luk\'{a}\v{s} Burget and Old\v{r}ich Plchot and Emmanuel Vincent and Junyi Peng and Jan \v{C}ernock\'{y}", title = "Multi-Channel Extension of Pre-trained Models for Speaker Verification", pages = "2135--2139", booktitle = "Proceedings of Interspeech 2024", journal = "Proceedings of Interspeech - on-line", volume = 2024, number = 9, year = 2024, location = "Kos, GR", publisher = "International Speech Communication Association", ISSN = "1990-9772", doi = "10.21437/Interspeech.2024-1260", language = "english", url = "https://www.fit.vut.cz/research/publication/13322" }