VoxLock filtert Nebensprecher mit einer Stimmprobe aus dem Anruf selbst

VoxLock filtert Nebensprecher mit einer Stimmprobe aus dem Anruf selbst

VoxLock ist ein offenes, kausales Modell zur Sprecherisolation für Sprachagenten und Telefonanrufe. Laut Veröffentlichung handelt es sich um ein auf einer GPU feinabgestimmtes, öffentliches Target-Speaker-Extraction-Modell, in der Quelle „REAL-TSE“ genannt, mit 27 Millionen Parametern. Es hält die Stimme des Anrufers fest und entfernt andere Stimmen im Raum, bevor die Spracherkennung sie verarbeitet. Das ist nötig, weil eine Spracherkennung alle transkribiert, die nah am Mikrofon sprechen, nicht nur den Anrufer.

Eingabe ist allein das Anrufaudio. Einen separaten Enrollment-Schritt gibt es nicht. Stattdessen entnimmt VoxLock den ersten Sekunden des Gesprächs eine Stimmprobe von rund drei Sekunden.

Im Streaming-Betrieb braucht das 8-Bit-Modell nach Angaben der Veröffentlichung 77 Prozent eines CPU-Threads bei 24 Millisekunden algorithmischer Latenz. Der Standard-Download (75 Megabyte) ist genau diese 8-Bit-Variante. Die Benchmarks liefen dagegen mit der fp32-Variante, die sich per Parameter wählen lässt. Die Genauigkeitswerte gelten deshalb nicht zwingend für das standardmäßig geladene Modell.

Modell, Code und Einzeldatei-Ergebnisse sind offen. Die Installation erfolgt per „pip install voxlock“. Alternativ genügt in der Kommandozeile „voxlock call.wav -o caller.wav“. Beim ersten Gebrauch lädt das Modell von Hugging Face. Beliebige Abtastraten sowie Mono und Stereo werden akzeptiert.

4,95 statt 23,21 Prozent Wortfehlerrate: Die Zahlen stammen vom Hersteller

Auf dem Krisp Voice Isolation Benchmark mit 265 realen Aufnahmen nennt die Veröffentlichung eine Wortfehlerrate (WER) von 4,95 Prozent. Unverarbeitet liegt sie bei 23,21 Prozent. Transkribiert wurde mit Parakeet TDT 0.6B v2. In 85 Minuten reiner Hintergrundsprache landeten neun Hintergrundwörter im Transkript.

Ein zweiter Test nutzt 400 Fenster aus AMI-Meetings. Sie wurden vor der Bewertung gebaut und eingefroren und lagen nicht im Training. Hier sinkt die WER von 42,95 auf 10,63 Prozent. Die Person mit Headset gilt als Anrufer.

Den Vergleich mit ElevenLabs Voice Isolator führte der Autor nur auf den 7 der 265 Aufnahmen durch, die am meisten Hintergrundsprache enthalten. Dort liegt VoxLock bei 2,98 Prozent, unverarbeitet bei 45,82 Prozent. Das ist eine kleine Auswahl, kein Gesamtvergleich.

Modellkarte und Community-Beitrag nennen VoxLock „the best performing voice isolator there is“ und sprechen vom niedrigsten Wert aller getesteten Modelle. Das Abstract formuliert zurückhaltender. Die WER unterscheidet sich von Krisps besten Filtern nicht signifikant. Signifikant niedriger ist sie nur gegenüber den übrigen getesteten kommerziellen und offenen Systemen. Ein numerischer Spitzenplatz bei statistischem Gleichstand belegt den Superlativ nicht. Belastbar ist: auf Augenhöhe mit Krisps besten Filtern.

Alle Zahlen stammen aus dem Umfeld des Herstellers. Eine unabhängige Reproduktion liegt nicht vor.

Etwa drei Sekunden Anlaufzeit und offene Prüfpunkte für Betreiber

„Kein Enrollment“ heißt: kein separater, vorab aufgenommener Schritt. Anlaufzeit gibt es trotzdem. Technisch braucht VoxLock eine rund drei Sekunden lange Stimmprobe aus dem Anruf. Ein Nutzer im Subreddit r/speechtech nennt diese Wartezeit das Hauptproblem.

Betreiber müssen Lizenz, Datenschutz und die Eignung für die eigene Audioqualität selbst klären. Datenschutzrelevant ist, dass im Gespräch Stimmmerkmale abgeleitet werden. Ob sich die Ergebnisse auf Telefonaufnahmen übertragen lassen, zeigen nur eigene Tests.