Clear: aprimoramento de fala no dispositivo, redução de ruído e de reverberação
Aprimoramento de fala no dispositivo que transforma uma gravação com ruído em um arquivo de 48 kHz pronto para podcast: sem ruído, sem reverberação e com loudness normalizado, tudo no dispositivo.
O Clear recebe áudio mono ou estéreo com ruído, o microfone de um notebook, uma sala sem tratamento, o trânsito, e devolve um resultado limpo em 48 kHz. Um modelo DeepFilterNet 3 ajustado cuida da redução de ruído e da desreverberação, e uma passagem opcional normaliza o loudness para a especificação da plataforma.
Ele funciona com qualquer arquivo de áudio ou vídeo que o AVFoundation consiga ler; o vídeo volta com a imagem original e o áudio aprimorado combinados. Um clipe de 10 minutos é processado em cerca de 7 segundos no Apple silicon. O Clear é a alternativa no dispositivo às ferramentas em nuvem como Adobe Podcast, Dolby e Auphonic: o áudio nunca sai do dispositivo, sem upload e sem cobrança por minuto. Ele se destaca pela desreverberação e pela saída pronta para podcast, as qualidades que a maioria dos redutores de ruído deixa de lado.
Demo
Desempenho
Aprimora um clipe de 5 minutos em 3,7 s em um iPhone 17 Pro, 81x tempo real, no dispositivo.
Tempo para aprimorar um clipe de 5 minutos no Apple Neural Engine (interno)
| Dispositivo | Mono | Estéreo |
|---|---|---|
| iPhone 17 Pro (A19 Pro) | 3.70 s · 81x | 5.16 s · 58x |
| iPhone 15 Pro (A17 Pro) | 4.88 s · 61x | 6.53 s · 46x |
Casos de uso
Masterização de podcast e vídeo
Limpe uma gravação de microfone de notebook ou de sala sem tratamento e normalize para Apple Podcasts, Spotify, YouTube ou EBU R128 em uma única passagem.
Desreverberação
Remova as reflexões da sala, não apenas o chiado. A desreverberação é onde a maioria dos redutores de ruído para, e o Clear continua.
Rápido e local
Um clipe de 10 minutos é processado em cerca de 7 segundos no dispositivo, sem upload e sem custo por minuto.
Captura de voz e reuniões
Melhore a inteligibilidade de notas de voz e chamadas gravadas antes da transcrição ou do arquivamento.
O que ele faz
- Redução de ruído mais desreverberação a partir de um modelo DeepFilterNet 3 ajustado.
- Presets de loudness: Apple Podcasts, Spotify, YouTube, EBU R128.
- Controles
StrengtheMastering. - Funciona com qualquer áudio ou vídeo que o AVFoundation consiga ler; o vídeo retorna o áudio aprimorado combinado com a imagem original.
Plataformas e instalação
// Swift Package Manager .package(url: "https://github.com/Desert-Ant-Labs/clear-swift", from: "0.1.0")
import Clear let clear = try await Clear() let result = try await clear.enhance(at: inputURL) // result.outputPath: "in_clear.mp4"
// build.gradle.kts (via JitPack)
implementation("com.github.Desert-Ant-Labs:clear-kotlin:0.1.0")
import ai.desertant.clear.Clear val clear = Clear.create(context) val result = clear.enhance(inputWavPath) // result.outputPath: ".../<stem>_clear.wav"
npm i @desert-ant-labs/clear
import { load, decodeToMono, encodeWav } from "@desert-ant-labs/clear";
const clear = await load({ variant: "studio" });
const { audio } = await clear.enhance(await decodeToMono(file));
Especificações
- Saída
- 48 kHz, sem ruído e sem reverberação
- Velocidade
- Clipe de ~10 minutos em ~7 segundos no Apple silicon
- Modelo
- DeepFilterNet 3 ajustado
- Padrões
- Normalização de loudness LUFS / EBU R128
FAQ
O que é o Clear?
Aprimoramento de fala no dispositivo que transforma uma gravação com ruído em um arquivo de 48 kHz pronto para podcast: sem ruído, sem reverberação e com loudness normalizado, tudo no dispositivo.
O Clear roda no dispositivo?
Sim. O Clear roda inteiramente no dispositivo: a inferência acontece localmente, sem chamada a servidor, então os dados nunca saem do dispositivo.
Quais plataformas o Clear suporta?
O Clear é distribuído como SDKs nativos no dispositivo para Swift, Kotlin, JavaScript / TypeScript.
Quanto custa o Clear?
Cada modelo é grátis para até 100 mil dispositivos ativos mensais por SDK. Inferência ilimitada por usuário. Fale conosco para licenças personalizadas.
Qual a precisão e a velocidade do Clear?
Aprimora um clipe de 5 minutos em 3,7 s em um iPhone 17 Pro, 81x tempo real, no dispositivo.