Desert Ant Labs

Clear: melhoria de voz no dispositivo, redução de ruído e de reverberação

Melhoria de vozDisponível

Melhoria de voz no dispositivo que transforma uma gravação ruidosa num ficheiro de 48 kHz pronto para podcast: sem ruído, sem reverberação e com volume normalizado, tudo no dispositivo.

O Clear recebe áudio mono ou estéreo ruidoso, um microfone de portátil, uma sala sem tratamento acústico, trânsito, e devolve um resultado limpo a 48 kHz. Um modelo DeepFilterNet 3 afinado trata da redução de ruído e da reverberação, e um passo opcional normaliza o volume para a especificação de cada plataforma.

Funciona com qualquer ficheiro de áudio ou vídeo que o AVFoundation consiga ler; o vídeo regressa com a imagem original e o áudio melhorado integrado. Um clipe de 10 minutos é processado em cerca de 7 segundos em Apple silicon. O Clear é a alternativa no dispositivo a ferramentas na nuvem como o Adobe Podcast, o Dolby e o Auphonic: o áudio nunca sai do dispositivo, sem uploads e sem faturação ao minuto. Aposta na remoção de reverberação e num resultado pronto para podcast, as qualidades que a maioria dos redutores de ruído deixa de fora.

Demonstração

Desempenho

Melhora um clipe de 5 minutos em 3,7 s num iPhone 17 Pro, 81x tempo real, no dispositivo.

81x
Tempo real, mono
2-5 MB
No dispositivo
48 kHz
Saída

Tempo para melhorar um clipe de 5 minutos no Apple Neural Engine (interno)

DispositivoMonoEstéreo
iPhone 17 Pro (A19 Pro)3.70 s · 81x5.16 s · 58x
iPhone 15 Pro (A17 Pro)4.88 s · 61x6.53 s · 46x

Casos de uso

Masterização de podcast e vídeo

Limpe uma gravação feita com microfone de portátil ou numa sala sem tratamento acústico e normalize para Apple Podcasts, Spotify, YouTube ou EBU R128 num único passo.

Remoção de reverberação

Remova as reflexões da sala, não apenas o chiado. A remoção de reverberação é onde a maioria dos redutores de ruído para, e o Clear continua.

Rápido e local

Um clipe de 10 minutos é processado em cerca de 7 segundos no dispositivo, sem uploads e sem custo ao minuto.

Captação de voz e reuniões

Melhore a inteligibilidade de notas de voz e chamadas gravadas antes da transcrição ou do arquivo.

O que faz

  • Redução de ruído e de reverberação a partir de um modelo DeepFilterNet 3 afinado.
  • Predefinições de volume: Apple Podcasts, Spotify, YouTube, EBU R128.
  • Controlos Strength e Mastering.
  • Funciona com qualquer áudio ou vídeo que o AVFoundation consiga ler; o vídeo devolve o áudio melhorado integrado com a imagem original.

Plataformas e instalação

SwiftiOS, macOS
Instalação
// Swift Package Manager
.package(url: "https://github.com/Desert-Ant-Labs/clear-swift", from: "0.1.0")
Exemplo
import Clear

let clear = try await Clear()
let result = try await clear.enhance(at: inputURL)
// result.outputPath: "in_clear.mp4"
KotlinAndroid
Instalação
// build.gradle.kts (via JitPack)
implementation("com.github.Desert-Ant-Labs:clear-kotlin:0.1.0")
Exemplo
import ai.desertant.clear.Clear

val clear = Clear.create(context)
val result = clear.enhance(inputWavPath)
// result.outputPath: ".../<stem>_clear.wav"
JavaScript / TypeScriptWeb, Node.js
Instalação
npm i @desert-ant-labs/clear
Exemplo
import { load, decodeToMono, encodeWav } from "@desert-ant-labs/clear";

const clear = await load({ variant: "studio" });
const { audio } = await clear.enhance(await decodeToMono(file));

Especificações

Saída
48 kHz, sem ruído e sem reverberação
Velocidade
Clipe de ~10 minutos em ~7 segundos em Apple silicon
Modelo
DeepFilterNet 3 afinado
Normas
Normalização de volume LUFS / EBU R128

FAQ

O que é o Clear?

Melhoria de voz no dispositivo que transforma uma gravação ruidosa num ficheiro de 48 kHz pronto para podcast: sem ruído, sem reverberação e com volume normalizado, tudo no dispositivo.

O Clear é executado no dispositivo?

Sim. O Clear é executado inteiramente no dispositivo: a inferência acontece localmente, sem qualquer chamada a servidores, por isso os dados nunca saem do dispositivo.

Que plataformas o Clear suporta?

O Clear é disponibilizado como SDKs nativos, executados no dispositivo, para Swift, Kotlin, JavaScript / TypeScript.

Quanto custa o Clear?

Todos os modelos são gratuitos para até 100k dispositivos ativos mensais por SDK. Inferência ilimitada por utilizador. Contacte-nos para licenças personalizadas.

Qual é a precisão ou a rapidez do Clear?

Melhora um clipe de 5 minutos em 3,7 s num iPhone 17 Pro, 81x tempo real, no dispositivo.

Recursos