Desert Ant Labs

Clear:设备端语音增强、降噪与去混响

语音增强可用

设备端语音增强,把嘈杂的录音变成可直接用于播客的48 kHz文件:降噪、去混响、响度归一化,全部在设备上完成。

Clear接收嘈杂的单声道或立体声音频,无论是笔记本麦克风、未做声学处理的房间还是车流噪声,都能返回干净的48 kHz结果。一个微调过的DeepFilterNet 3模型负责降噪和去混响,可选的处理环节还能把响度归一化到各平台规格。

它适用于AVFoundation能读取的任何音频或视频文件;视频会以原始画面加增强后音频重新封装返回。在Apple芯片上,一段10分钟的素材约7秒即可处理完成。Clear是Adobe Podcast、Dolby和Auphonic等云端工具的设备端替代方案:音频始终不离开设备,无需上传,也没有按分钟计费。它以去混响和可直接用于播客的输出见长,而这正是大多数降噪工具略过的地方。

演示

性能

在iPhone 17 Pro上,3.7秒增强一段5分钟的素材,达到81倍实时速度,全部在设备上完成。

81x
实时倍率,单声道
2-5 MB
设备端
48 kHz
输出

在Apple Neural Engine上增强一段5分钟素材所需的时间(内部数据)

设备单声道立体声
iPhone 17 Pro (A19 Pro)3.70 s · 81x5.16 s · 58x
iPhone 15 Pro (A17 Pro)4.88 s · 61x6.53 s · 46x

应用场景

播客与视频母带处理

一次处理即可清理笔记本麦克风或未做声学处理房间的录音,并归一化到Apple Podcasts、Spotify、YouTube或EBU R128标准。

去混响

去除房间反射,而不只是嘶嘶声。去混响是大多数降噪工具止步的地方,而Clear继续向前。

快速且本地

一段10分钟的素材在设备上约7秒处理完成,无需上传,也没有按分钟计费。

语音与会议录制

在转写或归档之前,提升语音备忘和通话录音的清晰度。

功能

  • 由微调过的DeepFilterNet 3模型完成降噪和去混响。
  • 响度预设:Apple Podcasts、Spotify、YouTube、EBU R128。
  • StrengthMastering 控制项。
  • 适用于AVFoundation能读取的任何音频或视频;视频会返回增强后音频与原始画面重新封装的结果。

平台与安装

SwiftiOS, macOS
安装
// Swift Package Manager
.package(url: "https://github.com/Desert-Ant-Labs/clear-swift", from: "0.1.0")
示例
import Clear

let clear = try await Clear()
let result = try await clear.enhance(at: inputURL)
// result.outputPath: "in_clear.mp4"
KotlinAndroid
安装
// build.gradle.kts (via JitPack)
implementation("com.github.Desert-Ant-Labs:clear-kotlin:0.1.0")
示例
import ai.desertant.clear.Clear

val clear = Clear.create(context)
val result = clear.enhance(inputWavPath)
// result.outputPath: ".../<stem>_clear.wav"
JavaScript / TypeScriptWeb, Node.js
安装
npm i @desert-ant-labs/clear
示例
import { load, decodeToMono, encodeWav } from "@desert-ant-labs/clear";

const clear = await load({ variant: "studio" });
const { audio } = await clear.enhance(await decodeToMono(file));

规格

输出
48 kHz,已降噪和去混响
速度
在Apple芯片上约10分钟的素材约7秒完成
模型
微调过的DeepFilterNet 3
标准
LUFS / EBU R128响度归一化

常见问题

Clear是什么?

设备端语音增强,把嘈杂的录音变成可直接用于播客的48 kHz文件:降噪、去混响、响度归一化,全部在设备上完成。

Clear在设备上运行吗?

是的。Clear完全在设备上运行:推理在本地完成,不调用任何服务器,因此数据不会离开设备。

Clear支持哪些平台?

Clear以原生设备端SDK的形式提供,支持Swift, Kotlin, JavaScript / TypeScript。

Clear的价格是多少?

每个模型的每个SDK均可免费支持最多10万台月活跃设备。每位用户可无限次推理。 如需定制授权,请联系我们

Clear的准确度和速度如何?

在iPhone 17 Pro上,3.7秒增强一段5分钟的素材,达到81倍实时速度,全部在设备上完成。

资源