信号与图像处理系列

16 篇文章
计算机视觉 8 篇文章
1
图像基础与 OpenCV 起步
· 6 分钟阅读

数字图像的本质

计算机视觉处理的对象是数字图像。数字图像本质上就是一个二维像素数组。

像素与灰度图

灰度图是最简单的数字图像——每个像素存储一个亮度值,范围 0(纯黑)到 255(纯白)。在 Python 中,一张宽 W、高 H 的灰度图就是一个形状为 (H, W) 的二维数组。

2
图像退化模型——模糊从何而来
· 9 分钟阅读

为什么照片会模糊?

翻看手机相册,总会遇到这样的遗憾:明明按下快门的瞬间捕捉了美好瞬间,但照片却模糊不清——可能因为手抖、光线不足、或者拍摄对象移动太快。老照片更是如此,岁月的流逝让当年的记忆变得模糊。

3
图像插值方法——从最近邻到双三次
· 6 分钟阅读

为什么要插值

想象你有一张低分辨率照片,想把它放大打印。原图中每两个像素之间现在是"空白区域"——新像素从哪里来?

插值(interpolation)就是解决这个问题:利用已知像素的值,估算出未知位置的像素值。图像放大本质上就是插值问题。

4
频域图像恢复——逆滤波与维纳滤波
· 7 分钟阅读

为什么在频域做恢复

上一篇我们建立了图像退化模型:观测图像 $g(x,y)$ 是原始图像 $f(x,y)$ 经过退化函数 $h(x,y)$ 卷积并叠加噪声 $n(x,y)$ 后的结果:

$$g(x,y) = h(x,y) * f(x,y) + n(x,y)$$

恢复的任务是:已知 $g$ 和 $h$,尽可能还原 $f$。

5
空间域恢复与边缘保持滤波
· 9 分钟阅读

上一篇介绍了频率域的图像处理方法——通过傅里叶变换将图像转换到频域,然后进行滤波、复原等操作。但频率域方法有时不太直观,尤其是我们更习惯直接操作像素。

6
深度学习超分辨率——SRCNN 与 SRGAN
· 8 分钟阅读

从数学模型到数据驱动

在超分辨率任务中,传统方法依赖精心设计的数学模型——插值算法、稀疏表示、先验约束等。但深度学习带来了范式转变:从大量成对的低分辨率(LR)-高分辨率(HR)图像数据中,直接学习从退化空间到清晰空间的映射。

7
现代超分辨率——ESRGAN 到扩散模型
· 8 分钟阅读
2014
SRCNN
三层卷积 · 3-layer CNN
pioneered DL SR
2016
SRGAN
感知损失 + GAN
visual quality leap
2018
ESRGAN
RRDB + RaGAN
richer features, no BN
2021
Real-ESRGAN
真实退化建模 · Real-world
works on real photos
2021
SwinIR
Transformer 注意力
global context modeling
2022
Diffusion
迭代去噪 · Iterative
best quality, slowest

从 SRGAN 到 ESRGAN(2018)

SRGAN(Super-Resolution GAN)在 2016 年首次将生成对抗网络(GAN)引入超分辨率领域,通过感知损失(perceptual loss)生成的图像在视觉质量上显著超越了传统的 PSNR 优化方法。但 SRGAN 仍有改进空间——2018 年 Wang 等人提出的 ESRGAN(Enhanced Super-Resolution GAN)在四个关键方向上进行了优化。

8
Go 与 Rust 实现图像恢复算法
· 9 分钟阅读

本篇用 Go 和 Rust 两种语言实现图像恢复的核心算法,通过实际代码对比两种语言在图像处理场景下的写法和性能特征。

原始图像 退化图像

Go 实现

Go 语言的 image 标准库提供了图像编解码、像素访问等基础功能。以下实现展示了如何用 Go 实现双三次插值、高斯模糊、拉普拉斯锐化等核心算法。

声学与数字信号处理 7 篇文章
9
声波与数字信号基础
· 7 分钟阅读

相消干涉

主动降噪(ANC)的物理基础是声波的相消干涉。两个频率相同、相位相反的声波叠加后会相互抵消。

原始噪声信号:

$$ p_n(t) = A \cos(2\pi ft + \phi) $$

ANC 系统生成的反向声波:

10
自适应滤波:从 LMS 到 NLMS
· 7 分钟阅读

LMS 算法

自适应滤波的核心问题是:给定参考信号 x(n) 和期望信号 d(n),找到一个滤波器系数向量 w,使输出 y(n) 逼近 d(n)

最小均方(Least Mean Square, LMS)算法是解决这个问题最经典的方法,由 Widrow 和 Hoff 在 1960 年提出。核心思路是每次迭代都沿着误差曲面最陡的方向下降一步——也就是随机梯度下降。

11
FXLMS 与主动降噪系统架构
· 7 分钟阅读

主动降噪(ANC, Active Noise Control)的核心思路是用扬声器发出一个与噪声相位相反、幅值相同的声波,通过相消干涉抵消掉目标区域的噪声。落地到硬件系统,需要解决两个问题:用什么传感器感知噪声,以及用哪种控制策略生成抗噪声。这两点决定了 ANC 系统的架构分类——前馈、反馈和混合式。

12
变步长与频域自适应算法
· 6 分钟阅读

固定步长的收敛矛盾

标准 LMS 算法和 NLMS 算法都使用固定的步长参数 $\mu$。步长大小的选择直接影响算法性能,但存在一个根本矛盾:

  • 大步长:收敛速度快,能够快速追踪环境变化,但稳态误差大,滤波精度低
  • 小步长:稳态误差小,滤波精度高,但收敛速度慢,对突变响应迟缓

这个矛盾在回声消除、主动噪声控制等应用中尤为突出——系统启动时需要快速收敛,稳态后则希望维持低误差。固定步长无法同时满足两阶段的需求。

13
嵌入式 ANC:STM32 实战
· 9 分钟阅读

硬件架构

实现实时 ANC 首先要选择合适的硬件平台。控制器需要在微秒级完成自适应滤波运算,同时管理多路音频数据流。

模块功能典型选型
主控制器执行自适应算法STM32F4/F7, ESP32-S3, nRF5340
参考麦克风采集环境噪声Knowles SPH0645, Infineon IM69D130
误差麦克风采集残余噪声Knowles SPH0645, TDK ICS-43434
音频 DAC输出抗噪声信号ES9218, PCM5102
功放驱动扬声器Class-D

参考麦克风位于耳罩外侧,采集外部环境噪声作为算法参考输入。误差麦克风位于耳罩内侧,采集扬声器附近的残余噪声,用于评估降噪效果并驱动自适应更新。音频 DAC 将数字抗噪声信号转为模拟量,经功放放大后驱动扬声器。

14
嵌入式 ANC:ESP32 实战
· 6 分钟阅读

ESP32-S3 的双核 Xtensa LX7 处理器带有向量指令集扩展,适合执行嵌入式 ANC 所需的实时 DSP 运算。配合 ESP-DSP 库可以高效实现自适应滤波器。

I2S 麦克风采集

ANC 需要至少两路同步输入:参考麦克风(采集环境噪声)和误差麦克风(采集残余误差)。ESP32-S3 的 I2S 外设支持同时接收多路 ADC 数据,配置为 16 位、16 kHz 采样即可满足消费级 ANC 需求。

15
ANC 调试与性能优化
· 10 分钟阅读

主动降噪系统的工程实现中,最耗时、最依赖经验的部分不是算法选型,而是参数调优和稳定性调试。滤波器阶数、步长系数、采样率——每一个参数都牵一发而动全身。本文从实践经验出发,梳理 ANC 调试中的关键参数选择逻辑和常见问题定位方法。

运动传感与追踪 1 篇文章
16
IMU 原理:加速度计与陀螺仪
· 7 分钟阅读

运动传感系列开篇。传感器是嵌入式系统感知物理世界的窗口,IMU(Inertial Measurement Unit)是最常用的一类。这篇文章不讲高深理论,只讲 MEMS 传感器怎么工作、怎么接线、怎么读数、读出来的数据长什么样。