Python环境下基于离散小波变换的信号降噪方法

Mallat创造了小波分析中的经典理论之一,即多分辨率分析的概念。后来,在Mallat与Meyer的共同努力之下,他们又在这一理论的基础上发明了离散小波变换的快速算法,这就是Mallat塔式算法,这种算法可以大量减少计算时间。在之前的二十年之间,小波分析方法在自身不断发展壮大的同时,也被许多学者在信号降噪领域进行了普及与应用。以Mallat为代表的一系列学者提出了模极大值重构滤波方法。这一方法的原理是:信号与噪声的小波系数在变换尺度变化的情况下,Lipschitz指数会呈现出不同的变化特点,以此来分辨信号与噪声从而进行滤波处理。

Donoho和JollllStone等在小波变换的基础上首次提出了小波域阈值滤波原理,该原理认为幅值较大的小波系数是由信号产生的。随后Donoho进一步完善了该方法,并在高斯噪声模型下推导出了通用阈值公式。Coifman和Donoho在进一步完善了小波阈值滤波方法后,提出了一种既能有效地实现信号降噪,又能抑制伪吉布斯现象的方法,这就是平移不变量降噪法。

在综上所述的所有方法中,小波域阈值降噪方法在实际操作上更为简便,同时在计算上的工作量相比于其他方法也少很多,因而得到了最为广泛的应用。这也是本文选取小波阈值降噪方法开展试验探索的原因之一。但是,如何选择小波基与阈值函数,以及怎样来确定阈值等等,这些都是小波阈值降噪方法在实践中亟待解决的几个关键问题。常用的小波基种类有很多,所以对于不同的信号,选择什么样的小波函数能实现最优的降噪效果是一个有待解决的问题。

对于如何选取阈值函数的问题,可以从显示和隐式两类阈值函数分别进行分析。首先显式阈值函数秉持的核心观点是:仅处理较大的小波系数,而将较小的统统去掉。具体的代表有:硬阈值和软阈值两种阈值函数,对于数值较大的小波系数,硬阈值函数对其进行了保留,而软阈值函数却对其进行了一定的收缩处理;

基于Donoho的研究成果,有学者提出了半软阈值函数,但是在实际的操作中,需要确定两个阈值以及计算上的复杂性成为它在实践中的缺点;为了弥补这一系列不足,有学者又在不久之后提出用Garrote函数作为阈值函数,这样做的原因在于这种阈值函数在形式上类似于硬阈值函数,其自身具有一定程度的连续性。其次,隐式阈值函数是以贝叶斯模型为基础提出来的,它围绕的核心思想是假设真实信号的小波系数服从某一先验分布。这类阈值函数的确定往往需要扎实的统计学基础,且操作起来难度较大,在实际应用中并不多见,缺少一定的实践意义,此处便不再赘述。

对于降噪方法,还有一个问题不容忽视,即如何选择阈值。Donoho首先提出了通用阈值,之后,其在对于SURE函数的研究中,提出了Stein无偏风险阈值。Jason将广义交互验证原理用于降噪算法,可在不知道噪声方差的情况下获得最优的阈值。Abramovich把小波阈值处理当作一种多重假设检验问题,并使用错误发现率方法去检验它以获取最优阈值,该阈值称为FDR阈值。Chang基于贝叶斯框架,认为小波系数服从广义高斯分布,提出了一种简单且封闭式的阈值——贝叶斯阈值,该阈值在图像处理领域得到了广泛应用。

该项目采用简单的离散小波分解对信号进行降噪,采用多种阈值方法,如下:

1. **universal**

The threshold, in this case, is given by the formula MAD x sqrt{2 x log(m)},

where MAD is the Median Absolute Deviation, and m is the length of the signal.

2. **sqtwolog**

Same as the universal, except that it does not use the MAD.

3. **energy**

In this case, the thresholding algorithm estimates the energy levels

of the detail coefficients and uses them to estimate the optimal threshold.

4. **stein**

This method implements Stein's unbiased risk estimator.

5. **heurstein**

This is a heuristic implementation of Stein's unbiased risk estimator.

运行环境为Python环境,所使用的模块如下:

numpy
scipy
matplotlib
scikit-learn
PyWavelets
Pandas

运行代码如下:

import numpy as np
# import pandas as pd
import matplotlib.pylab as plt# from scipy.signal import butter, filtfilt
from scipy.signal import spectrogramfrom denoising import WaveletDenoisingdef plot_coeffs_distribution(coeffs):"""! Plots all the wavelet decomposition's coefficients. """fig = plt.figure()size_ = int(len(coeffs) // 2) + 1if size_ % 2 != 0:size_ = size_+1for i in range(len(coeffs)):ax = fig.add_subplot(size_, 2, i+1)ax.hist(coeffs[i], bins=50)def pretty_plot(data, titles, palet, fs=1, length=100, nperseg=256):"""! Plots the contents of the list data. """fig = plt.figure(figsize=(13, 13))fig.subplots_adjust(hspace=0.5, wspace=0.5)index = 1for i, d in enumerate(data):ax = fig.add_subplot(8, 2, index)ax.plot(d[:length], color=palet[i])ax.set_title(titles[i])ax = fig.add_subplot(8, 2, index+1)f, t, Sxx = spectrogram(d, fs=fs, nperseg=nperseg)ax.pcolormesh(t, f, Sxx, shading='auto')index += 2def run_experiment(data, level=2, fs=1, nperseg=256, length=100):"""! Run the wavelet denoising over the input data for each thresholdmethod."""# Experiments titles / thresholding methodstitles = ['Original data','Universal Method','SURE Method','Energy Method','SQTWOLOG Method','Heursure Method']# Theshold methodsexperiment = ['universal','stein','energy','sqtwolog','heurstein']# WaveletDenoising class instancewd = WaveletDenoising(normalize=False,wavelet='db3',level=level,thr_mode='soft',selected_level=level,method="universal",energy_perc=0.90)# Run all the experiments, first element in res is the original datares = [data]for i, e in enumerate(experiment):wd.method = experiment[i]res.append(wd.fit(data))# Plot all the results for comparisonpalet = ['r', 'b', 'k', 'm', 'c', 'orange', 'g', 'y']pretty_plot(res,titles,palet,fs=fs,length=length,nperseg=nperseg)if __name__ == '__main__':# ECG Dataimport pandas as pdfs = 100raw_data = pd.read_pickle("data/apnea_ecg.pkl")N = int(len(raw_data) // 1000)data = raw_data[:N].valuesdata = data[:, 0]run_experiment(data, level=3, fs=fs)plt.show()

if __name__ == '__main__':raw_data = np.genfromtxt("./data/Z001.txt")fc = 40fs = 173.61w = fc / (fs / 2)b, a = butter(5, w, 'low')data = filtfilt(b, a, raw_data)run_experiment(data, level=4, fs=fs)plt.show()

完整代码:Python环境下基于离散小波变换的信号降噪方法

工学博士,担任《Mechanical System and Signal Processing》等期刊审稿专家,擅长领域:现代信号处理,机器学习,深度学习,数字孪生,时间序列分析,设备缺陷检测、设备异常检测、设备智能故障诊断与健康管理PHM等。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/297211.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

6、Cocos Creator 2D 渲染组件:​Sprite 组件​

Sprite 组件 Sprite(精灵)是 2D/3D 游戏最常见的显示图像的方式,在节点上添加 Sprite 组件,就可以在场景中显示项目资源中的图片。 属性功能说明Type渲染模式,包括普通(Simple)、九宫格&#x…

Android Monkey自动化测试

monkey一般用于压力测试,用户模拟用户事件 monkey 基本用法 adb shell monkey [参数] [随机事件数]monkey常用命令 -v:用于指定反馈信息级别,总共分三个等级-v -v -vadb shell mokey -v -v -v 100-s:用于指定伪随机数生成器的种…

Apache DolphinScheduler 【安装部署】

前言 今天来学习一下 DolphinScheduler ,这是一个任务调度工具,现在用的比较火爆。 1、安装部署 1.0、准备工作 1.0.1、集群规划 dolphinscheduler 比较吃内存,所以尽量给 master 节点多分配一点内存,桌面和虚拟机里能关的应用…

HomePlug AV

目录 HomePlug AV的基本概念基本术语网络概念网络实例 HomePlug AV物理层(PHY)HomePlug AV OFDM收发器架构PHY的调制模式FC调制和ROBO调制物理层的特点OFDM频域/时域转换开窗/槽式OFDM信号和噪声PHY发送控制——信道自适应PHY帧格式(Symbol&a…

jupyter Notebook 默认路径修改

1. anaconda prompt 中运行 jupyter notebook --generate-config 命令,将在 C:\Users\Think\.jupyter文件下生成 jupyter_notebook_config.py 文件。 2.在jupyter_notebook_config.py 文件中,找c.NotebookApp.notebook_dir 这个变量, (1)若…

【Linux】详解动态库链接和加载对可执行程序底层的理解

一、动静态库链接的几种情况 如果我们同时提供动态库和静态库,gcc默认使用的是动态库。如果我们非要使用静态库,要加-static选项。如果我们只提供静态库,那可执行程序没办法,只能对该库进行静态链接,但程序不一定整体…

MySQL版本特性和存储引擎选择

MySQL版本特性和存储引擎选择 1.说一下MySQL 5.5 5.6 5.7 8.0 各个版本的特性 MySQL 5.5 优点: 稳定性:5.5版本是长期支持(LTS)版本,因此它非常稳定,被广泛部署在生产环境中。兼容性:与旧版本的MySQL和…

Golang | Leetcode Golang题解之第3题无重复字符的最长子串

题目: 题解: func lengthOfLongestSubstring(s string) int {// 哈希集合,记录每个字符是否出现过m : map[byte]int{}n : len(s)// 右指针,初始值为 -1,相当于我们在字符串的左边界的左侧,还没有开始移动r…

【C++常用函数介绍】isalpha,isalnum、isdigit、islower、isupper 用法

首先 isalpha,isalnum、isdigit、islower、isupper 的使用方法都需要用到一个头文件 #include<ctype.h>其次 系统的介绍以上函数的用法 isalpha()用来判断一个字符是否为字母 isalnum&#xff08;&#xff09;用来判断一个字符是否为数字或者字母&#xff0c;也就是说…

【数据结构】——二叉树的递归实现,看完不再害怕递归

创作不易&#xff0c;感谢三连加支持&#xff1f;&#xff01; 一 递归理解 递归无非就是相信它&#xff0c;只有你相信它&#xff0c;你才能写好递归&#xff01;为什么&#xff1f;请往下看 在进入二叉树的实现之前&#xff0c;我们得先理解一遍递归&#xff0c;可能很多…

Android JNI 调用第三方SO

最近一个项目使用了Go 编译了一个so库&#xff0c;但是这个so里面还需要使用第三方so库pdfium, 首先在Android工程把2个so库都放好 在jni中只能使用dlopen方式&#xff0c;其他的使用函数指针的方式来调用&#xff0c;和windows dll类似&#xff0c;不然虽然编译过了但是会崩溃…

SpringBoot -- 外部化配置

我们如果要对普通程序的jar包更改配置&#xff0c;那么我们需要对jar包解压&#xff0c;并在其中的配置文件中更改配置参数&#xff0c;然后再打包并重新运行。可以看到过程比较繁琐&#xff0c;SpringBoot也注意到了这个问题&#xff0c;其可以通过外部配置文件更新配置。 我…

Android Studio控制台输出中文乱码问题

控制台乱码现象 安卓在调试阶段&#xff0c;需要查看app运行时的输出信息、出错提示信息。 乱码&#xff0c;会极大的阻碍开发者前进的信心&#xff0c;不能及时的根据提示信息定位问题&#xff0c;因此我们需要查看没有乱码的打印信息。 解决步骤&#xff1a; step1: 找到st…

RUST语言变量与数据类型使用

使用之前了解: fn main() 表示程序入口点 println!("要输出的内容"); 表示格式化输出 变量与常量声明: let 变量:变量类型 变量值;let mut 变量:变量类型 变量值; const 常量:常量类型 常量值 如果 声明时不指定类型,将根据赋值类型自动推导 变量类型参与下…

词向量模型评估

一、既有范式 词向量的语言学特性&#xff1a;这部分主要通过一些具体的指标来评估词向量是否能捕捉到语言的内在规律&#xff0c;包括&#xff1a; 相似度评价指标&#xff1a;检查词向量空间中距离近的词是否与人类直觉一致&#xff0c;例如&#xff0c;利用余弦相似度来评估…

Kali WSL2(windows下安装了kali)

自从WSL2以来&#xff0c;感觉各方面也挺好的&#xff0c;有时候比vmware workstation方便&#xff0c;特别单独使用一个linux的时候。所以研究了下kali&#xff0c;也是很OK的&#xff0c;以及验证完成了。 本文参考官网&#xff1a; Kali Linux | Penetration Testing and Et…

鸿蒙手机cordova-plugin-camera不能拍照和图片不显示问题

鸿蒙手机cordova-plugin-camera不能拍照和图片不显示问题 一、运行环境 1、硬件 手机型号&#xff1a;NOVA 7 系统&#xff1a;HarmonyOS版本 4.0.0 2、软件 android SDK platforms&#xff1a;14.0(API Level 34)、13.0&#xff08;API Level 33&#xff09; SDK Build-T…

Linux-Arm GDB调试(本地和远程)

目录 问题描述 已有coredump 没有coredump 小结 问题描述 Linux本机调试使用GDB非常方便&#xff0c;但嵌入式Linux设备资源有限&#xff0c;通常并没有交叉编译工具&#xff0c;那嵌入式设备上的应用发生问题如何查找问题&#xff1f;通常IDE有远程DEBUG功能&#xff0c;这…

整合Mybatis(Spring学习笔记十二)

一、导入相关的包 junit 包 Mybatis包 mysql数据库包 Spring相关的包 Aop相关的包 Mybatis-Spring包&#xff08;现在就来学这个&#xff09; 提示jdk版本不一致的朋友记得 jdk8只支持spring到5.x 所以如果导入的spring(spring-we…

MFC通用静态库制作与使用

开发环境VS2013 1、新建工程&#xff0c;选择Win32 Project&#xff0c;命名&#xff0c;选择路径等 2、选择Static library &#xff0c;勾选MFC 3、点击完成。在工程中添加相应的头文件、源文件等通用功能函数或者类。 4、在其他工程引入使用。在使用的工程项目设置中Linker…