位置: 编程技术 - 正文

听歌识曲--用python实现一个音乐检索器的功能(python放歌)

编辑:rootadmin

推荐整理分享听歌识曲--用python实现一个音乐检索器的功能(python放歌),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:python写歌,python音乐,python放歌,python歌曲,python爬取歌曲的代码,听歌识曲代码实现,python写歌,听歌识曲代码实现,内容如对您有帮助,希望把文章链接给更多的朋友!

听歌识曲,顾名思义,用设备“听”歌曲,然后它要告诉你这是首什么歌。而且十之八九它还得把这首歌给你播放出来。这样的功能在QQ音乐等应用上早就出现了。我们今天来自己动手做一个自己的听歌识曲

我们设计的总体流程图很简单:

-----录音部分-----

我们要想“听”,就必须先有录音的过程。在我们的实验中,我们的曲库也要用我们的录音代码来进行录音,然后提取特征存进数据库。我们用下面这样的思路来录音

我们录完的歌曲是个什么形式?

如果只看一个声道的话,他是一个一维数组,大概长成这个样子

我们把他按照索引值为横轴画出来,就是我们常常看见的音频的形式。

音频处理部分

我们在这里要写我们的核心代码。关键的“如何识别歌曲”。想想我们人类如何区分歌曲? 是靠想上面那样的一维数组吗?是靠歌曲的响度吗?都不是。

我们是通过耳朵所听到的特有的频率组成的序列来记忆歌曲的,所以我们想要写听歌识曲的话,就得在音频的频率序列上做文章。

复习一下什么是傅里叶变换。博主的《信号与系统》的课上的挺水,不过在课上虽然没有记下来具体的变换形式,但是感性的理解还是有的。

傅里叶变换的实质就是把时域信号变换成了频域信号。也就是原本X,Y轴分别是我们的数组下标和数组元素,现在变成了频率(这么说不准确,但在这里这样理解没错)和在这个频率上的分量大小。

怎么理解频域这个事情呢?对于我们信号处理不是很懂的人来说,最重要的就是改变对音频的构成的理解。我们原来认为音频就是如我们开始给出的波形那样,在每一个时间有一个幅值,不同的幅值序列构成了我们特定的声音。而现在,我们认为声音是不同的频率信号混合而成的,他们每一个信号都自始至终存在着。并且他们按照他们的投影分量做贡献。

让我们看看把一首歌曲转化到频域是什么样子?

我们可以观察到这些频率的分量并不是平均的,差异是非常大的。我们可以在一定程度上认为在图中明显凸起的峰值是输出能量大的频率信号,代表着在这个音频中,这个信号占有很高的地位。于是我们就选择这样的信号来提取歌曲的特征。

但是别忘了,我们之前说的可是频率序列,傅里叶变换一套上,我们就只能知道整首歌曲的频率信息,那么我们就损失了时间的关系,我们说的“序列”也就无从谈起。所以我们采用的比较折中的方法,将音频按照时间分成一个个小块,在这里我每秒分出了个块。

在这里留个问题:为什么要采用小块,而不是每秒一块这样的大块?

听歌识曲--用python实现一个音乐检索器的功能(python放歌)

我们对每一个块进行傅里叶变换,然后对其求模,得到一个个数组。我们在下标值为(0,),(,),(,),(,)这四个区间分别取其模长最大的下标,合成一个四元组,这就是我们最核心的音频“指纹”。

我们提取出来的“指纹”类似下面这样

(, , , ), (, , , ), (3, , , ), (, , , ), (, , , ), (2, , , ), (, , , ), (, , , ), (, , , ), (, , , ), (, , , ), (, , , ), (, , , ), (, , , )

音频处理的类有三个方法:载入数据,傅里叶变换,播放音乐。如下:

这里面的self.high_point是未来应用的核心数据。列表类型,里面的元素都是上面所解释过的指纹的形式。

数据存储和检索部分

因为我们是事先做好了曲库来等待检索,所以必须要有相应的持久化方法。我采用的是直接用mysql数据库来存储我们的歌曲对应的指纹,这样有一个好处:省写代码的时间

我们将指纹和歌曲存成这样的形式:顺便一说:为什么各个歌曲前几个的指纹都一样?(当然,后面肯定是千差万别的)其实是音乐开始之前的时间段中没有什么能量较强的点,而由于我们的采样率比较高,就会导致开头会有很多重复,别担心。

我们怎么来进行匹配呢?我们可以直接搜索音频指纹相同的数量,不过这样又损失了我们之前说的序列,我们必须要把时间序列用上。否则一首歌曲越长就越容易被匹配到,这种歌曲像野草一样疯狂的占据了所有搜索音频的结果排行榜中的第一名。而且从理论上说,音频所包含的信息就是在序列中体现,就像一句话是靠各个短语和词汇按照一定顺序才能表达出它自己的意思。单纯的看两个句子里的词汇重叠数是完全不能判定两句话是否相似的。我们采用的是下面的算法,不过我们这只是实验性的代码,算法设计的很简单,效率不高。建议想要做更好的结果的同学可以使用改进的DTW算法。

我们在匹配过程中滑动指纹序列,每次比对模式串和源串的对应子串,如果对应位置的指纹相同,则这次的比对相似值加一,我们把滑动过程中得到的最大相似值作为这两首歌的相似度。

举例:

曲库中的一首曲子的指纹序列:[fp, fp, fp, fp, fp, fp, fp, fp, fp, fp, fp]

检索音乐的指纹序列: [fp, fp, fp, fp]

比对过程:最终的匹配相似值为3

存储检索部分的实现代码

总结

我们这个实验很多地方都很粗糙,核心的算法是从shazam公司提出的算法吸取的“指纹”的思想。希望读者可以提出宝贵建议。

本文转载于:

Python解析excel文件存入sqlite数据库的方法 一、建立数据库根据需求建立数据库,建立了两个表,并保证了可以将数据存储到已有的数据库中,代码如下:importsqlite3defcreateDataBase():cn=sqlite3.connect('ch

利用Python开发实现简单的记事本 前言本文的操作环境:ubuntu,Python2.7,采用的是Pycharm进行代码编辑,个人很喜欢它的代码自动补齐功能。示例图如上图,我们可以看到这个记事本主要分

Python实现将不规范的英文名字首字母大写 例如输入:['adam','LISA','barT'],输出:['Adam','Lisa','Bart']。方法一defwgw(x):return[x[0].upper(),x[1:].lower()]map(wgw,['adam','LISA','barT'])方法二defwgw1(x):returnx.capitalize()ma

标签: python放歌

本文链接地址:https://www.jiuchutong.com/biancheng/383470.html 转载请保留说明!

上一篇:Python字典简介以及用法详解(python 字典的字典)

下一篇:Python解析excel文件存入sqlite数据库的方法(python解析excel文档)

  • 个人所得税手续费奖励是否交个税
  • 免征增值税和增值税区别
  • 记账凭证红字冲销
  • 小微企业附加税税收优惠政策
  • 残保金漏报的财务怎么办
  • 固定资产减少当月
  • 缴纳个税和社保
  • 个体工商户怎么注销
  • 合伙企业无偿获得股权怎么缴税?
  • 公司租赁的车辆发生的费用都可以报销吗?
  • 减免的残保金怎么计算
  • 非货币性资产交换的会计处理
  • 存货损失会计处理
  • 应交增值税计提表表格
  • 非征期不能抄报
  • 计算本月生产成本怎么算
  • 应交税金的明细科目
  • 法院扣款图片
  • mac如何强制退出全屏
  • 事业单位收入需要缴纳所得税吗
  • win11开机后无法操作
  • 开机要按f1才能进系统
  • 餐饮发票可以计入什么费用
  • 笔记本win10玩红警怎么全屏
  • win7指定程序用指定网卡
  • php和mysql的结合是目前web开发中的黄金组合
  • 公司向个人支付劳务费
  • 出口流程步骤
  • php操作文件的常用函数
  • 老生常谈的常是什么意思
  • php curl代理
  • 归一化的几种方法
  • 小迪安全2021
  • 工业企业采购商品过程中发生的进货费用
  • mysql中regexp_replace函数的使用
  • 企业待报解预算收入的分录
  • 项目建设期算不算折旧
  • 租赁的房屋再转租出去交几次印花税呢
  • 在vue项目如何引入异步组件?
  • php框架 hyperf
  • 发货环节产生的影响
  • 增值税专用发票电子版
  • 材料的采购成本包括
  • 子公司的注册资金需要母公司股东出吗?
  • 车辆罚款单可作为费用报销吗
  • 办公费项目内容
  • 单位统一订员工餐
  • 员工体检费计入什么会计科目里
  • 投资性房地产公允价值变动借贷方向
  • 年报中的认缴出资时间怎么填
  • 发票金额大于付款金额可以报销吗
  • 发票开多了如何做凭证?
  • 如何更换会计账号
  • SQL普通表转分区表的方法
  • 教你怎么使用加油机
  • xp系统换成win10
  • vmware虚拟机Linux扩展硬盘
  • linux 限制内存
  • win10怎么进去
  • windows7的电脑
  • linux ids
  • linux的截图工具
  • 深入理解linux内核第三版
  • 安卓手机的手势密码保存在哪个文件
  • 很好的无光照模式叫什么
  • json对象转化为list
  • javascript数据
  • python datetime.now
  • unity鼠标控制物体移动
  • jquery中选择器有哪些
  • python生产
  • jquery22
  • js页面滚动到指定位置
  • Android 使用log4j2
  • python dask
  • 2022年安徽城镇非私营单位平均工资
  • 一手房有契税和个税吗
  • 深圳监狱在哪个位置
  • 济宁高新区税务局办税大厅电话
  • 税务稽查机构
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设