听声识曲App卖了4亿美元 Shazam为何得到苹果的青睐？

欢迎关注“创事记”的微信订阅号：sinachuangshiji

文/琥珀

来源：AI科技大本营（ID:rgznai100）

是否可以将Shazam称为有听歌识曲功能应用的鼻祖？

2018年9月，苹果最终以4亿美金完成对Shazam公司的收购，让不少人为之振奋，在当时对外公布的一份声明中可以看到，自Shazam应用登陆AppStore以来，是其最受欢迎的iOS应用之一。

其实早在苹果iPhone“出道”之前，Shazam提供的音乐识别服务和技术就已戳中了不少用户的痛点。例如，当外界播放一首你喜爱的歌曲时，手机应用能识别出该歌曲并调出手机内同样的歌曲/原唱，完成后在手机上播放出来。

像最早流行的Gracenote、SoundHound、TrackID、Tunatic，以及如今的第三方音乐App如QQ音乐、网易云音乐，甚至微信“摇一摇”等也都具备音乐识别的功能。

只不过，据资料显示，在Shazam公司1999年成立之初，以非常“原始”的方式提供服务的：“用户听到歌曲，打一个服务短号码，让电话那头听到，然后自动挂断，歌曲信息以短信的形式发到用户手机上。”

如今，无论被收购之后的Shazam是因何种战略地位为苹果生态提供服务，与其他类似的音乐识别软件在操作界面、细节功能有哪些不同，Shazam仍受到大众的认可。抛开此前与苹果的关系、服务能力不提，Shazam在音频识别上的技术能力得到公认的。

实际上，早在2003年Shazam联合创始人之一的AveryLi-ChunWang就发表了一篇论文 “AnI ndustrial-Strength Audio Search Algorithm” （《一种工业级音频搜索算法》），提出了基于指纹（fringer print）的音乐搜索算法，因其检索准确率较高，得到了不少算法工程师的关注。

编者注：来自维基百科：声学指纹（Acoustic fingerprint）是通过特定算法从音频信号中提取的一段数字摘要，用于识别声音样本或者快速定位音频数据库中的相似音频。

根据论文资料，Shazam设计了一套非常灵活的音频搜索引擎。其算法抗噪声和扰动能力强，计算复杂度低，同时具有很高的可扩展性。即使外界噪音很强，它也可以迅速通过手机录制的一小段压缩音频从百万级的曲库中辨识出正确的歌曲。该算法运用分析音频频谱上的星状图来组合时间-频率信息构造哈希，从而可以将混合在一起的几首歌都辨识出来。此外，针对不同的应用，即使曲库非常大，检索速度也能达到毫秒级。

其核心简言之是，用户将某段音频中的一个片段上传至Shazam，Shazam会首先提取指纹，然后查询数据库，最后利用其精准的识别算法返回歌名。指纹可以看做该音频的哈希值（Hash），一个带有时间属性的数字集合。

2015年，一位名叫Christophe的工程师写了篇万字长文，完整分析了Shazam的原理是什么，并表示，在过去的三年时间里，他用了大概200个小时来理解信号处理的概念，其背后的数学原理，并制作了自己的Shazam原型。他甚至直言：“写这篇文章是因为此前从没有找到一篇真正理解Shazam的文章”。

那么，如何更快更好理解Shazam背后的算法奥秘呢？前不久，YouTube上一个专门普及工程知识的频道  Real Engineering  上传了一段10分钟视频，可帮助人们快速Get到相关知识点。

传送门：https://www.youtube.com/watch?v=kMNSAhsyiDg

相比起人类，计算机对音乐没有直观的理解，它只能将歌曲与其数据库中的其他歌曲进行对比匹配。为此，视频中  Real Engineering 重点提及了两个概念：“星状图”和“哈希函数”，并对基于“指纹”的搜索算法进行了通俗化解释。

例如，人类大脑可很容易区分钢琴和吉他的音色，但对计算机来讲，就需要一种能够量化这些特征以便进行识别的方法，即频谱图，一种声音的视觉显示。

在视频中，研究者尝试用一张三维图来表示：x轴代表时间，y轴代表频率，z轴代表振幅/响度（通常用某种颜色表示）。

如此，计算机就可以通过这个三维图来识别声音并存储数据。不过，会有个问题：频谱图中有大量这样的数据，而且数据越多，需要通过计算匹配的时间就越长。

所以，减少计算时间的第一步就是减少分类歌曲的数据。

Shazam采用的称之为“指纹”的技术，可将这些频谱图转换成看起来像的“ 星状图” 。

每颗星星代表特定时间最强的频率。如此，不仅降低了频谱图的维度，还减少了图表上数据点的数量。

然后，Shazam数据库中的每首单曲都以“指纹”的形式存储起来。

当用户打开Shazam应用时，后台将访问手机的麦克风，并创建一组接收到的声波“指纹”。不过，这种方式也有助于应用过滤噪声，因为它只会创建突出频率的数据点。

音频创建完成，并将其发送到服务器。此时，Shazam的识别过程正式开始，即 “快速组合哈希”

论文链接：https://www.ee.columbia.edu/~dpwe/papers/Wang03-shazam.pdf

Shazam会将“指纹”进行分类，并搜索在该音频中的某个特定时间点里分别存在哪几个音符，这也是哈希表的可搜索地址。

注：在计算机领域，哈希和哈希函数应用十分广泛。例如，在谷歌的搜索引擎算法中就应用了哈希函数，以确保文件可被下载。一句话解释就是，任意长度的输入通过哈希函数变换成固定长度的输出，该输出就是哈希值。

实践中，输入可以是一小段文字如密码，也可以是像整部电影一样的长数据流。

为免枯燥乏味，视频里还举了个生动的例子：在图书馆如何通过搜索书的标题确定书的位置？

可以通过哈希函数来决定，书的标题为输入，书架的位置为输出。在这个过程中，我们会遇到书籍不均匀分布、书目冲撞、以及如何快速找到所需书目的问题。

例如，如果图书馆只有两个架子，那么书目冲撞（一个书架上有相同标题的书）的问题将十分突出；但如果图书馆有十亿书架，那哈希函数得出的书目冲撞结果应该会很小。

回到以上提到的案例，如果通过哈希函数，选择两组频率数据，分别除以时间并作为输入，输出的数字介于1至10亿之间。

首先，计算机将浏览歌曲数据库并计算每个锚点（anchorpoint）的哈希；一首歌曲将包含多个锚点，将有助于计算机对音频片段按锚点、后面的以及之间的频率进行分类。

然后，对每个锚点按哈希进行排列。

这些地址同样以歌曲ID和时间戳进行分类。

如此，便可以更快定位，并找到本来需要多个锚点才能找到的音乐。

以上只是大致介绍，想要了解Shazam听歌识曲背后的详细原理，可以查看Christophe写的万字长文。

传送门：http://coding-geek.com/how-shazam-works/