使用HTML5 API(AudioContext)实现可视化频谱效果
如今的HTML5技术正让网页变得越来越强大,通过其Canvas
标签与AudioContext
对象可以轻松实现之前在Flash或Native App中才能实现的频谱指示器的功能。
Demo: Cyandev Works - HTML5 Audio Visualizing
The AudioContext
interface represents an audio-processing graph built from audio modules linked together, each represented by an AudioNode
.
根据MDN的文档,AudioContext
是一个专门用于音频处理的接口,并且工作原理是将AudioContext
创建出来的各种节点(AudioNode
)相互连接,音频数据流经这些节点并作出相应处理。
创建AudioContext对象
由于浏览器兼容性问题,我们需要为不同浏览器配置AudioContext
,在这里我们可以用下面这个表达式来统一对AudioContext
的访问。
var AudioContext = window.AudioContext || window.webkitAudioContext;
var audioContext = new AudioContext(); //实例化AudioContext对象
附. 浏览器兼容性
浏览器 | Chrome | Firefox | IE | Opera | Safari |
---|---|---|---|---|---|
支持版本 | 10.0 | 25.0 | 不支持 | 15.0 | 6.0 |
当然,如果浏览器不支持的话,我们也没有办法,用IE的人们我想也不需要这些效果。但最佳实践是使用的时候判断一下上面声明的变量是否为空,然后再做其他操作。
解码音频文件
读取到的音频文件是二进制类型,我们需要让AudioContext
先对其解码,然后再进行后续操作。
audioContext.decodeAudioData(binary, function(buffer) { ... });
方法decodeAudioData
被调用后,浏览器将开始解码音频文件,这需要一定时间,我们应该让用户知道浏览器正在解码,解码成功后会调用传进去的回调函数,decodeAudioData
还有第三个可选参数是在解码失败时调用的,我们这里就先不实现了。
创建音频处理节点
这是最关键的一步,我们需要两个音频节点:
AudioBufferSourceNode
AnalyserNode
前者是用于播放解码出来的buffer的节点,而后者是用于分析音频频谱的节点,两个节点顺次连接就能完成我们的工作。
创建AudioBufferSourceNode
var audioBufferSourceNode;
audioBufferSourceNode = audioContext.createBufferSource();
创建AnalyserNode
var analyser;
analyser = audioContext.createAnalyser();
analyser.fftSize = 256;
上面的fftSize
是用于确定FFT大小的属性,那FFT是什么高三的博主还不知道,其实也不需要知道,总之最后获取到的数组长度应该是fftSize
值的一半,还应该保证它是以2为底的幂。
连接节点
audioBufferSourceNode.connect(analyser);
analyser.connect(audioContext.destination);
上面的audioContext.destination
是音频要最终输出的目标,我们可以把它理解为声卡。所以所有节点中的最后一个节点应该再连接到audioContext.destination
才能听到声音。
播放音频
所有工作就绪,在解码完毕时调用的回调函数中我们就可以开始播放了。
audioBufferSourceNode.buffer = buffer; //回调函数传入的参数
audioBufferSourceNode.start(0); //部分浏览器是noteOn()函数,用法相同
参数代表播放起点,我们这里设置为0意味着从头播放。
文件读取
HTML5支持文件选择、读取的特性,我们利用这个特性可以实现不上传,即播放的功能。
HTML标签
在你的页面中找个位置插入:
<input id="fileChooser" type="file" />
Js逻辑
var file;
var fileChooser = document.getElementById('fileChooser');
fileChooser.onchange = function() {
if (fileChooser.files[0]) {
file = fileChooser.files[0];
// Do something with 'file'...
}
}
使用FileReader异步读取文件
var fileContent;
var fileReader = new FileReader();
fileReader.onload = function(e) {
fileContent = e.target.result;
// Do something with 'fileContent'...
}
fileReader.readAsArrayBuffer(file);
其实这里的fileContent
就是上面AudioContext
要解码的那个binary,至此两部分的工作就可以连起来了。
WARNING:
Chrome或Firefox浏览器的跨域访问限制会使FileReader
在本地失效,Chrome用户可在调试时添加命令行参数:
chrome.exe --disable-web-security
Canvas绘制频谱
这一部分我不打算详细叙述,就提几个重点。
AnalyserNode数据解析
在绘制之前通过下面的方法获取到AnalyserNode
分析的数据:
var dataArray = new Uint8Array(analyser.frequencyBinCount);
analyser.getByteFrequencyData(dataArray);
数组中每个元素是从0到fftSize
属性值的数值,这样我们通过一定比例就能控制能量条的高度等状态。
requestAnimationFrame的使用
要使动画动起来,我们需要不断重绘Canvas
标签里的内容,这就需要requestAnimationFrame
这个函数了,它可以帮你以60fps的帧率绘制动画。
使用方法:
var draw = function() {
// ...
window.requestAnimationFrame(draw);
}
window.requestAnimationFrame(draw);
这段代码应该不难理解,就是一个类似递归的调用,但不是递归,有点像Android中的postInvalidate
实例代码
贴上我写的一段绘制代码:
var render = function() {
ctx = canvas.getContext("2d");
ctx.strokeStyle = "#00d0ff";
ctx.lineWidth = 2;
ctx.clearRect(0, 0, canvas.width, canvas.height); //清理画布
var dataArray = new Uint8Array(analyser.frequencyBinCount);
analyser.getByteFrequencyData(dataArray);
var step = Math.round(dataArray.length / 60); //采样步长
for (var i = 0; i < 40; i++) {
var energy = (dataArray[step * i] / 256.0) * 50;
for (var j = 0; j < energy; j++) {
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200 + 4 * j);
ctx.lineTo(20 * (i + 1) - 2, 200 + 4 * j);
ctx.stroke();
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200 - 4 * j);
ctx.lineTo(20 * (i + 1) - 2, 200 - 4 * j);
ctx.stroke();
}
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200);
ctx.lineTo(20 * (i + 1) - 2, 200);
ctx.stroke();
}
window.requestAnimationFrame(render);
}
OK,大致就是这样,之后可以加一些css样式,完善一下业务逻辑,这里就不再阐释了。最后贴上整理好的全部代码:
HTML 部分
<html>
<head>
<title>HTML5 Audio Visualizing</title>
<style type="text/css">
body {
background-color: #222222
}
input {
color: #ffffff
}
#wrapper {
display: table;
width: 100%;
height: 100%;
}
#wrapper-inner {
display: table-cell;
vertical-align: middle;
padding-left: 25%;
padding-right: 25%;
}
#tip {
color: #fff;
opacity: 0;
transition: opacity 1s;
-moz-transition: opacity 1s;
-webkit-transition: opacity 1s;
-o-transition: opacity 1s;
}
#tip.show {
opacity: 1
}
</style>
<script type="text/javascript" src="./index.js"></script>
</head>
<body>
<div id="wrapper">
<div id="wrapper-inner">
<p id="tip">Decoding...</p>
<input id="fileChooser" type="file" />
<br>
<canvas id="visualizer" width="800" height="400">Your browser does not support Canvas tag.</canvas>
</div>
</div>
</body>
</html>
Js部分
var AudioContext = window.AudioContext || window.webkitAudioContext; //Cross browser variant.
var canvas, ctx;
var audioContext;
var file;
var fileContent;
var audioBufferSourceNode;
var analyser;
var loadFile = function() {
var fileReader = new FileReader();
fileReader.onload = function(e) {
fileContent = e.target.result;
decodecFile();
}
fileReader.readAsArrayBuffer(file);
}
var decodecFile = function() {
audioContext.decodeAudioData(fileContent, function(buffer) {
start(buffer);
});
}
var start = function(buffer) {
if(audioBufferSourceNode) {
audioBufferSourceNode.stop();
}
audioBufferSourceNode = audioContext.createBufferSource();
audioBufferSourceNode.connect(analyser);
analyser.connect(audioContext.destination);
audioBufferSourceNode.buffer = buffer;
audioBufferSourceNode.start(0);
showTip(false);
window.requestAnimationFrame(render);
}
var showTip = function(show) {
var tip = document.getElementById('tip');
if (show) {
tip.className = "show";
} else {
tip.className = "";
}
}
var render = function() {
ctx = canvas.getContext("2d");
ctx.strokeStyle = "#00d0ff";
ctx.lineWidth = 2;
ctx.clearRect(0, 0, canvas.width, canvas.height);
var dataArray = new Uint8Array(analyser.frequencyBinCount);
analyser.getByteFrequencyData(dataArray);
var step = Math.round(dataArray.length / 60);
for (var i = 0; i < 40; i++) {
var energy = (dataArray[step * i] / 256.0) * 50;
for (var j = 0; j < energy; j++) {
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200 + 4 * j);
ctx.lineTo(20 * (i + 1) - 2, 200 + 4 * j);
ctx.stroke();
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200 - 4 * j);
ctx.lineTo(20 * (i + 1) - 2, 200 - 4 * j);
ctx.stroke();
}
ctx.beginPath();
ctx.moveTo(20 * i + 2, 200);
ctx.lineTo(20 * (i + 1) - 2, 200);
ctx.stroke();
}
window.requestAnimationFrame(render);
}
window.onload = function() {
audioContext = new AudioContext();
analyser = audioContext.createAnalyser();
analyser.fftSize = 256;
var fileChooser = document.getElementById('fileChooser');
fileChooser.onchange = function() {
if (fileChooser.files[0]) {
file = fileChooser.files[0];
showTip(true);
loadFile();
}
}
canvas = document.getElementById('visualizer');
}
使用HTML5 API(AudioContext)实现可视化频谱效果的更多相关文章
- HTML5音频可视化频谱跳动代码
今天学习到用canvas来写 HTML5音频可视化频谱跳动代码 将代码在此做一总结: <!DOCTYPE html> <html lang="en"> ...
- Three.js + HTML5 Audio API 打造3D音乐频谱,Let’s ROCK!
继续玩味之前写的音乐频谱作品,将原来在Canvas标签上的 作图利用Three.js让它通过WebGL呈现,这样就打造出了一个全立体感的频谱效果了. 项目详情及源码 项目GitHub地址:https: ...
- HTML5 API 是什么
HTML5 API 是什么 一.总结 1.html5有很多好的api可以用:例如绘图的canvas,获取地理位置的,获取手机电池信息的等等,后面用的时候可以百度 2.html5 API是什么:html ...
- 经典!HTML5 Canvas 模拟可撕裂布料效果
这是一个模拟可撕裂布料效果的 HTML5 Canvas 应用演示,效果逼真.你会看到,借助 Canvas 的强大绘图和动画功能,只需很少的代码就能实现让您屏息凝神的效果. 温馨提示:为保证最佳的效果, ...
- 基于html5页面滚动背景图片动画效果
基于html5页面滚动背景图片动画效果是一款带索引按钮的页面滚动动画特效代码.效果图如下: 在线预览 源码下载 实现的代码. html代码: <div id="fullpage&q ...
- HTML5 API 之 history
*:first-child { margin-top: 0 !important; } body>*:last-child { margin-bottom: 0 !important; } /* ...
- HTML5 API's (Application Programming Interfaces)
New HTML5 API's (Application Programming Interfaces) The most interesting new API's are: HTML Geoloc ...
- Web开发者的最爱 5个超实用的HTML5 API
摘要:毫无疑问,HTML5已经成为当今最流行的一门技术,尤其是Web开发者们对HTML5的兴趣是日趋渐浓.HTML5的许多功能也都能在现代浏览器中得以实现.然而,作为开发者,除了关注HTML5的功能和 ...
- html5 +css3 点击后水波纹扩散效果 兼容移动端
<!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content ...
随机推荐
- Delphi GDI或图像处理的博客
http://blog.csdn.net/w1028489713/article/category/1918251
- [项目构建 十三]babasport Nginx负载均衡的详细配置及使用案例详解.
在这里再次说明下, 这个项目是从网上 找到的一套学习资料, 自己在 空闲时间学习了这些东西. 这里面的code当然会有很多不完善的地方, 但是确实也能学到很多新东西.感谢看过这一些列博文和评论的小伙伴 ...
- HDU4666 Hyperspace(曼哈顿)
题目链接. 分析: 这是多校的一个题,当时没做出来.学长说让用multiset. 用multiset将每一个数的1<<dim个状态全部保存.假设状态 i, 最远曼哈顿距离应当是 max[i ...
- -_-#【AJAX】XMLHttpRequest
<!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title> ...
- SPFA 最短路径打印方法
#include <iostream> #include <cstdlib> #include <cstdio> #include <algorithm> ...
- Hadoop MapReduce InputFormat/OutputFormat
InputFormat import java.io.IOException; import java.util.List; /** * InputFormat describes the input ...
- 调用test case集,并生成测试报告
结构是 test_all.py 进行配置,执行所有测试用例集,并合并测试报告到同一个文件 #test_all.py 进行配置,执行所有测试用例集 # coding = utf-8 from time ...
- Android 5.0 Lollipop初上手体验
在等了好几天还没有等到OTA升级提示,前天笔者给Nexus4线刷入了官方提供的Lollipop的镜像,在试用了这两天之后,现在总结下自己感觉很惊艳的地方和一些地方的吐槽.(点击图片可以查看大图) 1. ...
- J - Air Raid - hdu 1151(最小边覆盖)
题意:给一个有向无环图,求出来最少需要几个士兵可以遍历所有的边. 分析:有向无环图的最小边覆盖 = 点数 - 最大匹配数 为什么是这样的公式??可以思考一下,如果这N个点之间没有边,是不是应该有N个士 ...
- Linux动态库的编译与使用
转载: http://hi.baidu.com/linuxlife/blog/item/0d3e302ae2384d3a5343c1b1.html Linux下的动态库以.so为后缀,我也是初次在Li ...