做视频导航网站,农家乐网站模板,公司做网站怎么推广,建网站有域名和主机简介
OpenAtom OpenHarmony#xff08;以下简称“OpenHarmony”#xff09;是由开放原子开源基金会孵化及运营的开源项目#xff0c;是面向全场景、全连接、全智能时代的智能物联网操作系统。
多媒体子系统是OpenHarmony系统中的核心子系统#xff0c;为系统提供了相机、…简介
OpenAtom OpenHarmony以下简称“OpenHarmony”是由开放原子开源基金会孵化及运营的开源项目是面向全场景、全连接、全智能时代的智能物联网操作系统。
多媒体子系统是OpenHarmony系统中的核心子系统为系统提供了相机、音频和视频等多媒体功能。多媒体子系统的音频模块、音频录音功能可以提供两套接口一是由ohos.multimedia.media提供的AudioRecorder接口能够直接设置录音保存的文件路径在录制结束以后自动生成对应的录音文件代码编写比较简单二是由ohos.multimedia.audio提供的AudioCapturer接口能够获得录音过程中的PCM数据并对数据进行处理。由于Capturer接口对于原始数据的处理更加灵活今天就和大家介绍通过Capturer接口实现录音变速的功能的方法。
效果展示
通过Capturer接口实现音频的录制在录制过程中对PCM数据进行重采样实现声音的快放和慢放。
首先设置录音加速或者录音减速设置完成以后点击“录音开始”按钮进行录音点击“录音结束”按钮停止录音再通过点击“播放开始”对录音的音频进行播放播放的音频是设置后的加速或者减速效果。
目录结构 调用流程
1.Start的框架层调用流程 2. Read的框架层调用流程 源码分析
1.首先看一下页面的布局主要分为四个模块
1设置录音加速
div styletext-color: aqua;margin-bottom: 20fp;text stylefont-size: 30fp;设置录音加速/text
/divdiv classcontainerbutton classfirst typecapsule onclickset_5_41.25倍速/buttonbutton classfirst typecapsule onclickset_6_41.5倍速/button
/divdiv classcontainerbutton classfirst typecapsule onclickset_7_41.75倍速/buttonbutton classfirst typecapsule onclickset_8_42倍速/button
/div2设置录音减速
div styletext-color: aqua;margin-bottom: 20fp;margin-top: 20fp;text stylefont-size: 30fp;设置录音减速/text
/divdiv classcontainerbutton classfirst typecapsule onclickset_3_40.75倍速/buttonbutton classfirst typecapsule onclickset_2_40.5倍速/button
/div3录音
div styletext-color: aqua;margin-bottom: 20fp;margin-top: 20fp;text stylefont-size: 30fp;录音/text
/divdiv classcontainerbutton classfirst typecapsule onclickrecord录音开始/buttonbutton classfirst typecapsule onclickrecordstop录音结束/button
/div4播放
div styletext-color: aqua;margin-bottom: 20fp;margin-top: 20fp;text stylefont-size: 30fp;播放/text
/divdiv classcontainerbutton classfirst typecapsule onclickplay播放开始/buttonbutton classfirst typecapsule onclickplaystop播放结束/button
/divdiv classcontainervideo if{{ display }} id{{ videoId }}classvideosrc{{url}}autoplay{{ autoplay }}controls{{ controlShow }}mutedfalseonseekedseekedonpreparedprepared/video
/div2.逻辑代码在JS中
1首先通过AudioCapturer接口获取到PCM数据再通过调用AudioCapturer的start接口来启动录音流程。
globalThis.capturer.start().then(function () {console.log(gyf start);globalThis.capturer.getBufferSize((err, bufferSize) {if (err) {console.error(gyf getBufferSize error);} else {console.log(gyf bufferSize bufferSize);globalThis.getBuf(bufferSize);}});
});2启动成功以后getBuf会调用到getData函数getData函数通过AudioCapturer的read方法来读取数据成功读取到数据以后通过handleBuffer函数对数据进行处理。handleBuffer函数的参数arrayBuffer就是通过read方法读取出来的pcm数据在handleBuffer中对数据进行了快速播放或者慢速播放的处理。
//循环调用read进行数据的读取
handleBuffer(arrayBuffer) {console.log(gyf handleBuffer);let result new Uint8Array(arrayBuffer);console.log(gyf handleBuffer result);let outData this.test(result, up, down);fileio.writeSync(globalThis.fd, outData.buffer);globalThis.capturer.read(globalThis.bufSize, true).then(this.handleBuffer);
},getData(bufSize) {console.log(gyf getData);globalThis.capturer.read(bufSize, true).then(this.handleBuffer);
},getBuf(bufSize) {console.log(gyf getBuf);this.getData(bufSize);
},3快速播放或者慢速播放是通过up和down两个方法的组合来实现的down方法的原理是对PCM数据进行插值处理在相邻两点间插入down个采样点up方法的原理是间隔抽取间隔up个点进行抽取采样。
up(data, up) {if (1 up) {return data;}let length data.byteLength;let upLength Math.round(length / up);var upData new Uint8Array(upLength);for (var i 0, j 0; i length; ) {if (j upLength) {break;}upData[j] data[i];i up;j;}return upData;
},down(data, down) {if (1 down) {return data;}let length data.byteLength;let downLength Math.round(length * down);var downData new Uint8Array(downLength);for (var i 0, j 0; i length - 1; ) {for (var k 0; k down; k) {downData[j] data[i];j;}i;}return downData;
},4将down和up的方法组合调用来实现1.25倍、1.5倍、1.75倍、2倍、0.75倍、0.5倍的速度播放。
test(data, up, down) {let downData this.down(data, down);let upData this.up(downData, up);return upData;
},5播放wav格式的音频文件采集获取PCM数据需要我们根据设置的参数对pcm数据进行添加wav的头部信息通过创建AudioCapturer实例的时候设置采集音频的参数如采样率、通道数、采样格式等。
//音频采集初始化
var audioStreamInfo {samplingRate: audio.AudioSamplingRate.SAMPLE_RATE_8000,channels: audio.AudioChannel.CHANNEL_1,sampleFormat: audio.AudioSampleFormat.SAMPLE_FORMAT_U8,encodingType: audio.AudioEncodingType.ENCODING_TYPE_RAW
}var audioCapturerInfo {source: audio.SourceType.SOURCE_TYPE_MIC,capturerFlags: 1
}var audioCapturerOptions {streamInfo: audioStreamInfo,capturerInfo: audioCapturerInfo
}
let that this;audio.createAudioCapturer(audioCapturerOptions,(err, data) {if (err) {console.error(gyf AudioCapturer Created : Error: ${err.message});}else {console.info(gyf AudioCapturer Created : Success : SUCCESS);that.capturer data;}
});6根据这些参数设置的信息需要对wav文件写入文件头头信息一般包含44个字节里面需要设置三个chunk的信息RIFF chunk、fmt chunk、data chunk具体的信息可以查看官网的介绍WAV文件格式介绍
//假设数据为1000秒钟的时间8000 * 1000
encodeWAV() {var dataLen 8000000;var sampleRate 8000;var sampleBits 8;var buffer new ArrayBuffer(44);var data new DataView(buffer);var channelCount 1; // 单声道var offset 0;// 资源交换文件标识符this.writeString(data, offset, RIFF); offset 4;// 下个地址开始到文件尾总字节数,即文件大小-8data.setUint32(offset, 36 dataLen, true); offset 4;// WAV文件标志this.writeString(data, offset, WAVE); offset 4;// 波形格式标志this.writeString(data, offset, fmt ); offset 4;// 过滤字节,一般为 0x10 16data.setUint32(offset, 16, true); offset 4;// 格式类别 (PCM形式采样数据)data.setUint16(offset, 1, true); offset 2;// 通道数data.setUint16(offset, channelCount, true); offset 2;// 采样率,每秒样本数,表示每个通道的播放速度data.setUint32(offset, sampleRate, true); offset 4;// 波形数据传输率 (每秒平均字节数) 单声道×每秒数据位数×每样本数据位/8data.setUint32(offset, channelCount * sampleRate * (sampleBits / 8), true); offset 4;// 快数据调整数 采样一次占用字节数 单声道×每样本的数据位数/8data.setUint16(offset, channelCount * (sampleBits / 8), true); offset 2;// 每样本数据位数data.setUint16(offset, sampleBits, true); offset 2;// 数据标识符this.writeString(data, offset, data); offset 4;// 采样数据总数,即数据总大小-44data.setUint32(offset, dataLen, true); offset 4;return data;
},总结
本文介绍了通过使用OpenHarmony音频模块的AudioCapturer接口实现录音功能。AudioCapturer接口对于原始数据的处理非常灵活能够对采集的数据进行插值/抽值的重采样处理并将处理后的音频处理保存至本地文件。由于本地文件使用的是WAV格式故在写数据前需要对WAV文件进行头部信息的添加这些信息可以根据创建AudioCapturer时设置的参数来进行设置以此保证头部信息的准确性最后再通过应用层的video组件对音频数据进行播放。
为了帮助到大家能够更有效的学习OpenHarmony 开发的内容下面特别准备了一些相关的参考学习资料
OpenHarmony 开发环境搭建https://qr18.cn/CgxrRy 《OpenHarmony源码解析》https://qr18.cn/CgxrRy
搭建开发环境Windows 开发环境的搭建Ubuntu 开发环境搭建Linux 与 Windows 之间的文件共享……
系统架构分析https://qr18.cn/CgxrRy
构建子系统启动流程子系统分布式任务调度子系统分布式通信子系统驱动子系统…… OpenHarmony 设备开发学习手册https://qr18.cn/CgxrRy OpenHarmony面试题内含参考答案https://qr18.cn/CgxrRy