经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 移动开发 » Android » 查看文章
声临其境,轻松几步教你把音频变成3D环绕音
来源:cnblogs  作者:HMSCore技术团队  时间:2021/12/15 8:47:31  对本文有异议

在音乐创作、音视频剪辑和游戏等领域中,给用户带来沉浸式音频体验越来越重要。开发者如何在应用内打造3D环绕声效?华为音频编辑服务6.2.0版本此次带来了空间动态渲染功能,可以将人声、乐器等音频元素渲染到指定的三维空间方位,支持静态和动态渲染两种模式,进一步提升应用中的音效体验。开发者可以点击查看以下Demo演示,了解集成效果并上手实验功能特性。

开发实战

1. 开发准备

开发者提前准备音乐素材,MP3格式最佳。其他音频格式请参考“2.4”步骤转换,视频格式请参考“2.5”步骤进行音频提取。

1.1项目级build.gradle里配置Maven仓地址

  1. buildscript {
  2. repositories {
  3. google()
  4. jcenter()
  5. // 配置HMS Core SDK的Maven仓地址。
  6. maven {url 'https://developer.huawei.com/repo/'}
  7. }
  8. dependencies {
  9. ...
  10. // 增加agcp插件配置。
  11. classpath 'com.huawei.agconnect:agcp:1.4.2.300'
  12. }
  13. }
  14. allprojects {
  15. repositories {
  16. google()
  17. jcenter()
  18. // 配置HMS Core SDK的Maven仓地址。
  19. maven {url 'https://developer.huawei.com/repo/'}
  20. }
  21. }

1.2 文件头增加配置

  1. apply plugin: 'com.huawei.agconnect'

1.3 应用级build.gradle里配置SDK依赖

  1. dependencies{
  2. implementation 'com.huawei.hms:audio-editor-ui:{version}'
  3. }

1.4在AndroidManifest.xml文件中申请如下权限

  1. <!--震动权限-->
  2. <uses-permission android:name="android.permission.VIBRATE" />
  3. <!--麦克风权限-->
  4. <uses-permission android:name="android.permission.RECORD_AUDIO" />
  5. <!--写存储权限-->
  6. <uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE" />
  7. <!--读存储权限-->
  8. <uses-permission android:name="android.permission.READ_EXTERNAL_STORAGE" />
  9. <!--网络权限-->
  10. <uses-permission android:name="android.permission.INTERNET" />
  11. <!--网络状态权限-->
  12. <uses-permission android:name="android.permission.ACCESS_NETWORK_STATE" />
  13. <!--网络状态变化权限-->
  14. <uses-permission android:name="android.permission.CHANGE_NETWORK_STATE" />

2.代码开发

2.1创建应用自定义的activity界面,用于选择音频,并将该音频文件路径返回给音频编辑SDK

  1. // 将音频文件路径List返回到音频编辑页面
  2. private void sendAudioToSdk() {
  3. // 获取到的音频文件路径 filePath
  4. String filePath = "/sdcard/AudioEdit/audio/music.aac";
  5. ArrayList<String> audioList = new ArrayList<>();
  6. audioList.add(filePath);
  7. // 将音频文件路径返回到音频编辑页面
  8. Intent intent = new Intent();
  9. // 使用sdk提供的HAEConstant.AUDIO_PATH_LIST
  10. intent.putExtra(HAEConstant.AUDIO_PATH_LIST, audioList);
  11. // 使用sdk提供的HAEConstant.RESULT_CODE为结果CODE
  12. this.setResult(HAEConstant.RESULT_CODE, intent);
  13. finish();
  14. }

2.2在UI界面导入音频时,SDK会发送一个action值为com.huawei.hms.audioeditor.chooseaudio的intent以跳转到该activity。因此,该activity“AndroidManifest.xml”中的注册形式如下

  1. <activity android:name="Activity ">
  2. <intent-filter>
  3. <action android:name="com.huawei.hms.audioeditor.chooseaudio"/>
  4. <category android:name="android.intent.category.DEFAULT"/>
  5. </intent-filter>
  6. </activity>

2.3启动音频编辑页面,点击“添加音频”,SDK会主动调用“2.1”步骤中定义的activity。添加好音频,就可以进行音频编辑、特效添加等操作,完成后导出编辑音频

  1. HAEUIManager.getInstance().launchEditorActivity(this);

2.4.如果音频素材不是MP3格式,此步骤可以完成音频格式转换

调用transformAudioUseDefaultPath接口进行音频格式转换,转换后的音频文件导出到默认路径。

  1. // 音频格式转换接口
  2. HAEAudioExpansion.getInstance().transformAudioUseDefaultPath(context,inAudioPath, audioFormat, new OnTransformCallBack() {
  3. // 进度回调(0-100)
  4. @Override
  5. public void onProgress(int progress) {
  6. }
  7. // 转换失败
  8. @Override
  9. public void onFail(int errorCode) {
  10. }
  11. // 转换成功
  12. @Override
  13. public void onSuccess(String outPutPath) {
  14. }
  15. // 取消转换
  16. @Override
  17. public void onCancel() {
  18. }
  19. });
  20. // 取消转换任务接口
  21. HAEAudioExpansion.getInstance().cancelTransformAudio();

调用transformAudio接口进行音频格式转换,转换后的音频文件导出到目标路径。

  1. // 音频格式转换接口
  2. HAEAudioExpansion.getInstance().transformAudio(context,inAudioPath, outAudioPath, new OnTransformCallBack(){
  3. // 进度回调(0-100)
  4. @Override
  5. public void onProgress(int progress) {
  6. }
  7. // 转换失败
  8. @Override
  9. public void onFail(int errorCode) {
  10. }
  11. // 转换成功
  12. @Override
  13. public void onSuccess(String outPutPath) {
  14. }
  15. // 取消转换
  16. @Override
  17. public void onCancel() {
  18. }
  19. });
  20. // 取消转换任务接口
  21. HAEAudioExpansion.getInstance().cancelTransformAudio();

2.5如果素材是视频格式,可以调用extractAudio接口进行音频提取,从视频中提取音频文件再导出到指定目录

  1. // outAudioDir提取出的音频保存的文件夹路径,非必填
  2. // outAudioName提取出的音频名称,不带后缀,非必填
  3. HAEAudioExpansion.getInstance().extractAudio(context,inVideoPath,outAudioDir, outAudioName,new AudioExtractCallBack() {
  4. @Override
  5. public void onSuccess(String audioPath) {
  6. Log.d(TAG, "ExtractAudio onSuccess : " + audioPath);
  7. }
  8. @Override
  9. public void onProgress(int progress) {
  10. Log.d(TAG, "ExtractAudio onProgress : " + progress);
  11. }
  12. @Override
  13. public void onFail(int errCode) {
  14. Log.i(TAG, "ExtractAudio onFail : " + errCode);
  15. }
  16. @Override
  17. public void onCancel() {
  18. Log.d(TAG, "ExtractAudio onCancel.");
  19. }
  20. });
  21. // 取消音频提取任务接口
  22. HAEAudioExpansion.getInstance().cancelExtractAudio();

2.6调用getInstruments和startSeparationTasks接口进行伴奏提取

  1. // 获取提取伴奏类型ID,后面将此ID传给接口
  2. HAEAudioSeparationFile haeAudioSeparationFile = new HAEAudioSeparationFile();
  3. haeAudioSeparationFile.getInstruments(new SeparationCloudCallBack<List<SeparationBean>>() {
  4. @Override
  5. public void onFinish(List<SeparationBean> response) {
  6. // 返回的数据,包括伴奏的类型ID
  7. }
  8. @Override
  9. public void onError(int errorCode) {
  10. // 失败返回
  11. }
  12. });
  13. // 设置要提取的伴奏参数
  14. List instruments = new ArrayList<>();
  15. instruments.add(“伴奏id”);
  16. haeAudioSeparationFile.setInstruments(instruments);
  17. // 开始进行伴奏分离
  18. haeAudioSeparationFile.startSeparationTasks(inAudioPath, outAudioDir, outAudioName, new AudioSeparationCallBack() {
  19. @Override
  20. public void onResult(SeparationBean separationBean) { }
  21. @Override
  22. public void onFinish(List<SeparationBean> separationBeans) {}
  23. @Override
  24. public void onFail(int errorCode) {}
  25. @Override
  26. public void onCancel() {}
  27. });
  28. // 取消分离任务
  29. haeAudioSeparationFile.cancel();

2.7调用applyAudioFile接口进行空间方位渲染

  1. // 空间方位渲染
  2. // 固定摆位
  3. HAESpaceRenderFile haeSpaceRenderFile = new HAESpaceRenderFile(SpaceRenderMode.POSITION);
  4. haeSpaceRenderFile.setSpacePositionParams(
  5. new SpaceRenderPositionParams(x, y, z));
  6. // 动态渲染
  7. HAESpaceRenderFile haeSpaceRenderFile = new HAESpaceRenderFile(SpaceRenderMode.ROTATION);
  8. haeSpaceRenderFile.setRotationParams( new SpaceRenderRotationParams(
  9. x, y, z, surroundTime, surroundDirection));
  10. // 扩展
  11. HAESpaceRenderFile haeSpaceRenderFile = new HAESpaceRenderFile(SpaceRenderMode.EXTENSION);
  12. haeSpaceRenderFile.setExtensionParams(new SpaceRenderExtensionParams(radiusVal, angledVal));
  13. // 调用接口
  14. haeSpaceRenderFile.applyAudioFile(inAudioPath, outAudioDir, outAudioName, callBack);
  15. // 取消空间方位渲染
  16. haeSpaceRenderFile.cancel();

完成以上步骤,就可以得到对应的空间动态渲染效果,在应用内轻松实现2D转3D音效啦!这项功能还可以应用到企业会议以及运动康复领域,比如在展会上进行产品沉浸式展示、作为视障人群的方向感线索,为日常生活提供便利等。开发者们可以根据自己应用的实际需求选择使用,如需了解更多详情,请参考:
华为开发者联盟音频编辑服务官网; 获取集成音频编辑服务指导文档

了解更多详情>>

访问华为开发者联盟官网
获取开发指导文档
华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

原文链接:http://www.cnblogs.com/hmscore/p/15688557.html

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号