当前位置：网站首页>虚拟偶像的歌声原来是这样生成的！

虚拟偶像的歌声原来是这样生成的！

2022-07-29 04:53:00 【nginx】

HMS Core音频编辑服务（Audio Editor Kit）6.6.0版本上线，新增歌声合成能力。通过歌词和曲调，结合不同的曲风让机器也能生成真实度极高的歌声。支持字级别输入歌词进行音素转换，生成对应歌词的歌声，可灵活调整音高、滑音、呼吸音、颤音等细节参数，让歌声更真实。

歌声合成服务可广泛应用于 音视频创意制作、影音娱乐、音乐教育、虚拟偶像等领域。例如，在音乐创作或短视频创意编辑时，歌声合成服务可以助力用户自由创作合成歌曲，使创作更加丰富多彩。在虚拟偶像领域，通过歌声合成，可以让虚拟人拥有特定音色歌唱能力，使其形象更生动。在音乐游戏或者歌唱教育中，歌声合成可以迅速生成标准参考声音，提高音频制作效率节省人力成本。
歌声合成效果
听到了歌声合成媲美真人的歌唱效果，是否迫不及待想上手使用了呢，以下是歌声合成的具体集成方法。快来亲自集成试试吧！
1.开发准备
1.1注册成为开发者
在开发应用前需要在华为开发者联盟网站上注册成为开发者并完成实名认证，具体方法请参见帐号注册认证。
1.2创建项目及应用
参见创建项目，然后在项目下创建应用完成应用的创建，特殊配置如下：
选择平台：选择“Web”。
1.3打开相关服务
使用Audio Editor Kit服务需要您在AppGallery Connect上打开Audio Editor Kit服务开关，具体操作步骤请参见打开服务开关。
2.歌声合成功能集成
2.1同步接口（流式）
2.1.1获取access_token鉴权信息
使用开发者联盟界面获得的客户端ID以及对应密钥，发送HTTPS POST请求，获取查询access_token。获取方式请参见客户端模式（Client Credentials）。
2.1.2根据access_token调用同步接口（流式）
通过以上步骤获取的access_token信息，发送HTTPS POST调用同步接口（流式）。
示例代码（ java）如下所示：
其中requestUrl = "https://audioeditor-api-drcn.cloud.huawei.com/v1/audioeditor/gateway/ai/ttsing/sync"。 
  
 
 
    
   
  
  
  1. /**
    2. 
   
  
  
  2.  * 调用同步接口（流式）
    3. 
   
  
  
  3.  * @param accessToken 根据clientId和密钥获取的token
    4. 
   
  
  
  4.  * @throws Exception IO异常
    5. 
   
  
  
  5.  */
    6. 
   
  
  
  6.  private static void syncTask(String accessToken) throws Exception {
    7. 
   
  
  
  7.  // 设置请求header
    8. 
   
  
  
  8.  PostMethod postMethod = new PostMethod(requestUrl);
    9. 
   
  
  
  9.  postMethod.setRequestHeader("Content-Type","application/json;charset=utf-8");
    10. 
   
  
  
  10.  postMethod.setRequestHeader("X-Request-ID","9af1aeda-531b-407a-80b4-65b40ef77bd6");
    11. 
   
  
  
  11.  postMethod.setRequestHeader("X-Package-Name","com.huawei.demo");
    12. 
   
  
  
  12.  postMethod.setRequestHeader("X-Country-Code","cn");
    13. 
   
  
  
  13.  postMethod.setRequestHeader("HMS-APPLICATION-ID","123456");
    14. 
   
  
  
  14.  postMethod.setRequestHeader("certFingerprint","xxxxx");
    15. 
   
  
  
  15.  postMethod.setRequestHeader("Authorization","Bearer " + accessToken);
    16. 
   
  
  
  16.  // 设置请求body
    17. 
   
  
  
  17.  Map<String, Object> bodyMap = new HashMap<>();
    18. 
   
  
  
  18.  Map<String, Object> dataMap = new HashMap<>();
    19. 
   
  
  
  19.  Map<String, Object> configMap = new HashMap<>();
    20. 
   
  
  
  20.  // filePath是MusicXML文件路径（含文件名、后缀）
    21. 
   
  
  
  21.  String lyricFilePath = "filePath";
    22. 
   
  
  
  22.  dataMap.put("lyric", FileUtils.readFileToString(new File(lyricFilePath), "UTF-8"));
    23. 
   
  
  
  23.  dataMap.put("language", "chinese");
    24. 
   
  
  
  24.  configMap.put("type", 1);
    25. 
   
  
  
  25.  configMap.put("outputEncoderFormat", 0);
    26. 
   
  
  
  26.  bodyMap.put("data", dataMap);
    27. 
   
  
  
  27.  bodyMap.put("config", configMap);
    28. 
   
  
  
  28.  RequestEntity requestEntity = new StringRequestEntity(JSONObject.toJSONString(bodyMap),"application/json" ,"UTF-8");
    29. 
   
  
  
  29.  postMethod.setRequestEntity(requestEntity);
    30. 
   
  
  
  30.  HttpClient httpClient = new HttpClient();
    31. 
   
  
  
  31.  int ret = httpClient.executeMethod(postMethod);
    32. 
   
  
  
  32.  if (ret == 200) {
    33. 
   
  
  
  33.  Header responseHeader = postMethod.getResponseHeader("content-type");
    34. 
   
  
  
  34.  if ("application/octet-stream".equals(responseHeader.getValue())) {
    35. 
   
  
  
  35.  InputStream rpsContent = postMethod.getResponseBodyAsStream();
    36. 
   
  
  
  36.  // filePath是要保存文件的路径（含文件名、后缀）
    37. 
   
  
  
  37.  String filePath = "filePath";
    38. 
   
  
  
  38.  FileUtils.copyInputStreamToFile(rpsContent, new File(filePath));
    39. 
   
  
  
  39.  } else {
    40. 
   
  
  
  40.  String errorString = postMethod.getResponseBodyAsString();
    41. 
   
  
  
  41.  System.out.println(errorString);
    42. 
   
  
  
  42.  }
    43. 
   
  
  
  43.  } else {
    44. 
   
  
  
  44.  System.out.println("callApi failed: ret =" + ret + " rsp=" + postMethod.getResponseBodyAsString());
    45. 
   
  
  
  45.  }
    46. 
   
  
  
  46.  }
    47.
2.2异步接口
2.2.1创建异步任务
通过access_token信息，发送HTTPS POST创建歌声合成异步任务。 
  
 
 
    
   
  
  
  1. /**
    2. 
   
  
  
  2.  * 调用创建异步任务接口
    3. 
   
  
  
  3.  * @param accessToken 根据clientId和密钥获取的token
    4. 
   
  
  
  4.  * @throws Exception IO异常
    5. 
   
  
  
  5.  */
    6. 
   
  
  
  6.  private static void creatAsyncTask(String accessToken) throws Exception {
    7. 
   
  
  
  7.  // 设置请求header
    8. 
   
  
  
  8.  PostMethod postMethod = new PostMethod(requestUrl);
    9. 
   
  
  
  9.  postMethod.setRequestHeader("Content-Type","application/json;charset=utf-8");
    10. 
   
  
  
  10.  postMethod.setRequestHeader("X-Request-ID","9af1aeda-531b-407a-80b4-65b40ef77bd6");
    11. 
   
  
  
  11.  postMethod.setRequestHeader("X-Package-Name","com.huawei.demo");
    12. 
   
  
  
  12.  postMethod.setRequestHeader("X-Country-Code","cn");
    13. 
   
  
  
  13.  postMethod.setRequestHeader("HMS-APPLICATION-ID","123456");
    14. 
   
  
  
  14.  postMethod.setRequestHeader("certFingerprint","xxxxx");
    15. 
   
  
  
  15.  postMethod.setRequestHeader("Authorization","Bearer " + accessToken);
    16. 
   
  
  
  16.  // 设置请求body
    17. 
   
  
  
  17.  Map<String, Object> bodyMap = new HashMap<>();
    18. 
   
  
  
  18.  Map<String, Object> dataMap = new HashMap<>();
    19. 
   
  
  
  19.  Map<String, Object> configMap = new HashMap<>();
    20. 
   
  
  
  20.  // filePath是MusicXML文件路径（含文件名、后缀）
    21. 
   
  
  
  21.  String lyricFilePath = "filePath";
    22. 
   
  
  
  22.  dataMap.put("lyric", FileUtils.readFileToString(new File(lyricFilePath), "UTF-8"));
    23. 
   
  
  
  23.  dataMap.put("language", "chinese");
    24. 
   
  
  
  24.  configMap.put("type", 1);
    25. 
   
  
  
  25.  configMap.put("outputEncoderFormat", 0);
    26. 
   
  
  
  26.  bodyMap.put("data", dataMap);
    27. 
   
  
  
  27.  bodyMap.put("config", configMap);
    28. 
   
  
  
  28.  RequestEntity requestEntity = new StringRequestEntity(JSONObject.toJSONString(bodyMap),"application/json" ,"UTF-8");
    29. 
   
  
  
  29.  postMethod.setRequestEntity(requestEntity);
    30. 
   
  
  
  30.  HttpClient httpClient = new HttpClient();
    31. 
   
  
  
  31.  int ret = httpClient.executeMethod(postMethod);
    32. 
   
  
  
  32.  String rpsContent = postMethod.getResponseBodyAsString();
    33. 
   
  
  
  33.  if (ret == 200) {
    34. 
   
  
  
  34.  System.out.println(rpsContent);
    35. 
   
  
  
  35.  } else {
    36. 
   
  
  
  36.  System.out.println("callApi failed: ret =" + ret + " rsp=" + rpsContent);
    37. 
   
  
  
  37.  }
    38. 
   
  
  
  38.  }
    39.
2.2.2查询异步任务状态
通过access_token信息，发送HTTPS POST查询歌声合成异步任务状态。 
  
 
 
    
   
  
  
  1. /**
    2. 
   
  
  
  2.  * 调用查询异步任务状态接口
    3. 
   
  
  
  3.  * @param accessToken 根据clientId和密钥获取的token
    4. 
   
  
  
  4.  * @throws Exception IO异常
    5. 
   
  
  
  5.  */
    6. 
   
  
  
  6.  private static void queryAsyncTaskInfo(String accessToken) throws Exception {
    7. 
   
  
  
  7.  // 设置请求header
    8. 
   
  
  
  8.  PostMethod postMethod = new PostMethod(requestUrl);
    9. 
   
  
  
  9.  postMethod.setRequestHeader("Content-Type","application/json;charset=utf-8");
    10. 
   
  
  
  10.  postMethod.setRequestHeader("X-Request-ID","9af1aeda-531b-407a-80b4-65b40ef77bd6");
    11. 
   
  
  
  11.  postMethod.setRequestHeader("X-Package-Name","com.huawei.demo");
    12. 
   
  
  
  12.  postMethod.setRequestHeader("X-Country-Code","cn");
    13. 
   
  
  
  13.  postMethod.setRequestHeader("HMS-APPLICATION-ID","123456");
    14. 
   
  
  
  14.  postMethod.setRequestHeader("certFingerprint","xxxxx");
    15. 
   
  
  
  15.  postMethod.setRequestHeader("Authorization","Bearer " + accessToken);
    16. 
   
  
  
  16.  // 设置请求body
    17. 
   
  
  
  17.  Map<String, Object> bodyMap = new HashMap<>();
    18. 
   
  
  
  18.  // taskId对应的值是创建异步任务时返回的任务ID（taskId）
    19. 
   
  
  
  19.  bodyMap.put("taskId", "taskId");
    20. 
   
  
  
  20.  RequestEntity requestEntity = new StringRequestEntity(JSONObject.toJSONString(bodyMap),"application/json" ,"UTF-8");
    21. 
   
  
  
  21.  postMethod.setRequestEntity(requestEntity);
    22. 
   
  
  
  22.  HttpClient httpClient = new HttpClient();
    23. 
   
  
  
  23.  int ret = httpClient.executeMethod(postMethod);
    24. 
   
  
  
  24.  String rpsContent = postMethod.getResponseBodyAsString();
    25. 
   
  
  
  25.  if (ret == 200) {
    26. 
   
  
  
  26.  System.out.println(rpsContent);
    27. 
   
  
  
  27.  } else {
    28. 
   
  
  
  28.  System.out.println("callApi failed: ret =" + ret + " rsp=" + rpsContent);
    29. 
   
  
  
  29.  }
    30. 
   
  
  
  30.  }
    31.
2.2.3取消异步任务
通过access_token信息，发送HTTPS POST取消异步任务。 
  
 
 
    
   
  
  
  1. /**
    2. 
   
  
  
  2.  * 调用取消异步任务接口
    3. 
   
  
  
  3.  * @param accessToken 根据clientId和密钥获取的token
    4. 
   
  
  
  4.  * @throws Exception IO异常
    5. 
   
  
  
  5.  */
    6. 
   
  
  
  6.  private static void cancelAsuncTask(String accessToken) throws Exception {
    7. 
   
  
  
  7.  // 设置请求header
    8. 
   
  
  
  8.  PostMethod postMethod = new PostMethod(requestUrl);
    9. 
   
  
  
  9.  postMethod.setRequestHeader("Content-Type","application/json;charset=utf-8");
    10. 
   
  
  
  10.  postMethod.setRequestHeader("X-Request-ID","9af1aeda-531b-407a-80b4-65b40ef77bd6");
    11. 
   
  
  
  11.  postMethod.setRequestHeader("X-Package-Name","com.huawei.demo");
    12. 
   
  
  
  12.  postMethod.setRequestHeader("X-Country-Code","cn");
    13. 
   
  
  
  13.  postMethod.setRequestHeader("HMS-APPLICATION-ID","123456");
    14. 
   
  
  
  14.  postMethod.setRequestHeader("certFingerprint","xxxxx");
    15. 
   
  
  
  15.  postMethod.setRequestHeader("Authorization","Bearer " + accessToken);
    16. 
   
  
  
  16.  // 设置请求body
    17. 
   
  
  
  17.  Map<String, Object> bodyMap = new HashMap<>();
    18. 
   
  
  
  18.  // taskId对应的值是创建异步任务时返回的任务ID（taskId）
    19. 
   
  
  
  19.  bodyMap.put("taskId", "taskId");
    20. 
   
  
  
  20.  RequestEntity requestEntity = new StringRequestEntity(JSONObject.toJSONString(bodyMap),"application/json" ,"UTF-8");
    21. 
   
  
  
  21.  postMethod.setRequestEntity(requestEntity);
    22. 
   
  
  
  22.  HttpClient httpClient = new HttpClient();
    23. 
   
  
  
  23.  int ret = httpClient.executeMethod(postMethod);
    24. 
   
  
  
  24.  String rpsContent = postMethod.getResponseBodyAsString();
    25. 
   
  
  
  25.  if (ret == 200) {
    26. 
   
  
  
  26.  System.out.println(rpsContent);
    27. 
   
  
  
  27.  } else {
    28. 
   
  
  
  28.  System.out.println("callApi failed: ret =" + ret + " rsp=" + rpsContent);
    29. 
   
  
  
  29.  }
    30. 
   
  
  
  30.  }
    31.
除了歌声合成能力，音频编辑服务还提供音频基础编辑、AI配音伴奏提取、空间渲染、变声降噪等丰富的音频处理能力，为全球开发者提供性能优异、简单易用、开放性强的接口，帮助开发者轻松高效构建应用音频编辑能力。
了解更多详情>>
访问华为开发者联盟官网
获取开发指导文档
华为移动服务开源仓库地址：GitHub、Gitee
关注我们，第一时间了解 HMS Core 最新技术资讯~


   
   
   
                        

原网站

版权声明
本文为[nginx]所创，转载请带上原文链接，感谢
https://www.openjq.com/thread-35232-1-1.html

边栏推荐

猜你喜欢

随机推荐