用Python将音频内容转换为文本格式,方言可以吗?

article/2025/5/20 14:31:11

当对一个或多个人的谈话进行记录时,采用一种高度准确和自动化的方式将口语提取为文本非常有用。转换成文字后,便可以将其用于进一步分析或用作其他功能。

在本教程中,我们将使用称为AssemblyAI(https://www.assemblyai.com/)的高精度语音转文本Web API从MP3录音中提取文本(也支持许多其他格式)。

在本教程中,音频文件示例下载地址请扫描本文下方二维码添加Python小助手获取,下面是音频输出如下所示的高精度文本转录内容:

An object relational mapper is a code library that automates the transfer of   
data stored in relational, databases into objects that are more commonly used  
in application code or EMS are useful because they provide a high level   
abstraction upon a relational database that allows developers to write Python   
code instead of sequel to create read update and delete, data and schemas in   
their database. Developers can use the programming language. They are   
comfortable with to work with a database instead of writing SQL... 

教程要求

在本教程中,我们将使用以下依赖项,稍后将安装它们。请确保您的环境中还安装了Python 3,最好安装3.6或更高版本:

我们将使用以下依赖关系来完成本教程:

  •  requests 2.24.0  来向AssemblyAI语音文本API发出HTTP请求
  •  一个 AssemblyAI 帐户,您可以在此处(https://app.assemblyai.com/login/)注册免费的API访问密钥

本文所有代码下载地址请扫描本文下方二维码添加Python小助手获取。

搭建开发环境

转到保存Python虚拟环境的目录。我将我的目录保存在用户主目录下的venvs子目录中。使用以下命令为此项目创建一个新的virtualenv。

python3 -m venv ~/venvs/pytranscribe 

用 shell 命令激活 virtualenv:

source ~/venvs/pytranscribe/bin/activate 

执行上述命令后,命令提示符将发生更改,因此virtualenv的名称将以原始命令提示符格式开头,如果您的提示符只是$,则其外观如下所示:

(pytranscribe) $ 

请记住,您必须在每个 virtualenv 中使用依赖项的新终端窗口中激活您的 virtualenv 。

现在,我们可以将请求包安装到已激活但为空的 virtualenv 中。

pip install requests==2.24.0 

查找类似于以下内容的输出,以确认从PyPI正确安装了相应的软件包。

(pytranscribe) $ pip install requests==2.24.0  
Collecting requests==2.24.0  Using cached https://files.pythonhosted.org/packages/45/1e/0c169c6a5381e241ba7404532c16a21d86ab872c9bed8bdcd4c423954103/requests-2.24.0-py2.py3-none-any.whl  
Collecting certifi>=2017.4.17 (from requests==2.24.0)  Using cached https://files.pythonhosted.org/packages/5e/c4/6c4fe722df5343c33226f0b4e0bb042e4dc13483228b4718baf286f86d87/certifi-2020.6.20-py2.py3-none-any.whl  
Collecting urllib3!=1.25.0,!=1.25.1,<1.26,>=1.21.1 (from requests==2.24.0)  Using cached https://files.pythonhosted.org/packages/9f/f0/a391d1463ebb1b233795cabfc0ef38d3db4442339de68f847026199e69d7/urllib3-1.25.10-py2.py3-none-any.whl  
Collecting chardet<4,>=3.0.2 (from requests==2.24.0)  Using cached https://files.pythonhosted.org/packages/bc/a9/01ffebfb562e4274b6487b4bb1ddec7ca55ec7510b22e4c51f14098443b8/chardet-3.0.4-py2.py3-none-any.whl  
Collecting idna<3,>=2.5 (from requests==2.24.0)  Using cached https://files.pythonhosted.org/packages/a2/38/928ddce2273eaa564f6f50de919327bf3a00f091b5baba8dfa9460f3a8a8/idna-2.10-py2.py3-none-any.whl  
Installing collected packages: certifi, urllib3, chardet, idna, requests  
Successfully installed certifi-2020.6.20 chardet-3.0.4 idna-2.10 requests-2.24.0 urllib3-1.25.10 

我们已经安装了所有必需的依赖项,因此我们可以开始对应用程序进行编码。

上传、启动和转录音频

我们已完成开始构建应用程序所需的一切,该应用程序会将音频转换为文本。我们将在三个文件中构建此应用程序:

1、upload_audio_file.py:将您的音频文件上传到AssemblyAI服务上的安全位置,以便可以进行处理。如果您的音频文件已经可以通过公共URL访问,则无需执行此步骤,只需按照此快速入门(https://docs.assemblyai.com/overview/getting-started)

2、initial_transcription.py:告诉API要转录并立即启动的文件

3、get_transcription.py:如果仍在处理转录,则显示转录状态,或者在处理完成后显示转录结果

创建一个名为pytranscribe的新目录,以在我们编写文件时存储这些文件。然后转到新的项目目录。

mkdir pytranscibe  
cd pytranscribe 

我们还需要将 AssemblyAI API 密钥导出为环境变量。注册 AssemblyAI 帐户并登录 AssemblyAI 仪表板,然后复制“您的API token”,如以下屏幕截图所示:

export ASSEMBLYAI_KEY=your-api-key-here 

请注意,必须每个命令行窗口中使用 export 命令以保证此密钥可访问。如果您没有在运行脚本的环境中将标记导出为 ASSEMBLYAI_KEY,则我们正在编写的脚本将无法访问API。

现在我们已经创建了项目目录并将API密钥设置为环境变量,让我们继续编写第一个文件的代码,该文件会将音频文件上传到AssemblyAI服务。

上传音频文件并进行转录

创建一个名为upload_audio_file.py的新文件,并将以下代码放入其中:

import argparse  
import os  
import requests  
API_URL = "https://api.assemblyai.com/v2/"  
def upload_file_to_api(filename):  """Checks for a valid file and then uploads it to AssemblyAI  so it can be saved to a secure URL that only that service can access.  When the upload is complete we can then initiate the transcription  API call.  Returns the API JSON if successful, or None if file does not exist.  """  if not os.path.exists(filename):  return None  def read_file(filename, chunk_size=5242880):  with open(filename, 'rb') as _file:  while True:  data = _file.read(chunk_size)  if not data:  break yield data  headers = {'authorization': os.getenv("ASSEMBLYAI_KEY")}  response = requests.post("".join([API_URL, "upload"]), headersheaders=headers,  data=read_file(filename))  return response.json() 

上面的代码导入了argparse,os和request软件包,以便我们可以在此脚本中使用它们。API_URL是一个常量,具有AssemblyAI服务的基本URL。我们使用单个参数定义upload_file_to_api函数,filename应该是一个字符串,其中包含文件及其文件名的绝对路径。

在函数中,我们检查文件是否存在,然后使用Request的分块传输编码将大文件流式传输到AssemblyAI API。

os模块的getenv函数读取使用带有getenv的export命令在命令行上设置的API。确保在运行此脚本的终端中使用该导出命令,否则ASSEMBLYAI_KEY值将为空白。如有疑问,请使用echo $ ASSEMBLY_AI查看该值是否与您的API密钥匹配。

要使用upload_file_to_api函数,请将以下代码行添加到upload_audio_file.py文件中,以便我们可以正确地将此代码作为使用python命令调用的脚本执行:

if __name__ == "__main__":  parser = argparse.ArgumentParser()  parser.add_argument("filename")  args = parser.parse_args()  upload_filename = args.filename  response_json = upload_file_to_api(upload_filename)  if not response_json:  print("file does not exist")  else:  print("File uploaded to URL: {}".format(response_json['upload_url'])) 

上面的代码创建了一个ArgumentParser对象,它允许应用程序从命令行获取单个参数来指定我们要访问的对象,读取并上传到AssmeblyAI服务的文件。

如果文件不存在,脚本将显示一条消息,提示找不到该文件。在路径中,我们确实找到了正确的文件,然后使用upload_file_to_api函数中的代码上传了文件。

通过使用python命令在命令行上运行完整的upload_audio_file.py脚本,以执行该脚本。将FULL_PATH_TO_FILE替换为您要上传的文件的绝对路径,例如/Users/matt/devel/audio.mp3。

python upload_audio_file.py FULL_PATH_TO_FILE 

假设在您指定的位置找到文件,当脚本完成文件的上传后,它将打印一条带有唯一URL的消息:

File uploaded to URL: https://cdn.assemblyai.com/upload/463ce27f-0922-4ea9-9ce4-3353d84b5638 

该URL不是公开的,只能由AssemblyAI服务使用,因此除您及其转录的API外,其他任何人都无法访问您的文件及其内容。

重要的部分是URL的最后一部分,在此示例中为463ce27f-0922-4ea9-9ce4-3353d84b5638。保存该唯一标识符,因为我们需要将其传递给下一个启动转录服务的脚本。

启动转录

接下来,我们将编写一些代码来开始转录。创建一个名为initial_transcription.py的新文件。将以下代码添加到新文件中。

import argparse  
import os  
import requests  
API_URL = "https://api.assemblyai.com/v2/"  
CDN_URL = "https://cdn.assemblyai.com/"  
def initiate_transcription(file_id):  """Sends a request to the API to transcribe a specific  file that was previously uploaded to the API. This will  not immediately return the transcription because it takes  a moment for the service to analyze and perform the  transcription, so there is a different function to retrieve  the results.  """  endpoint = "".join([API_URL, "transcript"])  json = {"audio_url": "".join([CDN_URL, "upload/{}".format(file_id)])}  headers = {  "authorization": os.getenv("ASSEMBLYAI_KEY"),  "content-type": "application/json"  }  response = requests.post(endpoint, jsonjson=json, headersheaders=headers)  return response.json() 

我们具有与先前脚本相同的导入,并添加了一个新常量CDN_URL,该常量与AssemblyAI存储上传的音频文件的单独URL匹配。

initiate_transcription函数本质上只是向AssemblyAI API设置了一个HTTP请求,以传入的特定URL对音频文件启动转录过程。这就是为什么file_id传递很重要的原因:完成音频文件的URL 我们告诉AssemblyAI进行检索。

通过附加此代码来完成文件,以便可以从命令行轻松地使用参数调用它。

if __name__ == "__main__":  parser = argparse.ArgumentParser()  parser.add_argument("file_id")  args = parser.parse_args()  file_id = args.file_id  response_json = initiate_transcription(file_id)  print(response_json) 

通过在initiate_transcription文件上运行python命令来启动脚本,并传入您在上一步中保存的唯一文件标识符。

# the FILE_IDENTIFIER is returned in the previous step and will  
# look something like this: 463ce27f-0922-4ea9-9ce4-3353d84b5638  
python initiate_transcription.py FILE_IDENTIFIER 

API将发回该脚本打印到命令行的JSON响应。

{'audio_end_at': None, 'acoustic_model': 'assemblyai_default', 'text': None,   'audio_url': 'https://cdn.assemblyai.com/upload/463ce27f-0922-4ea9-9ce4-3353d84b5638',   'speed_boost': False, 'language_model': 'assemblyai_default', 'redact_pii': False,   'confidence': None, 'webhook_status_code': None,   'id': 'gkuu2krb1-8c7f-4fe3-bb69-6b14a2cac067', 'status': 'queued', 'boost_param': None,   'words': None, 'format_text': True, 'webhook_url': None, 'punctuate': True,  'utterances': None, 'audio_duration': None, 'auto_highlights': False,   'word_boost': [], 'dual_channel': None, 'audio_start_from': None} 

记下JSON响应中id键的值。这是我们需要用来检索转录结果的转录标识符。在此示例中,它是gkuu2krb1-8c7f-4fe3-bb69-6b14a2cac067。复制转录标识符到您自己的响应中,因为在下一步中我们将需要它来检查转录过程何时完成。

检索转录结果

我们已经上传并开始了转录过程,因此,准备就绪后,我们将尽快获得结果。

返回结果所需的时间取决于文件的大小,因此下一个脚本将向HTTP发送一个HTTP请求,并报告转录状态,或者在完成后打印输出。

创建一个名为 get_transcription.py 的第三个Python文件,并将以下代码放入其中。

import argparse  
import os  
import requests  
API_URL = "https://api.assemblyai.com/v2/"  
def get_transcription(transcription_id):  """Requests the transcription from the API and returns the JSON  response."""  endpoint = "".join([API_URL, "transcript/{}".format(transcription_id)])  headers = {"authorization": os.getenv('ASSEMBLYAI_KEY')}  response = requests.get(endpoint, headersheaders=headers) return response.json() 
if __name__ == "__main__":  parser = argparse.ArgumentParser()  parser.add_argument("transcription_id")  args = parser.parse_args()  transcription_id = args.transcription_id  response_json = get_transcription(transcription_id)  if response_json['status'] == "completed":  for word in response_json['words']:  print(word['text'], end=" ")  else:  print("current status of transcription request: {}".format(  response_json['status'])) 

上面的代码与其他脚本具有相同的 imports 对象。在这个新的get_transcription函数中,我们只需使用我们的API密钥和上一步中的转录标识符(而不是文件标识符)调用AssemblyAI API。我们检索JSON响应并将其返回。

在main函数中,我们处理作为命令行参数传入的转录标识符,并将其传递给get_transcription函数。如果来自get_transcription函数的响应JSON包含completed状态,则我们将打印转录结果。否则,请在completed之前打印当前状态如queued或processing。

使用命令行和上一节中的转录标识符调用脚本:

python get_transcription.py TRANSCRIPTION_ID 

如果该服务尚未开始处理脚本,则它将返回queued,如下所示:

current status of transcription request: queued 

当服务当前正在处理音频文件时,它将返回processing:

current status of transcription request: processing 

该过程完成后,我们的脚本将返回转录文本,如您在此处看到的那样:

An object relational mapper is a code library that automates the transfer of   
data stored in relational, databases into objects that are more commonly used  
in application code or EMS are useful because they provide a high level   
...(output abbreviated) 

就是这样,我们已经转录完成了!

您可能想知道如果精度不适合您的情况该怎么办。这就是需要用到提高关键字或短语的准确性方法(https://docs.assemblyai.com/guides/boosting-accuracy-for-keywords-or-phrases)和选择与数据更匹配的模型方法(https://docs.assemblyai.com/guides/transcribing-with-a-different-acoustic-or-custom-language-model)的地方。您可以使用这两种方法中的任一种,将记录的准确性提高到适合您情况的水平。

下一步是什么?

我们刚刚完成了一些脚本,这些脚本调用AssemblyAI API来将带有语音的录音转录为文本输出。您可以查阅文档(https://docs.assemblyai.com/overview/getting-started)来增加一些更高级功能:

  •  支持不同的文件格式
  •  转录双通道/立体声录音
  •  获取扬声器标签(扬声器隔离) 

源码获取教程获取加群:1136192749

 

 


http://chatgpt.dhexx.cn/article/u8vGNeNc.shtml

相关文章

python批量转换音频格式,flac转mp3等

可以批量的将一种格式的音频文件转化成指定的格式&#xff0c; 如&#xff1a;mp3&#xff0c;wav , ogg ,flac 的格式之间可以相互转换&#xff0c; 转换后的文件名与原文件相同。 注意&#xff1a;运行代码除了需要安装库pydub之外&#xff0c;还需安装软件ffmpeg.exe&…

Python如何将仅包含音频内容的Mp4,提取并转换为Mp3

关于如何将Mp4转换为Mp3的文章很多&#xff0c;方案也都很有效。但是这其中的大部分方法&#xff0c;并不适用于该Mp4文件中仅包含音频内容的情况&#xff0c;比如&#xff1a;有人从YouTube&#xff0c;下载了仅包含音频内容的文件&#xff0c;这个文件其实还是Mp4格式的&…

PCM和WAV音频格式的区别,以及python自动转换

目录 WAV和PCM的简单介绍PCMWAV 关于音频的基础知识声道数channels采样位数bits采样频率sample_rate 进阶内容互相转换代码 WAV和PCM的简单介绍 PCM pcm&#xff1a;pulse code modulation&#xff0c;脉冲编码调制。将声音等模拟信号变成符号化的脉冲列&#xff0c;予以记录…

音频文件常用格式

目录 一、前言二、音频文件格式1、MP32、WAV3、WMA4、FLAC5、MIDI6、RA7、APE8、AAC9、CDA10、MOV 三、总结 一、前言 在复习备考《多媒体技术》时整理的多媒体技术音频文件的常用格式。本文完全足以应对《多媒体技术》中音频的相关考点后续还有一份多媒体技术相关的文档整理会…

Python处理音频文件的实用姿势

每天叫醒我的不是理想&#xff0c;是楼下广场舞的音乐。 音乐是人类的通用语言&#xff0c;不分国界不分种族。 抖音短视频爆火的关键因素之一&#xff0c;就是普通人也能便捷地使用BGM表达自我。 从感性角度看&#xff0c;音乐可以有很多种解释&#xff0c;如&#xff1a; …

用 Python 将音频内容转换为文本格式

当对一个或多个人的谈话进行记录时&#xff0c;采用一种高度准确和自动化的方式将口语提取为文本非常有用。转换成文字后&#xff0c;便可以将其用于进一步分析或用作其他功能。 在本教程中&#xff0c;我们将使用称为AssemblyAI&#xff08;https://www.assemblyai.com/&#…

Python:运用pydub模块转换音频格式、对音频进行剪辑

Python:运用pydub模块转换音频格式、对音频进行剪辑 近端时间看了一个短视频&#xff0c;觉得视频的背景音乐片段很不错&#xff0c;想把这个背景音乐得到&#xff0c;虽然小编运用Python爬虫肯定能得到这首音乐&#xff0c;但是这个音乐片段肯定是得不到的&#xff0c;于是网上…

python 音频格式转换

一、安装pydub库 WinR运行输入cmd进入控制台窗口&#xff0c;输入pip install pydub 回车进行安装 二、编写代码 1、在音频文件夹目录下新建文件Audio_Deal.py 2、用python自带的编辑器打开 3、输入下方代码&#xff08;把“安静的午后_高至豪.flac”格式转换为“安静的午后_高…

华为云从入门到实战 | 云速建站服务与企业主机安全服务

在网站成功开通后&#xff0c;需要为网站增加内容&#xff0c;例如商品信息、支付方式等&#xff0c;开启企业主机安全服务时&#xff0c;需为指定的主机分配一个配额&#xff0c;并确保已在所选区域购买了充足可用的配额。本节主要介绍企业主机安全服务的开启与配置相关过程&a…

【云速建站】多语言站点集合

【摘要】 本章介绍多语言插件的使用&#xff0c;包括新建语言站点、删除语言站点、编辑语言站点、设置默认语言等。更新了一键复制多语言站点。 本节介绍多语言站点的编辑维护 首先登录控制台&#xff0c;进入后台管理 1 新增多语言 1.1 新增多语言 进入站点编辑…

【云速建站】SSL证书自助部署

第一步 SSL证书申请 第二步 下载证书 第三步 获取证书内容 第四步 建站后台添加证书内容 第五步 DNS中添加一条精确cname解析 完成 第一步 SSL证书申请&#xff0c;确保域名的正确性&#xff0c;后面在绑定的时候要验证 第二步 下载证书&#xff0c;审核通过后就可以下载…

【ICP备案后如何进行域名解析(云速建站)】

ICP备案后如何进行域名解析&#xff08;云速建站&#xff09; 前提一、 华为云操作二、 其它平台添加解析记录三、 云速建站后台绑定域名 前提 已经顺利完成工信部ICP备案&#xff0c;若还没有备案&#xff0c;点击查看个人备案 进行备案操作&#xff08;华为云速建站&#xf…

【云速建站如何个人备案】

云速建站如何个人备案 一、 操作二、 注意事项 前提&#xff1a;已经进行了域名的注册&#xff1a; 如何进行域名的注册可以点击 域名注册 查看如何操作 一、 操作 登陆 华为云官网&#xff0c;点击右上角的备案&#xff0c;进入如下页面&#xff0c;点击登陆备案系统 进入…

【云速建站SSL证书的添加】

云速建站SSL证书的添加 前提一、下载证书二、 添加证书 前提 已经申请了SSL证书&#xff0c;若还没有申请&#xff0c;可以点击 SSL证书申请以及购买 进行操作 这里需要注意的是为什么需要申请SSL证书&#xff0c;如果没有SSL证书&#xff0c;则网站通过浏览器打开后&#xff…

【云速建站】如何实现多用户权限管理

【摘要】 通过本部分的操作&#xff0c;您可以设置不同权限的角色&#xff0c;并添加相应角色下的管理员。如日常运营过程中&#xff0c;有时会需要多个部门、多位管理人员协作操作&#xff0c;比如添加商品、处理订单等。使用角色与权限管理可以有效解决这个问题。 一、主用户…

【云速建站】后台数据批量导入导出

【摘要】 主要分享了云速建站后台管理的批量导入数据操作方法&#xff0c;如产品分类、产品、淘宝在售产品等的批量导入 1 产品分类的导入导出 1.1 进入后台管理 首先登录云速建站控制台&#xff0c;进入后台管理-产品-管理分类 当前分类无数据 1.2 导出分类模板 点击…

【云速建站】一键生成手机页

【摘要】在开始前&#xff0c;需要说明一点&#xff0c;PC站和手机站的编辑是分离的&#xff0c;即PC站的页面编辑后&#xff0c;不会自动同步到手机站&#xff0c;如果手机站也需要PC站相同的编辑效果&#xff0c;是需要给手机站进行同样的编辑设置才可以的。本文是以未购买PC…

【云速建站】会员注册弹窗添加及设置

【摘要】 会员注册插件包含的注册项设置、注册窗口样式设置以及会员控件添加&#xff0c;分别是在三个不同的地方维护&#xff0c;本文就是讲述这三部分分别是在哪里维护。 云速建站的会员设置包括前端页面添加会员登录控件、后端维护会员注册项及注册窗口样式。 我们先登录云…

【华为云速建站的购买流程】

华为云速建站的购买流程 建议一、 购买1.1 成本中心 二、 续费 建议 建议在进行云速建站前&#xff0c;先注册好心仪的域名&#xff0c;关于如何注册域名&#xff1a;域名注册 可跟着步骤进行操作 一、 购买 首先登录华为云官网&#xff0c;选择云速建站 进入网站建设专场后…

【云速建站】按照给定模板从0开始编辑网站页面

【摘要】 本文以一个示例网站为模板&#xff0c;用云速建站从0开始一步步编辑网站页面内容。 1 示例网站 这次已示例网站为模板&#xff0c;从零开始编辑建设网页 示例网站地址&#xff1a;http://security-456.view.websiteonline.cn/ 2 维护后台数据 登录云速…