小白如何做一个Python人工智能语音助手

Posted 林-双喜

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了小白如何做一个Python人工智能语音助手相关的知识,希望对你有一定的参考价值。

真的是小白?

大家好,我是一名信息工程的大三学生,由于大一大二没怎么学习技术,所以大三准备挖粪图强。先介绍一下我的学习储备吧,断断续续学过Python,一直只是看B站,学习一些语法基础,数值类型,循环,函数…甚至连面向对象和面向过程都分不清
不过,这样的学习基础过程太枯燥了,我太没有耐心,三天打鱼两天晒网地,所以我决定,从项目直接开始入手,遇到问题再去恶补基础知识。虽然这样的效率可能有点低,甚至你可能都不知道遇到问题该学习什么知识。
但是自顶向下的项目驱动对我来说更加有动力去学习,如果这个项目我不去做完它,我可能都会睡不着觉,所以我觉得这是最适合我的学习方法,而且现在网络这么发达,真的想要解决一个问题还能办不到吗?

这是我花了大概2天实现的第一个项目
(基本上除了吃饭睡觉都在做,还肝到了3点多)

废话不说直接上图

语音助手视频看这里


人工智能语音助手主要功能分成下面5个部分:

1、录音

2、语音识别

(将录音内容进行语音识别转成文字)

3、接入图灵机器人

(将文字发送给机器人获得回复)

4、语音合成

(将回复的文字进行语音合成)

5、播放语音

应该很好理解吧,它的核心功能其实是需要一个聊天机器人,才能实现智能回复,这里我们用的是现有的图灵机器人,调用他的接口,不是自己做一个机器人(臣妾做不到)。
同样地,语音识别和语音合成技术也是调用现有的百度语音的接口,至于怎么实现那就太复杂了。

前期准备

· 首先肯定是python的安装和编译器
这个我就不讲了,网上教程特别多
我用的是Pycharm 2021.2.2(最新版本的,也是最近重新开始学习,卸了重装的)

· 其次你要学会第三方模块的安装,这个特别重要
Python很多项目都可以直接通过第三方模块,实现大部分功能
安装方法:
快捷键 Windows+R →输入‘cmd’确定→然后输入:pip install 你要安装的第三模块的名字→Enter(回车)
比如安装: pygame ,就敲入pip install pygame
我已经安装过了,要是还没安装会有下载进度(需要联网下载安装)
安装方法就是其实很多,大家可以自己搜索学习,这里举一个简单的例子


源代码

代码将会分成5个小模块和一个整合的代码,
都可以独立运行哦

1、录音

这里需要安装
pip install pyaudio
pip install SpeechRecognition

SpeechRecogintion 是 Python 的一个语音识别框架,
它可以检测语音中的停顿自动终止录音并保存,比 PyAudio 更人性化,很适合语音助手。

import speech_recognition as sr   #pyaudio SpeechRecognition模块

def rec(rate=16000):     #从系统麦克风拾取音频数据,采样率为 16000
    r = sr.Recognizer()
    with sr.Microphone(sample_rate=rate) as source:
        print("please say something")  #这里会打印please say something,提示你说话进行录音
        audio = r.listen(source)   

    with open("recording.wav", "wb") as f:   #把采集到的音频数据以 wav 格式保存在当前目录下的recording.wav 文件
        f.write(audio.get_wav_data())
    return 1

rec()  #运行rec函数,录制音频

2、语音识别 (将录音内容进行语音识别转成文字)

首先要去百度AI开放平台,创建API接口应用


记得不用购买,可以先去领取免费资源
这里的App_ID、Api_Key、Secret_Key代码都会用到

这里需要安装
pip install baidu-aip

from aip import AipSpeech

APP_ID = '25016634'
API_KEY = 'Qsj6XGf0m1ilsV0QwLTmHeiy'
SECRET_KEY = 'Mctl1jHY85Hr3wmTpizLI********'  #这三个输入你自己的接口账号密钥哈,我就不放了,有需要可以找我要

client = AipSpeech(APP_ID, API_KEY, SECRET_KEY)

def listen():
    with open('recording.wav', 'rb') as f:    #将录制好的音频文件recording.wav上传至百度语音的服务,返回识别后的文本结果并输出。
        audio_data = f.read()

    results = client.asr(audio_data, 'wav', 16000, {
        'dev_pid': 1537,                     #这里的results是一个字典,文本内容在Key名字为result对应的值,这里我恶补了一点字典的知识
    })
    if 'result' in results:
        print("you said: " + results['result'][0])    #results['result']这个是输出Key名字为result对应的值,也就是我们要的文本,至于后面[0]有什么用我还没搞明白,
        return results['result'][0]
    else:                                    
        print("出现错误,错误代码:" , results['err_no'])   #不存在result就返回错误代码err_no

listen()  #运行listen函数,将录音转成文字

语音识别放回的字典存放在results里面,是一个字典,包含了下面的内容,
result里面就是我们需要的文本了

我刚开始弄的时候一直报错 KeyErrory,我查了下是字典的Key不存在,也就是没有返回result
所以我加了一个判断,就是如果result不存在,就返回错误代码,我就可以去这个网站看出了什么错误了,当然你也可以直接返回err_msg错误信息(如果你英语很好),然后我发现返回的错误代码是:3305,就找到了对应的问题,重新申请一个或者等第二天再弄就可以了


3、接入图灵机器人(将文字发送给机器人获得回复)

首先要去图灵机器人创建一个机器人,这个认证比较麻烦,还要拍身份证啥的,人工认证需要1-2天
注册认证进入图灵机器人的控制台创建一个新的聊天机器人,记下分配到的 Apikey,后面代码要用到

这里需要安装
pip install requests

import requests
import json

TURING_KEY = "d4c739c4b5b7422ab15dc********"  #这里输入你的机器人Apikey
URL = "http://openapi.tuling123.com/openapi/api/v2"
HEADERS = {'Content-Type': 'application/json;charset=UTF-8'}

def robot(text=""):
    data = {
        "reqType": 0,
        "perception": {
            "inputText": {
                "text": ""
            },
            "selfInfo": {
                "location": {          #这里输入你的城市
                    "city": "广州",
                    "street": "大学城"
                }
            }
        },
        "userInfo": {
            "apiKey": 'd4c739c4b5b7422ab15dc********', #这里输入你的机器人Apikey
            "userId": "123"
        }
    }

    data["perception"]["inputText"]["text"] = text
    response = requests.request("post", URL, json=data, headers=HEADERS)
    response_dict = json.loads(response.text)

    result = response_dict["results"][0]["values"]["text"]    #把机器人回复的文字储存在result里
    print("the AI said: " + result)
    return result

robot("你好吗?")    #运行robot函数,与机器人聊天

4、语音合成 (将回复的文字进行语音合成)

这里用到的还是百度AI开放平台的 App_ID、Api_Key、Secret_Key

from aip import AipSpeech

APP_ID = '25016634'
API_KEY = 'Qsj6XGf0m1ilsV0QwLTmHeiy'
SECRET_KEY = 'Mctl1jHY85Hr3wmTpizLI********'

client = AipSpeech(APP_ID, API_KEY, SECRET_KEY)

def speak(text=""):
    result = client.synthesis(text, 'zh', 1, {    #这里的参数可以调   zh表示中文
        'spd': 4,   #语速
        'vol': 5,   #音量
        'per': 4,   #类型
    })

    if not isinstance(result, dict):
        with open('audio.mp3', 'wb') as f:   #保存为当前目录下mp3格式的音频:audio.mp3,不建议用wav格式,wav格式后面我用的是pagame播放无法识别
            f.write(result)
            f.close()

speak('你好啊!')   #运行speak函数,把机器人回复的文字转换成语音

机器人的语速、语调、音量、发声人都可以选择,更改对应参数数值就可以了


5、播放语音

用到的是pygame第三方库(一听就是做游戏的)
这里需要安装
pip install pagame

import pygame

def play():
    pygame.mixer.init() # 初始化混音器模块(pygame库的通用做法,每一个模块在使用时都要初始化pygame.init()为初始化所有的pygame模块,可以使用它也可以单初始化这一个模块)
    pygame.mixer.music.load("D:/C Language/Python/pythonProject/audio_assistant/audio.mp3")  # 加载音乐 ######大坑,注意这里需要使用绝对路径(就是不是默认当前路径,我恶补一下绝对路径和相对路径)
    pygame.mixer.music.set_volume(0.5)# 设置音量大小0~1的浮点数
    pygame.mixer.music.play() # 播放音频
    while pygame.mixer.music.get_busy():  # 在音频播放未完成之前不退出程序
        pass
    pygame.mixer.music.unload()  #停止加载音频
    
play()

这个看似是最简单的一个,不过却有一个大坑,我弄了好久才搞定。
如果你直接使用 audio.mp3 相对路径,
它在播放完audio.mp3之后,这个audio.mp3就在python里面打开里,我试了好多办法都没办法关闭,
所以它就只能播放一次,后面再播放就会报错,说文件被占用,所以大家记得用绝对路径
不然后面你跟语音助手对话就只能说一次了。



最终代码来了

import speech_recognition as sr
from aip import AipSpeech
import requests
import json

import pygame

#录音
def rec(rate=16000):
    r = sr.Recognizer()
    with sr.Microphone(sample_rate=rate) as source:
        print("please say something")
        audio = r.listen(source)

    with open("recording.wav", "wb") as f:
        f.write(audio.get_wav_data())

    return 1

#语音识别
APP_ID = '25016634'
API_KEY = 'Qsj6XGf0m1ilsV0QwLTmHeiy'
SECRET_KEY = 'Mctl1jHY85Hr3wmT***********'

client = AipSpeech(APP_ID, API_KEY, SECRET_KEY)
def listen():
    with open('recording.wav', 'rb') as f:
        audio_data = f.read()

    results = client.asr(audio_data, 'wav', 16000, {
        'dev_pid': 1537,
    })
    if 'result' in results:
        print("you said: " + results['result'][0])
        return results['result'][0]
    else:
        print("出现错误,错误代码:" , results['err_no'])

#调用图灵机器人
TURING_KEY = "1dde879fa943438e9*********"
URL = "http://openapi.tuling123.com/openapi/api/v2"
HEADERS = {'Content-Type': 'application/json;charset=UTF-8'}
def robot(text=""):
    data = {
        "reqType": 0,
        "perception": {
            "inputText": {
                "text": ""
            },
            "selfInfo": {
                "location": {
                    "city": "广州",
                    "street": "大学城"
                }
            }
        },
        "userInfo": {
            "apiKey": '1dde879fa943438e9**********',
            "userId": "123"
        }
    }

    data["perception"]["inputText"]["text"] = text
    response = requests.request("post", URL, json=data, headers=HEADERS)
    response_dict = json.loads(response.text)

    result = response_dict["results"][0]["values"]["text"]
    print("the AI said: " + result)
    return result

#语音合成
def speak(text=""):
    result = client.synthesis(text, 'zh', 1, {
        'spd': 4,
        'vol': 5,
        'per': 4,
    })

    if not isinstance(result, dict):
        with open('audio.mp3', 'wb') as f:
            f.write(result)

#播放音频
def play():
    pygame.mixer.init() 
    pygame.mixer.music.load("D:/C Language/Python/pythonProject/audio_assistant/audio.mp3")  
    pygame.mixer.music.set_volume(0.5)
    pygame.mixer.music.play() 
    while pygame.mixer.music.get_busy():
        pass
    pygame.mixer.music.unload()

if __name__ == "__main__":
    while True:
        rec()  # 保存录音文件:recording.wav
        text = listen()  # 自动打开录音文件recording.wav进行识别,返回 识别的文字存到text
        if '结束程序' in text:  #这里我设置了一个结束语,说“结束程序”的时候就结束,你也可以改掉
            break
        text_1 = robot(text)  # 将text中的文字发送给机器人,返回机器人的回复存到text_1
        speak(text_1)  # 将text_1中机器人的回复用语音输出,保存为audio.mp3文件
        play() #播放audio.mp3文件

主要就是后面主函数那段代码啦,设置了一个循环可以无限对话下去,还设置了一个“结束程序”

那么我的第一个项目Python智能语音助手就告一段落了!
后面我想学一学树莓派,把这个弄到树莓派里面,再加上一个智能唤醒的功能,做一个独立的 树莓派智能语音助手
你们有什么好的简单项目也可以推荐给我呀!大家一起做,互相请教总比一个人做效率高。

以上是关于小白如何做一个Python人工智能语音助手的主要内容,如果未能解决你的问题,请参考以下文章

爆肝一周,用Python在物联网设备上写了个智能语音助手-创建阿里云账号

爆肝一周,用Python在物联网设备上写了个智能语音助手-阿里云智能对话机器人

用 80 行 Javascript 代码构建自己的语音助手

爆肝一周,用Python在物联网设备上写了个智能语音助手

如何快速搭建一个像“天猫精灵”的智能语音助手?

如何快速搭建一个像“天猫精灵”的智能语音助手?