投稿者: nagolabMH

Windows上でのNode.jsの環境設定ができたので、実際にNode.jsでJavaScriptを使ってプログラムを作成し、ローカル環境で動くか試してみましょう。

１)中継サーバーの作成

①プログラムを記述します。プログラムは、Google_APIのフォルダ内にあるroutesに「Translate.js」というファイル名で保存してください。

＊プロジェクトIDにはGoogle Cloud PlatformのプロジェクトIDを記述します。

＊サービスキーにはGoogle Cloud Platformで作成したサービスキーのファイル名を記述します。

[Translate.js]

③Google_API直下にあるapp.jsの修正を行います。Translate.jsのプログラムを呼び出す処理を記述します。

下記の図の「追加」部分を2か所、記述してください。

これで、中継サーバーの作成が完了です。(翻訳用)

 

２)Pythonを使ってローカル環境での中継サーバーの稼働確認

確認用のPythonのプログラムを作成します。

プログラム内でアクセスするurlは今回開発した中継サーバーのurlを指定します。

[Translate_GoogleviaN.py]

確認用プログラムが作成できたら、稼働確認を行います。

 

中継サーバーを起動します。

npm start

 

Pythonのプログラムを実行します。

Pythonプログラムの実行は、Python IDLEでプログラムを開き、実行するか、新しくPython実行用にコマンドプロンプトを起動し、コマンドで実行してください。

「Hello」と結果が返ってくれば成功です。

IDLEからの実行

 

中継サーバーのコマンドプロンプトの画面でも同様に実行結果を確認することができます。

 

これで、中継サーバーの作成/開発は終了です。

 

前の投稿/次の投稿/メニューページへ戻る

翻訳機能「Translate_googleviaN.py」をBrainAction.pyへ組み込みを行います。

組み込み処理は下記のプログラムを修正します。修正を行う前にバックアップをデスクトップに保存しておいてください。

1.NagoRobo_Main.py

2.BrainAction.py

【NagoRobo_Main.pyの修正】

中継サーバーのURLを入力する変数を用意し、中継サーバーのurlをセットします。「Herokuで取得したurl+/Tlanslate」を赤線部分に入力します。

[NagoRobo_Main.py]

【BrainAction.pyの修正】

BrainAction.pyへ組み込み処理を行います。

インポートを追加します。下記の「ここから–ここまで」の部分を追記します。NagoRobo_Main.pyからurlを受け取る処理です。

[BrainAction.py]

Action_2ndの「ここから–ここまで」の処理を修正します。Translate_Google.pyとTranslate_GoogleviaN.pyのプログラムは関数名が同じですのでTranslate_Google.pyはコメントアウトしてます。また、Translate_GoogleviaN.pyの関数には引数としてGoogle_urlをセットするようにします。

これでプログラムの修正は完了しました。

【Dailogflowに翻訳のIntentsを作成する】

DailogflowのIntentsの設定まで完了したらプログラムを実行し、確認してみましょう。

①NagoRobo_Main.pyを実行します。

②Raspberry Piに「翻訳」と話しかけます。

③「翻訳します。」と返ってきたら、翻訳したい言葉を伝えます。

④英訳されて返ってくればOKです。

 

前の投稿/次の投稿/メニューページへ戻る

[docomo API 雑談機能をBrainAction.pyへの組み込む]

今回はより雑談のバリエーションを増やす為にdocomo APIの雑談機能をBrainAction.pyへ組み込んで行きます。Dailogflowに設定がない時にdocomo API の雑談機能を使って返答が返ってくるようにしましょう。

①BrainAction.pyのプログラムにGConversation_docomo.pyのプログラムを組み込みます。BrainAction.pyを開いてください。

※BrainAction.pyを開く前にバックアップとして、コピーをラズベリーパイのデスクトップ上に保存しておきましょう。

[BrainAction.py]

②インポートの追加。赤線部分の記述を追加してください。

③docomo API で返答後にflgを初期化する処理「ここから—ここまで」の記述を追加

④マッチングスコアのチェックを行うプログラムを修正する(「ここから—-ここまで」の部分が修正後の内容です。)

マッチングスコアが0.8未満だとdocomo APIの雑談プログラムを呼び出すようにしました。また、呼び出し後に処理を抜け③にてflgの初期化を行います。

⑤修正が完了したらプログラムを実行して確認してみましょう。

sudo python3 NagoRobo_Main.py

Dialogflowで未設定のフレーズで問いかけてみてください。

 

前の投稿/次の投稿/メニューページへ戻る

今回は、Dialogflowを使って雑談機能を充実させます。。5.4.1でdocomo のAPIを使って雑談するプログラムを作成しましたが、最終的にはDialogflowとdcomo APIのプログラムを使ってより多くの雑談ができるようにしていきます。

[Dialogflowの設定]

下記の表は新たに追加する雑談用のIntentsです。

※下記はPROMPTS、PARAMETER NAME、ENTITIESの設定がないので省いています。

 

[Intentの追加]

Intentの追加をFeeling_Angerを例に作成していきます。

①Training phrasesに怒りを表すフレーズを設定します。

②Responsesには怒りのフレーズに対する返答を入力します。

③Try it nowにて怒りのフレーズに設定したResponsesが返ってくるかテストしてみてください。返ってくれば設定完了です。

同じ要領で残りのIntentsも設定していきます。

※IntentsのAction_Timeを作成する前にTimeというEntitiyを追加してください。

TimeのEntitiyの追加を行ったらAction_Timeのを作成していきます。〇の部分にアクションを判断するワードと、□にPARAMETER NAMEを設定します。

Responsesは下記の通りに設定してください。

③Dialogflowの設定が終了したら、NagoRobo_Main.pyを実行し、新たに追加したIntentsの内容に沿って返答が返ってくるか確認してみましょう。

 

前の投稿/次の投稿/メニューページへ戻る

前章（5.4.1）にて自然対話：雑談機能のAPIの追加と雑談プログラムを作成しました。今回は新にdocomo Developer supportから自然対話：知識検索のAPI機能を追加し、質問すると回答が返ってくるプログラムを作成します。

①自然対話：知識検索

API機能の追加方法は前章（5.4.1）と同じですので、今回は省きます。前章を確認しながら行ってみてください。

[知識検索を利用したプログラムの作成]

①仮想環境を起動します。

②プログラムを記述します。[QA_docomo.py]

③プログラムに前章で取得したappIdとAPIキーを入力してください。

④プログラムを実行します。

sudo python3 QA_docomo.py

⑤プログラム上で「大化の改心はいつ？」という質問しています。プログラムを実行すると問いに対する答えが返ってきます。

[BrainAction.pyへの組み込み]

今回は作成したプログラムを「ロボットの頭脳を作る」で作成した「BrainAction.py」のプログラムに組み込む所まで行ってみましょう。

①まずは、Dialogflowの設定を行います。下記の図のようにIntents名「Action_Question」を作成します。

赤丸部分の3点を同じように入力して作成してください。今回はEntitiesの作成は必要ありません。

・Training phrases 「質問します。」

・Action and parameters 「question」

・Responses 「質問してください。」

②次にBrainAction.pyのプログラムにQA_docomo.pyのプログラムを組み込みます。

※プログラムを修正する前にBrainAction.pyのバックアップをラズベリーパイのデスクトップにコピーし貼り付けしておいてください。

[BrainAction.py]

③まずは、BrainAction.pyのプログラムにQA_docomo.pyのプログラムをインポートする処理を記述します。 

④次に「ここから–ここまで」の目印の部分を追記します。ここではDailogflowからactionが受け取れているかチェックを行います。

⑤Action_2ndの「ここから–ここまで」の部分にQA_docomo.pyの関数を呼び出し、音声を発声させる処理を追記します。

⑥NagoRobo_Main.pyのプログラムを実行します。

※「質問します。」に「質問してください。」と返答があれば「大化の改心はいつ」と質問してみてください。返答が返ってこれば完成です。

前の投稿/次の投稿/メニューページへ戻る

5.2.4.1の章にて音声認識のAPIの申請を行いました。今回は新たな機能のAPI申請を行います。

①自然対話：雑談対話

1. docomo Developer supportのマイページへログインしてください。https://dev.smt.docomo.ne.jp/　　　　　　　　　　　　　　　　　　　　　　　　　　
2. 登録アプリケーションAPI一覧へをクリック                                                                                                                  　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　
3. API利用申請：管理のページへ遷移しますので、アプリケーション名をクリックしてください。                                                                                                                                       　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　
4. 申請状況のページへ遷移しますので、API機能を追加申請するをクリックします。　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　
5. API機能を追加申請するをクリックするとAPI利用申請：追加利用申請の画面へ遷移します。次にAPI機能選択へをクリックしてくだい。　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　
6. 必要な機能にチェックを入れ、利用するAPIの利用規約に同意して、次へをクリックします。確認画面が表示されますので申請を行います。　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　
7. 申請が完了するマイページの詳しくはこちらから確認する事ができます。　　　　　　

以上で、APIキーの追加利用申請は完了しました。実際にAPIキーを利用してラズベリーパイ上で雑談機能のプログラムが動くか確認してみましょう。

①仮想環境を起動します。

②自然対話は利用するためのユーザー情報を登録するためのエンドポイントが必要です。下記のプログラムを実行し、appIdを取得してください。

[GetMyappId.py]

プログラムを実行するとappIdが返ってきます。赤い下線部に記載されてますのでappIdを保管するようにお願いします。

③appIdを取得したら、自然対話：雑談対話のプログラムを作成します。

[GConversation_docomo.py]

④プログラムに取得したappIdと申請したAPIキーを入力してください。

⑤プログラムを実行します。

sudo python3 GConversation_docomo.py

返答が返ってくることを確認しましょう。

 

次の投稿/メニューページへ戻る

1)Docomoの音声認識ＡＰＩを利用して、録音した音声を文字データに変換するプログラムを作成します。

①録音した音声データ「voice.wav」も合わせて用意します(前章で何か録音したデータをそのまま利用します。)。

②プログラムを記述します。[VoiceToText_docomo.py]

③赤枠の空欄には前章で申請したAPIキーを入力してください。

④プログラムを実行します。

sudo python3 VoiceToText_docomo.py

※文字化したデータが表示されます。

 

前の投稿/次の投稿/メニューページへ戻る

1）docomo Developer supportにて音声認識APIの申請を行う。

Docomoの音声認識ＡＰＩの申請を行う手順を説明します。下記のＵＲＬへアクセスしてください。ＡＰＩキーの申請をするにはまずは、アカウント登録が必要となります。

https://dev.smt.docomo.ne.jp/

[アカウント登録]

1. APIを使いたいをクリックし、ＡＰＩの一覧から音声認識をクリックします。
2. アカウント登録（無料）をクリックします。
3. メールアドレスで新規登録を行います。
4. メールアドレスとパスワードを設定し、登録を行います。
5. 登録をクリックすると登録したメールアドレスに仮登録のメールが届きます。メールに記載されているＵＲＬをクリックすると登録完了となります。赤枠の所にＵＲＬが記載されています。
6. ＵＲＬをクリックすると登録完了のページに飛びますので、マイページへをクリックしてください。

[ＡＰＩキーの申請]

アカウント登録が完了するとＡＰＩキーの申請ができるようになります。

1. マイページから新規ＡＰＩ利用申請をクリックします。クリックするとアプリケーション登録の画面へ遷移します。　　　　　　　
2. 必要事項を入力し、ＡＰＩ機能選択をクリックします。
3. 機能選択から「音声機能【Powered by アドバンスト・メディア】」にチェックを入れ、「利用するＡＰＩの利用規約に同意して、次へ」をクリックします。
4. クリックすると、確認画面へ遷移しますので、内容を確認し、申請してください。
5. ＡＰＩキーはマイページの「詳しくはこちら」をクリックすると確認する事ができます。

以上で、ＡＰＩキーの申請は完了しました。

前の投稿/次の投稿/メニューページへ戻る