Skip to content

MiyabiTane/Deco_with_robot

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

ロボットと部屋の飾り付けをする

デモ

MiyabiTane/jsk_pr2eusのdeco_with_robotブランチ

飾り付け思考部分

pix2pixディレクトリ参照

眉毛デバイス

詳細は以下2つのリポジトリ
Dialogflowを用いてテキストから13種の表情を割り当てる▷facial_expression/text_to_expression
Webページで眉毛を作る▷facial_expression/web_nodejs

試し方

ノートPC内で全て試せる簡単な試し方。

  1. dialogflow_task_executiveをビルドしていなければビルドする
$ mkdir -p eyebrows_ws/src
$ cd eyebrows_ws/src
$ git pull https://github.com/jsk-ros-pkg/jsk_3rdparty.git
$ cd ../
$ catkin b dialogflow_task_executive
$ source ~/eyebrows_ws/devel/setup.bash
  1. dialogflowのjsonファイルをダウンロードし、<json_path>の場所に置く。それぞれのコマンドを別ターミナルで実行する
$ cd facial_expression/text_to_expression
$ python dialogflow_run.py --json-path <json_path> --no-sample
# 送信した内容をロボットに喋らせたい場合は
# $ python dialogflow_run.py --json-path <json_path> --no-sample --with-speak
$ cd facial_expression/web_nodejs/ver_13types
$ python run.py --no-roscore
  1. 2つのWebページにアクセスする▷ http://localhost:3000/lbrow, http://localhost:3000/rbrow

  2. 以下のスクリプトを実行すると13種類の表情を1例ずつ試すことができる

$ cd facial_expression/text_to_expression
$ python demo_sample_publisher.py

対話部分

Chaplusの雑談APIを使用。

使い方

  1. 公式ページにメールアドレスを登録してAPI Keyを入手する。

  2. chaplus_rosリポジトリをcloneした後、apikey.jsonの値を入手したものに書き換える。

{"apikey": "0123456789"}
  1. launchファイル内に以下を記述する。
  <!-- add ChaPlus -->
  <arg name="chatbot_engine" default="Chaplus" />
  <node pkg="chaplus_ros" type="chaplus_ros_custom.py" name="chaplus_ros"
        output="screen" >
    <rosparam subst_value="true">
      chatbot_engine: $(arg chatbot_engine)
    </rosparam>
  </node>

/requestをSubscribeして/responseをPubrishする。型はどちらもstd_msgs/String

  1. エージェントのタイプや、特定の質問に対する返答を指定したい場合など、APIをカスタマイズしたい場合はcustom.jsonを書き換える。詳細と書き換え方は雑談応答API公式ページの一番下に載っているサンプルコードを参考にする。