COTOBA Talkとは

耳元にいつも仲間とAIがいる新感覚の現場コミュニケーションサービス

COTOBA Talkは、スマートフォン、PCを端末としてインターネットを介して映像付きのグループ通話ができるサービスです。
グループ通話の内容（⾳声とその⾳声を書き起こした⽂章、各作業者の位置情報（GPS）等）の記録は、COTOBA Talkのサーバに保存されます。この記録により業務負担の軽減、健康管理、作業⼿順や⼈員配置の最適化などの現場DXが⾏えます。
COTOBA Talkは、あたかも仲間とAIアシスタントが側にいるように現場の課題解決を支援します。

COTOBA Talkの特徴

• ・低遅延でグループ通話が円滑です！
• ・電話のように相手を呼び出せます！
• ・PCからも参加できます！
• ・資料共有もできます！
• ・話したこと、見たことが場所と時間をつけて記録できます！

超低遅延映像音声通信による遠隔操作

12月15日、共同研究の目標を具現化した実験として、COTOBA Talkを利用して遠隔地の東京および 台湾からエムスクエア・ラボの和泉市アグリセンター（大阪府和泉市下宮町74番地の2）にあるモバイルムーバーの遠隔操作を行い、この作業を仙台、静岡にて共同視聴する実験を行いました。

農作業に限らず、建設、流通、製造などの現場作業では、人と機械との作業が必要になります。
コトバデザインではこれを遠隔で可能にする共同作業プラットフォームの構築を目指しています。

ChatGPTエージェントによる業務支援

ChatGPTと既存のマニュアル等を活用することで、さまざまな業務知識を持ったエージェントを音声で利用できるようになります。

このように、COTOBA Talkは、あたかも仲間とAIアシスタントが側にいるように現場の課題解決を支援します。

自動運転車内案内
（AIコンダクター）

AIによる音声案内にて、自動運転車内でも安心安全の移動体験を提供

暗い夜間の走行でも、車外に手を出したり、マスクを外して（コロナ感染対策）乗車した場合、車内映像をもとにAIコンダクターが即座に注意アナウンス。
車内映像や乗客の音声を元にAIコンダクターが乗客と対話をはかることで無人ながらもおもてなし体験を実現。

レストラン案内

ストレス無く、ロボットと自然な対話を実現

ウェイクワードがなくても、ロボットが人の話しかけに応答。
また、画像認識により、ロボット自身が自分に対する話しかけか、人同士の会話かを判断。
従来のロボット音声認識では、無理にマイクに口元を近づけたり、話初めにウェイクワード言う必要がありましたが、音声と画像の組み合わせにより、この不自然さを解決。

顧客案内ロボット

市販ロボットでの活用の幅を広げる

対話プロトコル制御ソフトウェアを自律走行するパーソナルロボット『temi』※と組み合わせることで、顧客との会話はもちろん、自走し顧客を売り場までご案内。
また、複数台の協調動作が可能なため、複数フロアにまたがるご案内も可能。
※『temi』はhapi-robo.stが販売しているロボットです。

対話エージェント実行環境COTOBA Agentで対話制御されたtemiが、 店舗などを顧客案内する実写のデモムービー。