digi navi:デジナビ

このサイトは、携帯電話やタブレットなど、モバイル端末に関しての気になることなどをピックアップしています。ツイッターもやってますので、フォローはお気軽に。また、ケータイショップ様など、PRなどあれば投げ込み歓迎です。

インタラクティブ音声検索を開発(特許出願中)。ハンズフリーで料理が学べるスマホアプリ「FamCook」に機能追加

投稿: 2019.02.05 23:02

文: asami.


app AndroidiPhoneアプリ

家事/育児サポートアプリ開発のFam-Timeは、2019年1月31日に新たに開発したインタラクティブな音声検索機能を、ハンズフリーで料理が学べるスマホアプリ「FamCook」に追加した。本機能は、スマホに直接話しかけて「食材」「調理法」「料理名」など複数の単語を「入力」、また単語単位で「削除」を行いレシピ検索をすることができる。通常の音声認識では、音声入力の終わりを一定の無音で判断するため、一度に全ての言葉を話す必要があった。本機能は音声インターフェイス(VUI)デザインとして特許を出願している。

<新機能インタラクティブ音声検索(特許出願中)とは>
■機能の特徴

インタラクティブ音声検索機能の実行中は、何度でも音声でキーワード入力が可能。更に音声認識をするたびに、認識結果を画面で確認でき、画面インターフェース(GUI)や音声コマンドで一度入力したキーワードを削除できるようにした。これは、一定時間の静寂で終話を検知する従来手法とは異なり、特定の音声コマンドや、画面タッチを音声入力の終わりと定義し、都度音声認識モードになるようにした。このため、自分のペースで考えながら話す、インタラクティブな音声入力ができるようになった。

■音声インターフェース(VUI)への期待
音声UIは喋るだけでテキストが入力できる事から、キーボードやフリック入力より手軽であり、子供などが使うUIとしても期待されている。

■音声検索の課題
従来の音声検索では、一息で喋ることを前提として開発されていた。その為、レシピの検討など、悩みながらレシピの条件を都度喋るような利用シーンには適していなかった。これは、2、3秒でも言葉に詰まると音声入力は終了してしまうためだ。
しかし、日常の生活シーンでは、冷蔵庫の食材を見たり、食材の日持ちを考えたりしながらどんな料理を作るか考える。その為、最初から「にんじんを使ったスープ」と結論が出ているわけではない。

■利用イメージ
このように、日常の生活シーンで、考えながら「にんじん」、「玉ねぎ」、「スープ」などの単語を思いついたまま発言し、その発言に対してインタラクティブなフィードバックを返し、更に一度入力した単語も音声で削除できるなど、編集もできる新たな音声検索サービスを開発した。

■想定利用シーン
本音声検索機能は以下のような利用シーンを想定しております。
・冷蔵庫の食材を見ながらレシピを検討する
・思いついたメニューや料理ジャンルからレシピを検索する
・検索結果を見ながら、検索条件を変更してレシピを検索する

■主な音声コマンド
現在組み込まれている主な音声コマンドは、以下の3つ。これらの音声コマンドによって、一度入力した単語も入力後に削除できる為、間違いを恐れずに思いつくまま音声入力する事ができる。
・削除:一番最後に入力された単語を削除します。
・クリア:入力された全ての単語を削除します。
・停止:音声認識を停止します。

なお、単語の削除は、音声コマンド以外にも、画面の入力した単語横の「×」印をタップして削除することも可能。

■期待される効果
これによって、以下の効果が期待できる。

・音声認識の結果を画面で確認可能
 話した単語は、音声認識の結果として画面で確認する事ができます。意図しない認識結果になった事も画面で確認できる為、すぐに修正できます。
・マイペースで複数単語の音声入力が可能
 考え込んでしばらく時間が空いてしまっても音声認識が続く為、マイペースで音声入力ができます。
・食べたい料理や使いたい食材を思いついたまま喋って入力可能
 あとでいくらでも削除できますので、思いついた単語を喋る事ができます。
・ハンズフリーで入力可能
 音声入力なので、冷蔵庫の側にスマホを置き、両手で冷蔵庫の食材を確認しながら喋って入力ができます。

■FamCookに実装
本音声検索機能は、約3ヶ月間の社内検証を経て、自宅で家族と楽しく料理が学べるスマホアプリ「FamCook」の最新バージョン(バージョン2.3.0以降)に追加し、1月31日にリリースした。お手元のiPhoneやAndroidスマホで機能を使う事が可能。

アプリ内の音声検索アイコンをタップする事で、音声検索が始まる。

FamCookは、料理の「スタートアップ/スキルアップ」を支援する、ハンズフリーで操作できる料理教室アプリ。スマホ等の画面上のレシピを選び、音声ナビをスタートさせると、音声で料理の手順を案内する。「次」と話しかけると、次の手順に進み、自分のペースで料理を作ることができる。料理初心者がFamCookを利用することで、料理教室に通って学ぶように初心者でも料理の作り方を習得することができる。

■音声UIとして特許出願
なお、本音声検索機能は、レシピの検討だけでなく、様々な利用シーンでの活用が期待されます。本音声検索機能は音声UIデザインとして、特許出願しました。本機能をパートナーとして採用をご検討の方は、弊社までお問い合わせください。

■会社概要
会社名:株式会社Fam-Time
代表者: 代表取締役CEO 西村威彦(にしむらたけひこ)
所在地:川崎市高津区末長
連絡先: E-mail:contact@fam-time.com
事業内容:スマートフォンアプリ開発、ITを活用した家事、育児に関する支援サービス

app store:iPhone版 ダウンロード

Google Play:Android版 ダウンロード

記載している情報は投稿日時のものです。
ここに記載している商品・サービス料金、サービス内容・仕様、お問い合わせ先などを含む全ての情報は予告なく変更されることがありますので、あらかじめご了承ください。
また、各サービスやキャンペーンなどに関しては、適用条件や注意事項などある場合がありますので、各オフィシャルページなどをきちんと参照してください。


関連する記事

最新の記事

pinup

貯めて当てよう!貰おう!女子力もあがるポイントサービス「PICPO」

貯めて当てよう!貰おう!女子力もあがるポイントサービス「PICPO」

iPhone機種変更前にやることと格安SIMへ移行する方法【事前準備編】

iPhone機種変更前にやることと格安SIMへ移行する方法【事前準備編】

iPhone機種変更前にやることと格安SIMへ移行する方法【検討編】

iPhone機種変更前にやることと格安SIMへ移行する方法【検討編】

こどもの「やる気スイッチ」を入れちゃうアプリ4選

こどもの「やる気スイッチ」を入れちゃうアプリ4選

雨の日でもお家で楽しめるクイズアプリ5選

雨の日でもお家で楽しめるクイズアプリ5選

pinupを一覧表示する
炎
星空
富士山
日の出
紅梅と目白
氷柱の雫
ゆきだるま
ネオン
コスモス
content
  • iPhone
  • Android
  • Windows Mobile
  • 格安スマホ/格安SIM
  • ケータイ端末
  • LINE
  • ネットサービス
  • アプリ
  • ゲーム
  • 漫画/アニメ
  • 写真/カメラ
  • ガジェット
  • アクセサリー
  • スタンプ/ステッカー
  • アクティビティ
  • ヘルスケア
  • 地域活性化
  • 福祉/介護
  • 外部メモリ/記憶装置
  • イベント/キャンペーン
  • ケータイキャリア情報
  • ケータイショップ情報
  • キッズ/親子
  • 主婦目線
  • メーカー情報
  • 料金やプラン
  • 困った時(ガイド)
  • アップデート
  • データ関連
  • 無料壁紙