JP6995273B1 - 業務支援方法、システム及びプログラム - Google Patents

業務支援方法、システム及びプログラム Download PDF

Info

Publication number
JP6995273B1
JP6995273B1 JP2021020158A JP2021020158A JP6995273B1 JP 6995273 B1 JP6995273 B1 JP 6995273B1 JP 2021020158 A JP2021020158 A JP 2021020158A JP 2021020158 A JP2021020158 A JP 2021020158A JP 6995273 B1 JP6995273 B1 JP 6995273B1
Authority
JP
Japan
Prior art keywords
wake word
information
target
voice
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021020158A
Other languages
English (en)
Other versions
JP2022122726A (ja
Inventor
崇 結城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Exa Wizards Inc
Original Assignee
Exa Wizards Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Exa Wizards Inc filed Critical Exa Wizards Inc
Priority to JP2021020158A priority Critical patent/JP6995273B1/ja
Priority to JP2021092188A priority patent/JP2022122808A/ja
Priority to JP2021092216A priority patent/JP6995275B1/ja
Application granted granted Critical
Publication of JP6995273B1 publication Critical patent/JP6995273B1/ja
Publication of JP2022122726A publication Critical patent/JP2022122726A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

【課題】 音声により複数種類の処理を実行可能とする。【解決手段】一実施形態にかかる業務支援方法は、ユーザが発話した音声の音声情報を取得する取得処理と、前記音声情報からウェイクワードを検出するウェイクワード検出処理と、前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、前記テキスト情報に基づいて対象を特定する対象特定処理と、前記ウェイクワードの種類及び前記対象に応じた処理を実行するウェイクワード処理と、を含む。【選択図】図11

Description

本発明は、業務支援方法、システム及びプログラムに関する。
従来、音声を利用して業務を支援するシステムが知られている。このようなシステムとして、介護者が発する被介護者の介護業務に係る音声データを取得する音声取得手段と、前記音声取得手段によって取得した前記音声データを認識し、テキストデータに変換する音声認識・テキスト変換手段と、前記音声認識・テキスト変換手段によって前記音声データから変換されたテキストデータに基づいて介護記録を作成する介護記録作成手段と、前記介護記録作成手段によって作成された前記介護記録を表示して介護者による確認を可能とする表示手段と、前記表示手段に表示された前記介護記録の、介護者による必要に応じた修正を可能とする修正手段と、介護者による確認と必要に応じた修正とが完了した状態の前記介護記録を最終的に確定させる確定手段と、前記音声データと、前記音声データから変換されたテキストデータと、前記確定手段によって確定された前記介護記録に最終的に採用されたテキストデータと、に基づいて、前記音声認識・テキスト変換手段におけるテキスト変換機能の学習を行う音声データ学習手段と、を備えることを特徴とする介護記録作成支援システムが提案されている。
特開2020-140620号公報
上記従来のシステムは、介護記録の作成しかできないため、業務を十分に支援できるとは言い難い。
本発明は、上記の課題を鑑みてなされたものであり、音声により複数種類の処理を実行可能とすることを目的とする。
一実施形態にかかる業務支援方法は、ユーザが発話した音声の音声情報を取得する取得処理と、前記音声情報からウェイクワードを検出するウェイクワード検出処理と、前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、前記テキスト情報に基づいて対象を特定する対象特定処理と、前記ウェイクワードの種類及び前記対象に応じた処理を実行するウェイクワード処理と、を含む。
一実施形態によれば、音声により複数種類の処理を実行可能とすることができる。
介護業務支援システムの構成の一例を示す図である。 情報処理装置のハードウェア構成の一例を示す図である。 ユーザ端末の機能構成の一例を示す図である。 ユーザ端末の処理の一例を示すフローチャートである。 介護業務支援装置の機能構成の一例を示す図である。 受信情報の一例を示す図である。 対象情報の一例を示す図である。 対象情報の一例を示す図である。 対象情報の一例を示す図である。 代替語情報の一例を示す図である。 介護業務支援装置の処理の一例を示すフローチャートである。 介護記録の作成方法の一例を示すフローチャートである。 介護記録の通知方法の一例を示すフローチャートである。
以下、本発明の各実施形態について、添付の図面を参照しながら説明する。なお、各実施形態に係る明細書及び図面の記載に関して、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省略する。
<システム構成>
まず、本実施形態に係る業務支援システム(以下「支援システム」という。)の概要について説明する。本実施形態に係る業務支援システムは、作業を実施する作業者の業務を支援する情報処理システムである。作業者の業務は、作業自体だけでなく、実施した作業の記録や関係者とのメッセージのやり取りなどの、作業の周辺業務を含む。支援システムは、主としてこの周辺業務を支援する。
具体的には、支援システムは、作業者が発話した音声の音声情報を取得し、取得した音声情報からウェイクワードを検出し、検出したウェイクワードに応じた処理(以下「ウェイクワード処理」という。)を実行する。支援システムは、ウェイクワード処理として、例えば、作業者が実施した作業の記録の作成、作業者への記録の通知、作業者から他者へのメッセージの送信、被作業者に関する申し送り事項の登録などを行う。これにより、作業者は、ウェイクワードを含む音声を発話するだけで、各種の業務を実施することができる。
以下では、支援システムが介護業務を支援する介護業務支援システムである場合を例に説明するが、本実施形態に係る支援システムは、任意の業種で利用可能である。
図1は、本実施形態に係る支援システムの構成の一例を示す図である。図1の支援システムは、ネットワークNを介して相互に通信可能に接続された、インカム(インターカム)1と、ユーザ端末2と、介護業務支援装置3(以下「支援装置3」という。)と、介護システム4と、を備える。ネットワークNは、例えば、有線LAN(Local Area Network)、無線LAN、インターネット、公衆回線網、モバイルデータ通信網、又はこれらの組み合わせである。図1の例では、支援システムは、インカム1、ユーザ端末2、支援装置3、及び介護システム4をそれぞれ1つずつ備えるが、それぞれ複数備えてもよい。
インカム1は、ユーザが発話した音声の音声情報を取得する情報処理装置である。インカム1は、例えば、インカムであるが、これに限られない。インカム1は、ユーザ端末2と通信可能であり、かつ、マイク及びスピーカを備えた、任意の装置であり得る。
ユーザは、インカム1を装着して利用する任意の作業者であり、例えば、介護施設の従業者である介護者であるが、これに限られない。ユーザは、インカム1を装着した状態で介護業務を実施する。インカム1を装着したユーザが発話すると、インカム1は、ユーザが発話した音声をマイクで集音し、集音した音声の音声情報を取得し、取得した音声情報をユーザ端末2に送信する。
ユーザ端末2は、ユーザが発話した音声の音声情報からウェイクワードを検出する情報処理装置である。ユーザ端末2は、例えば、PC(Personal Computer)、スマートフォン、タブレット端末、又はスマートスピーカであるが、これに限られない。ユーザ端末2は、ユーザに携帯されてもよいし、介護施設に設置されてもよい。以下、ユーザ端末2は、ユーザが携帯するスマートフォンである場合を例に説明する。
ユーザ端末2は、インカム1から音声情報を受信し、音声情報からウェイクワードを検出する。ウェイクワードは、以降の処理を開始させるために予め設定された音声コマンドである。本実施形態において、支援システムには、4種類のウェイクワードが設定される。以下、各ウェイクワードをそれぞれ第1ウェイクワード、第2ウェイクワード、第3ウェイクワード、及び第4ウェイクワードと称する。第1ウェイクワードは「完了」、第2ウェイクワードは「確認」、第3ウェイクワードは「送信」、及び第4ウェイクワードは「申し送り」であるものとする。ユーザ端末2は、いずれかのウェイクワードを検出すると、音声情報をテキスト情報に変換し、得られたテキスト情報等の情報を、支援装置3に送信する。なお、支援システムに設定されるウェイクワード及びウェイクワードの種類は、任意である。
支援装置3は、ユーザが発話したウェイクワード処理を実行する情報処理装置である。支援装置3は、例えば、PC、スマートフォン、タブレット端末、サーバ、又はこれらの組み合わせであるが、これに限られない。
支援装置3は、ユーザ端末2からテキスト情報等を受信し、受信したテキスト情報に基づいて対象を特定し、特定した対象及びテキスト情報に対応するウェイクワード処理を実行する。また、支援装置3は、介護システム4と連携し、介護システム4への介護記録の登録や介護システム4からの介護記録の取得を実行する。支援装置3について、詳しくは後述する。
介護システム4は、介護施設における介護業務を管理するシステムである。介護システム4は、例えば、PC、スマートフォン、タブレット端末、サーバ、又はこれらの組み合わせであるが、これに限られない。介護システム4は、例えば、介護施設の利用者及び従業者に関する情報の管理、介護報酬の請求、介護記録の保存、介護業務の管理、介護施設の従業者の出退勤管理、ケアプランの管理などの機能を備える。
なお、介護業務支援システムの構成は、上記の例に限られない。例えば、ユーザ端末2は、インカム1として機能してもよい。また、介護業務支援装置3は、介護システム4に組み込まれてもよい。
<ハードウェア構成>
次に、情報処理装置のハードウェア構成について説明する。図2は、情報処理装置100のハードウェア構成の一例を示す図である。図2に示すように、情報処理装置100は、バスBを介して相互に接続された、プロセッサ101と、メモリ102と、ストレージ103と、通信I/F104と、入出力I/F105と、入力装置106と、出力装置107と、ドライブ装置108と、を備える。
プロセッサ101は、ストレージ103に記憶されたプログラムをメモリ102に展開して実行することにより、情報処理装置100の各構成を制御し、情報処理装置100の機能を実現する。プロセッサ101がプログラムを実行することにより、情報処理装置100の機能が実現される。プロセッサ101は、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、GPU(Graphics Processing Unit)、ASIC(Application Specific Integrated Circuit)、DSP(Digital Signal Processor)、又はこれらの組み合わせである。
メモリ102は、例えば、ROM(Read Only Memory)、RAM(Random Access Memory)、又はこれらの組み合わせである。ROMは、例えば、PROM(Programmable ROM)、EPROM(Erasable Programmable ROM)、EEPROM(Electrically Erasable Programmable ROM)、又はこれらの組み合わせである。RAMは、例えば、DRAM(Dynamic RAM)、SRAM(Static RAM)、MRAM(Magnetoresistive RAM)、又はこれらの組み合わせである。
ストレージ103は、OS等のプログラム及び各種のデータを記憶する。ストレージ103は、例えば、フラッシュメモリ、HDD(Hard Disk Drive)、SSD(Solid State Drive)、SCM(Storage Class Memories)、又はこれらの組み合わせである。
通信I/F104は、情報処理装置100を、ネットワークNを介して、外部装置に接続し、通信を制御するためのインタフェースである。通信I/F104は、例えば、Bluetooth(登録商標)、Wi-Fi(登録商標)、ZigBee(登録商標)、Ethernet(登録商標)、又は光通信(例えば、Fibre Channel)に準拠したアダプタであるが、これに限られない。
入出力I/F105は、情報処理装置100に入力装置106及び出力装置107を接続するためのインタフェースである。
入力装置106は、ユーザUの操作を受け付け、受け付けた操作に応じた情報を情報処理装置100に入力するための装置である。入力装置106は、例えば、マウス、キーボード、タッチパネル、マイク、スキャナ、カメラ、各種センサ、操作ボタン、又はこれらの組み合わせである。
出力装置107は、情報処理装置100が保持した各種の情報を出力する装置である。出力装置107は、例えば、ディスプレイ、プロジェクタ、プリンタ、スピーカ、バイブレータ、又はこれらの組み合わせである。
ドライブ装置108は、ディスクメディア109のデータを読み書きする。ドライブ装置108は、例えば、磁気ディスクドライブ、光学ディスクドライブ、光磁気ディスクドライブ、又はこれらの組み合わせである。
ディスクメディア109は、情報を記録したディスク状の記録媒体である。ディスクメディア109は、例えば、CD(Compact Disc)、DVD(Digital Versatile Disc)、FD(Floppy Disk)、MO(Magneto-Optical disk)、BD(Blu-ray(登録商標) Disc)、又はこれらの組み合わせである。
なお、情報処理装置100のハードウェア構成は、上記の例に限られない。情報処理装置100は、上記のハードウェア機能構成の一部を備えてもよいし、上記以外のハードウェア構成を備えてもよい。
また、各種のプログラムは、情報処理装置100の製造段階でメモリ102又はストレージ103に書き込まれてもよいし、ネットワークNを介して情報処理装置100に提供されてもよいし、ディスクメディア109などの非一時的でコンピュータ読み取り可能な記録媒体を介して情報処理装置100に提供されてもよい。
<ユーザ端末2の機能構成>
次に、ユーザ端末2の機能構成について説明する。図3は、ユーザ端末2の機能構成の一例を示す図である。図3に示すように、ユーザ端末2は、通信部21と、記憶部22と、制御部23と、を備える。
通信部21は、通信I/Fにより実現される。通信部21は、ネットワークNを介して、インカム1及び支援装置3との間で情報の送受信を行う。具体的には、通信部21は、インカム1から音声情報を受信し、支援装置3にテキスト情報等を送信する。
記憶部22は、メモリ102及びストレージ103により実現される。記憶部22は、音声情報221と、テキスト情報222と、を記憶する。
音声情報221は、インカム1から受信したユーザの音声情報である。音声情報221は、インカム1からの受信時刻と対応づけて記憶される。音声情報221は、所定の第1期間だけ記憶される。第1期間は、後述する第2期間より長い期間である。
テキスト情報222は、音声情報221を変換して得られたテキスト情報である。テキスト情報222は、変換元の音声情報221と対応づけて記憶される。
制御部23は、プロセッサ101がメモリ102からプログラムを読み出して実行し、他のハードウェア構成と協働することにより実現される。制御部23は、取得部231と、ウェイクワード検出部232と、テキスト化部233と、を備える。
取得部231は、インカム1から音声情報221を取得し、取得した音声情報221を受信時刻と対応づけて記憶部22に保存する。
ウェイクワード検出部232は、音声情報221からウェイクワードを検出する。ウェイクワード検出部232は、例えば、ウェイクワードを発話した音声の時間領域又は周波数領域の音声情報を機械学習した検出モデルを利用して、ウェイクワードを検出する。検出モデルは、例えば、DNN(Deep Neural Network)やCNN(Convolutional Neural Network)などのニューラルネットワーク、SVM(Support Vector Machine)、GMM(Gaussian Mixture Model)、又はこれらの組み合わせであるが、これに限られない。
ウェイクワード検出部232は、各ウェイクワードに対応する4つの検出モデルを利用して4つのウェイクワードをそれぞれ検出してもよいし、4つのウェイクワードをまとめて検出可能な1つの検出モデルを利用して4つのウェイクワードをそれぞれ検出してもよい。ウェイクワード検出部232は、ユーザ端末2がインカム1から音声情報221を受信している間、ウェイクワードの検出を常時実行する。なお、ウェイクワードの検出方法は、上記の例に限られず、任意に選択可能である。
テキスト化部233は、音声認識処理によって音声情報221をテキスト情報222に変換し、得られたテキスト情報222を変換元の音声情報221と対応づけて記憶部22に保存する。より詳細には、テキスト化部233は、音声情報221からウェイクワードが検出された場合、検出されたウェイクワードより前の所定の第2期間の音声情報221をテキスト情報に変換する。ウェイクワードより前の第2期間の音声情報221とは、対応する受信時刻が、ウェイクワードの受信時刻より前の第2期間に含まれる音声情報221のことである。例えば、第2期間が20秒であり、15時10分30秒にウェイクワードが検出された場合、テキスト化部233は、15時10分10秒から15時10分30秒までの20秒間の音声情報221をテキスト情報に変換する。第2期間は、例えば、20秒であるが、これに限られない。なお、音声認識処理の方法は、任意に選択可能である。
なお、ユーザ端末2の機能構成は、上記の例に限られない。ユーザ端末2は、上記の機能構成の一部を備えてもよいし、上記以外の機能構成を備えてもよい。例えば、ユーザ端末2は、上記の機能構成の一部を支援装置3に設けられてもよいし、支援装置3の機能構成の一部を備えてもよい。
<ユーザ端末2が実行する処理>
次に、ユーザ端末2が実行する処理について説明する。図4は、ユーザ端末2が実行する処理の一例を示すフローチャートである。
(ステップS101)
取得部231は、通信部21がインカム1から受信した音声情報221を取得し、取得した音声情報221を受信時刻と対応づけて記憶部22に保存する。
(ステップS102)
ウェイクワード検出部232は、新たに保存された音声情報221に対してウェイクワードの検出を順次実行する。音声情報221からいずれのウェイクワードも検出されなかった場合(ステップS102:NO)、処理は終了する。一方、音声情報221からいずれかのウェイクワードが検出された場合(ステップS102:YES)、処理はステップS103に進む。
(ステップS103)
ウェイクワード検出部232は、ウェイクワードを検出すると、ウェイクワードの検出をユーザに通知する。ウェイクワード検出部232は、例えば、ユーザ端末2のスピーカからウェイクワードの検出を通知する通知音を出力させてもよいし、ユーザ端末2の表示装置に、ウェイクワードの検出を通知する画像を表示させてもよい。また、ウェイクワード検出部232は、ウェイクワードの検出を通知する通知音の音声情報をインカム1に送信し、インカム1のスピーカから通知音を出力させてもよい。ウェイクワードの検出を通知する通知音は、ウェイクワードごとに異なるのが好ましい。このように、ウェイクワードの検出をユーザに通知することにより、ユーザは、自分が発話したウェイクワードが検出されたことを速やかに確認することができる。
(ステップS104)
テキスト化部233は、ウェイクワード検出部232がウェイクワードを検出すると、ウェイクワード検出部232が検出したウェイクワードより前の所定期間の音声情報221を記憶部22から読み出す。
(ステップS105)
テキスト化部233は、読み出した音声情報221を、音声認識処理によりテキスト情報222に変換し、記憶部22に保存する。
(ステップS106)
テキスト化部233は、ユーザ端末2の識別情報と、ステップS102で検出されたウェイクワードの種類と、ステップS104で読み出した音声情報221及び受信時刻と、ステップS105で得られたテキスト情報222と、を対応づけて支援装置3に送信する。テキスト化部233が送信したこれらの情報は、支援装置3に受信され、受信情報321として保存される(図6参照)。
<まとめ>
以上の処理により、ユーザがウェイクワードを発話すると、ウェイクワードより前の所定期間にユーザが発話した音声に対応するテキスト情報222等が支援装置3に送信され、支援装置3によりウェイクワード処理が実行される。すなわち、本実施形態によれば、ユーザは、ウェイクワード処理に応じた内容を発話した後にウェイクワードを発話することで、所望のウェイクワード処理を支援システムに実行させることができる。
このように、ウェイクワードを内容より後から検出することで、ウェイクワードを内容より先に検出する場合に比べて、ウェイクワードを発話してからウェイクワード処理が実行されるまでの時間を、内容を発話する時間の分だけ短縮することができる。ウェイクワードを発話してからウェイクワード処理が実行されるまでの時間は、ユーザが支援システムに指示を与えてからレスポンスが返ってくるまでのユーザの待ち時間に相当する。すなわち、本実施形態によれば、ユーザがウェイクワードを発話した後のユーザの待ち時間を短縮することができる。また、ウェイクワードを内容より後から検出することで、言い間違えた内容でウェイクワード処理が実行されることを抑制することができる。
<介護業務支援装置3の機能構成>
次に、支援装置3の機能構成について説明する。図5は、支援装置3の機能構成の一例を示す図である。図5に示すように、支援装置3は、通信部31と、記憶部32と、制御部33と、を備える。
通信部31は、通信I/Fにより実現される。通信部31は、ネットワークNを介して、ユーザ端末2及び介護システム4との間で情報の送受信を行う。具体的には、通信部31は、ユーザ端末2からテキスト情報222等を受信し、介護システム4に介護記録等を送信する。
記憶部32は、メモリ102及びストレージ103により実現される。記憶部32は、受信情報321と、対象情報322と、代替語情報323と、を記憶する。
受信情報321は、ユーザ端末2から受信したテキスト情報222等の情報である。図6は、受信情報321の一例を示す図である。図6の受信情報321は、情報項目として「DID」、「時刻」、「ウェイクワード」、「テキスト」、及び「音声」を含む。「DID」は、受信情報321を一意に識別する識別子である。「時刻」は、受信情報321に含まれる音声情報221に対応づけられた最も早い受信時刻であり、音声情報221の開始時刻に相当する。「ウェイクワード」は、受信情報321を送信する原因となったウェイクワード(ステップS102で検出されたウェイクワード)の種類である。「テキスト」は、受信情報321に含まれる音声情報221を変換して得られたテキスト情報222である。「音声」は、受信情報321に含まれる音声情報221である。図6の例では、音声情報221はmp3であるが、音声情報221のファイル形式は任意である。
例えば、図6の1行目の受信情報321は、「DID」が「D001」であり、「時刻」が「16:30:20」であり、「ウェイクワード」が「完了」であり、「テキスト」が「佐藤さん、お食事を全量召し上がりました」であり、「音声」が「M001.mp3」である。これは、ユーザが16:30:20から第2期間の間に「佐藤さん、お食事を全量召し上がりました、完了」と発話した結果、「完了(第1ウェイクワード)」というウェイクワードが検出され、「完了」より前の「佐藤さん、お食事を全量召し上がりました」という音声情報221(M001.mp3)と、これに対応するテキスト情報222と、を含む情報がユーザ端末2から送信され、支援装置3がこれらの情報を受信し、受信情報D001として記憶したことを示している。
なお、受信情報321は、上記の例に限られない。受信情報321は、上記の情報項目の一部を含んでもよいし、上記以外の情報項目を含んでもよい。
対象情報322は、ユーザが指定するウェイクワード処理の対象を示す情報である。本実施形態において、ユーザは、ウェイクワード処理の内容として、その呼称を発話することで、ウェイクワード処理の対象を指定する。ウェイクワード処理の対象は、被介護者(被作業者)、ユーザ(介護者)、及びグループの少なくとも1つを含む。対象情報322は、例えば、ユーザにより予め登録される。図7~図9は、対象情報322の一例を示す図である。
図7の対象情報322は、被介護者の対象情報322であり、情報項目として「CID」、「氏名」、及び「呼称」を含む。「CID」は、被介護者を一意に識別する識別子である。「氏名」は、被介護者の氏名である。「呼称」は、被介護者の呼称であり、姓、名、及び通称の少なくとも1つを含む。例えば、図7の対象情報322は、「CID」が「C001」であり、「氏名」が「佐藤太郎」であり、「呼称」が「佐藤」、「太郎」、及び「さとさん」である。
図8の対象情報322は、ユーザの対象情報322であり、情報項目として「UID」、「氏名」、及び「呼称」を含む。「UID」は、ユーザを一意に識別する識別子である。「氏名」は、ユーザの氏名である。「呼称」は、ユーザの呼称であり、姓、名、及び通称の少なくとも1つを含む。例えば、図8の対象情報322は、「UID」が「U001」であり、「氏名」が「鈴木次郎」であり、「呼称」が「鈴木」及び「次郎」である。
図9の対象情報322は、グループの対象情報322であり、情報項目として「GID」、「グループ」、「呼称」、及び「メンバー」を含む。「GID」は、グループを一意に識別する識別子である。「グループ」は、グループの名称である。「呼称」は、グループの呼称である。「メンバー」は、グループに含まれる者を一意に識別する識別子である。例えば、図9の一行目の対象情報322は、「GID」が「G001」であり、「グループ」が「3階担当者」であり、「呼称」が「3階担当者」であり、「メンバー」が「U001」、及び「U002」である。これは、グループG001がユーザU001,U002を含む「3階担当者」という名称のグループであることを示している。また、図9の二行目の対象情報322は、「GID」が「G002」であり、「グループ」が「3階利用者」であり、「呼称」が「3階利用者」であり、「メンバー」が「C001」、及び「C002」である。これは、グループG002が被介護者C001,C002を含む「3階利用者」という名称のグループであることを示している。
なお、対象情報322は、上記の例に限られない。対象情報322は、上記の情報項目の一部を含んでもよいし、上記以外の情報項目を含んでもよい。また、ユーザ及び被介護者を含むグループが登録されてもよい。
代替語情報323は、介護作業の種類及び介護作業に関する量の少なくとも一方に対応する代替語を示す情報である。本実施形態では、後述する通り、ユーザの発話内容に応じて介護記録が作成される。しかし、介護作業の種類によっては、直接的に記録内容を発話することが適切でない(記録内容を被介護者に聞かれることが適切でない)場合があり得る。そこで、記録内容を直接的に発話しなくて済むように代替語が登録される。代替語情報323は、例えば、ユーザにより予め登録される。
図10は、代替語情報323の一例を示す図である。図10の代替語情報323は、情報項目として「WID」、「代替語」、「介護作業」、及び「量」を含む。「WID」は、代替語を一意に識別する識別子である。「代替語」は、登録された代替語である。「介護作業」は、代替語の種類(介護作業の種類)である。「量」は、代替語の種類(介護作業に関する量)である。例えば、図10の1行目の代替語情報323は、「WID」が「W001」であり、「代替語」が「A」であり、「介護作業」が「排泄介助(便)」である。これは、ユーザがウェイクワードの内容として「A」と発話すると、介護作業の種類が「排泄介助(便)」である介護記録が作成されることを示す。図10の例にように、代替語は、被介護者が聞いた場合に意味がわからない符号であるのが好ましい。代替語は、例えば、アルファベット、数値、又はこれらの組み合わせであるが、これに限られない。
なお、代替語情報323は、上記の例に限られない。代替語情報323は、上記の情報項目の一部を含んでもよいし、上記以外の情報項目を含んでもよい。
制御部33は、プロセッサ101がメモリ102からプログラムを読み出して実行し、他のハードウェア構成と協働することにより実現される。制御部33は、取得部331と、対象特定部332と、ウェイクワード処理部333と、代替語検出部334と、を備える。
取得部331は、ユーザ端末2からテキスト情報222等の情報を取得し、受信情報321として記憶部32に保存する。
対象特定部332は、受信情報321に含まれるテキスト情報222に基づいてウェイクワード処理の対象を特定する。具体的には、対象特定部322は、対象情報322を参照して、テキスト情報222に含まれる呼称を検出し、検出した呼称に対応する対象を、ウェイクワード処理の対象として特定する。
ウェイクワード処理部333は、ウェイクワード及びウェイクワード処理の対象に応じたウェイクワード処理を実行する。ウェイクワード処理部333は、記録作成部3331と、記録通知部3332と、メッセージ送信部3333と、申し送り登録部3334と、を備える。
記録作成部3331は、第1ウェイクワード(完了)が検出された場合、テキスト情報222から介護作業の内容を推定し、推定した介護作業の内容と、ウェイクワード処理の対象を示す情報(ユーザのUIDや氏名など)と、を含む介護記録を作成する。記録作成部3331は、キーワードを利用した方法、機械学習モデルを利用した方法、代替語を利用した方法など、任意の方法でテキスト情報222から介護作業の内容を推定できる。介護作業の内容は、介護作業の種類と、介護作業に関する量と、を含む。記録作成部3331は、作成した介護記録を、対象の介護記録として介護システム4に登録する。
記録通知部3332は、第2ウェイクワード(確認)が検出された場合、テキスト情報222から介護作業の内容を推定し、推定した介護作業の内容と、ウェイクワード処理の対象を示す情報(ユーザのUIDや氏名など)と、を含む介護記録を介護システム4から取得し、取得した介護記録をユーザに通知する。記録通知部3332は、キーワードを利用した方法、機械学習モデルを利用した方法、代替語を利用した方法など、任意の方法でテキスト情報222から介護作業の内容を推定できる。記録通知部3332は、取得した介護記録をユーザ端末2の表示装置に表示させることによりユーザに通知してもよいし、取得した介護記録をインカム1から音声出力させることによりユーザに通知してもよい。
メッセージ送信部3333は、第3ウェイクワード(送信)が検出された場合、音声情報221及びテキスト情報222の少なくとも一方を、ユーザからのメッセージとして対象(他のユーザ)に送信する。メッセージを受信した対象(他のユーザ)のユーザ端末2は、受信したメッセージを表示装置に表示してもよいし、受信したメッセージを対象(他のユーザ)のインカム1から音声出力させてもよい。
申し送り登録部3334は、第4ウェイクワード(申し送り)が検出された場合、音声情報221及びテキスト情報222の少なくとも一方を、対象に関する申し送り事項として介護システム4に登録する。
代替語検出部334は、第1ウェイクワード(完了)又は第2ウェイクワード(確認)が検出された場合、代替語情報323を参照して、テキスト情報222から予め登録された代替語を検出する。
なお、支援装置3の機能構成は、上記の例に限られない。支援装置3は、上記の機能構成の一部を備えてもよいし、上記以外の機能構成を備えてもよい。例えば、支援装置3は、上記の機能構成の一部をユーザ端末2又は介護システム4に設けられてもよいし、ユーザ端末2又は介護システム4の機能構成の一部を備えてもよい。
<介護業務支援装置3が実行する処理>
次に、支援装置3が実行する処理について説明する。図11は、支援装置3が実行する処理の一例を示すフローチャートである。
(ステップS201)
取得部331は、通信部31がユーザ端末2から受信したテキスト情報222等を取得し、取得したテキスト情報222等を受信情報321として記憶部32に保存する。
(ステップS202)
対象特定部332は、対象情報322を参照して、受信情報321に含まれるテキスト情報222から対象の呼称を検出する。対象の呼称を検出しなかった場合(ステップS202:NO)、処理は終了する。一方、対象の呼称を検出した場合(ステップS202:YES)、処理はステップS203に進む。
(ステップS203)
対象特定部332は、ステップS202で検出した呼称に対応する対象を、ウェイクワード処理の対象として特定する。
(ステップS204)
ウェイクワード処理部333は、受信情報321に含まれるウェイクワードの種類に応じたウェイクワード処理を実行する。ウェイクワードが第1ウェイクワードである場合(ステップS204:完了)、処理はステップS205に進む。ウェイクワードが第2ウェイクワードである場合(ステップS204:確認)、処理はステップS206に進む。ウェイクワードが第3ウェイクワードである場合(ステップS204:送信)、処理はステップS207に進む。ウェイクワードが第4ウェイクワードである場合(ステップS204:申し送り)、処理はステップS208に進む。
(ステップS205)
記録作成部3331は、介護作業の内容と、ステップS203で特定したウェイクワード処理の対象を示す情報と、を含む介護記録を作成し、介護システム4に登録する。ウェイクワード処理の対象は、介護作業の対象に相当する。介護記録の作成方法について詳しくは後述する。
(ステップS206)
記録通知部3332は、介護作業の内容と、ステップS203で特定したウェイクワード処理の対象を示す情報と、を含む介護記録を介護システム4から取得し、取得した介護記録をユーザに通知する。ウェイクワード処理の対象は、介護作業の対象に相当する。介護記録の通知方法について詳しくは後述する。
(ステップS207)
メッセージ送信部3333は、受信情報321に含まれる音声情報221及びテキスト情報222の少なくとも一方を、ユーザからのメッセージとしてステップS203で特定したウェイクワード処理の対象のユーザ端末2に送信する。ウェイクワード処理の対象は、メッセージの宛先に相当する。
(ステップS208)
申し送り登録部3334は、受信情報321に含まれる音声情報221及びテキスト情報222の少なくとも一方を、ステップS203で特定したウェイクワード処理の対象に関する申し送り事項として介護システム4に登録する。ウェイクワード処理の対象は、申し送り事項の対象に相当する。
なお、ウェイクワード処理部333は、ウェイクワード処理の完了後、その旨をユーザに通知するのが好ましい。ウェイクワード処理部333は、例えば、ユーザ端末2のスピーカからウェイクワード処理の完了を通知する通知音を出力させてもよいし、ユーザ端末2の表示装置に、ウェイクワード処理の完了を通知する画像を表示させてもよい。また、ウェイクワード処理部333は、ウェイクワード処理の完了を通知する通知音の音声情報をインカム1に送信し、インカム1のスピーカから通知音を出力させてもよい。ウェイクワード処理の完了を通知する通知音は、ウェイクワード処理ごとに異なるのが好ましい。このように、ウェイクワード処理の完了をユーザに通知することにより、ユーザは、自分が発話したウェイクワードに応じたウェイクワード処理が完了したことを速やかに確認することができる。
<まとめ>
以上の処理により、支援装置3は、ユーザが発話したウェイクワードと、ウェイクワード処理の対象の呼称と、ウェイクワード処理の内容と、に応じたウェイクワード処理を実行することができる。すなわち、ユーザは、所望のウェイクワード処理に応じたウェイクワードと、ウェイクワード処理の対象の呼称と、ウェイクワード処理の内容と、を発話するだけで、支援装置3に複数種類のウェイクワード処理を実行させることができる。
例えば、ユーザが「佐藤さん、お食事を全量召し上がりました、完了」と発話すると、取得部331が受信情報D001(図6参照)を取得する(ステップS201)。次に、対象特定部332が「佐藤さん、お食事を全量召し上がりました」というテキスト情報222から「佐藤」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象として被介護者C001(図7参照)を特定する(ステップS203)。その後、記録作成部3331が「佐藤さん、お食事を全量召し上がりました」というテキスト情報222から介護作業の内容(例えば、種類:食事介助,量:全量)を推定し、推定した介護作業の内容及び被介護者C001を示す情報を含む介護記録を作成し(ステップS205)、作成した介護記録を介護システム4に登録する。このように、ユーザは、被介護者の名前(呼称)と、介護記録の内容と、「完了」というウェイクワードと、を発話するだけで、所望の介護記録を作成することができる。
また、ユーザが「佐藤さんの服薬について、確認」と発話すると、取得部331が受信情報D002(図6参照)を取得する(ステップS201)。次に、対象特定部332が「佐藤さんの服薬について」というテキスト情報222から「佐藤」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象として被介護者C001(図7参照)を特定する(ステップS203)。その後、記録通知部3332が「佐藤さんの服薬について」というテキスト情報222から介護作業の内容(例えば、種類:服薬介助)を推定し、推定した介護作業の内容及び被介護者C001を示す情報を含む介護記録を介護システム4から取得し、取得した介護記録をユーザに通知する(ステップS206)。このように、ユーザは、被介護者の名前(呼称)と、介護記録の内容と、「確認」というウェイクワードと、を発話するだけで、所望の介護記録を確認することができる。
また、ユーザが「鈴木さん、至急食堂にきてください、送信」と発話すると、取得部331が受信情報D003(図6参照)を取得する(ステップS201)。次に、対象特定部332が「鈴木さん、至急食堂にきてください」というテキスト情報222から「鈴木」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象としてユーザU001(図8参照)を特定する(ステップS203)。その後、メッセージ送信部3333が「鈴木さん、至急食堂にきてください」というテキスト情報222及び音声情報221(M003.mp3)の少なくとも一方をユーザU001に送信する(ステップS207)。このように、ユーザは、他のユーザの名前(呼称)と、メッセージの内容と、「送信」というウェイクワードと、を発話するだけで、所望の他のユーザにメッセージを送信することができる。
また、ユーザが「佐藤さんが風邪気味です、申し送り」と発話すると、取得部331が受信情報D004(図6参照)を取得する(ステップS201)。次に、対象特定部332が「佐藤さんが風邪気味です」というテキスト情報222から「佐藤」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象として被介護者C001(図7参照)を特定する(ステップS203)。その後、申し送り登録部3334が「佐藤さんが風邪気味です」というテキスト情報222及び音声情報221(M004.mp3)の少なくとも一方を被介護者C001に関する申し送り事項として介護システム4に登録する(ステップS208)。このように、ユーザは、被介護者の名前(呼称)と、申し送りの内容と、「申し送り」というウェイクワードと、を発話するだけで、所望の申し送りを介護システム4に登録することができる。
なお、ウェイクワードを検出した場合にウェイクワードより後の音声情報をテキスト情報に変換してウェイクワード処理を実行する場合も、上記と同様に、支援装置3は、ユーザが発話したウェイクワードと、ウェイクワード処理の対象の呼称と、ウェイクワード処理の内容と、に応じたウェイクワード処理を実行することができる。すなわち、ユーザは、所望のウェイクワード処理に応じたウェイクワードと、ウェイクワード処理の対象の呼称と、ウェイクワード処理の内容と、を発話するだけで、支援装置3に所望のウェイクワード処理を実行させることができる。
<介護記録の作成方法>
次に、介護記録の作成方法について詳しく説明する。図12は、介護記録の作成方法の一例を示すフローチャートである。図12の処理は、ステップS205の内部処理に相当する。
(ステップS301)
代替語検出部334は、代替語情報323を参照して、テキスト情報222から代替語を検出する。代替語が検出された場合(ステップS301:YES)、処理はステップS302に進む。一方、代替語が検出されない場合(ステップS301:NO)、処理はステップS303に進む。
(ステップS302)
記録作成部3331は、代替語情報323を参照して、ステップS301で検出された代替語に対応する介護作業の内容を、テキスト情報222に対応する介護作業の内容の推定結果として取得する。
(ステップS303)
記録作成部3331は、テキスト情報222に基づいて、介護作業の内容を推定する。推定方法は任意に選択可能である。
(ステップS304)
記録作成部3331は、ステップS302又はステップS303で推定した介護作業の内容(介護作業の種類及び量の少なくとも一方)と、ステップS203で特定したウェイクワード処理の対象(被介護者)を示す情報と、を含む介護記録を作成する。
(ステップS305)
記録作成部3331は、ステップS304で作成した介護記録を介護システム4に登録し、登録が完了したことをユーザに通知する。
<まとめ>
以上の処理により、支援装置3は、ウェイクワード処理の対象(被介護者)の呼称と、代替語に対応する介護作業の内容と、を含む介護記録を作成することができる。すなわち、ユーザは、完了というウェイクワードと、ウェイクワード処理の対象(被介護者)の呼称と、介護作業の内容に対応する代替語と、を発話するだけで、支援装置3に所望の介護記録を作成させることができる。
例えば、ユーザが「佐藤さん、A1、完了」と発話すると、取得部331が受信情報D005(図6参照)を取得する(ステップS201)。次に、対象特定部332が「佐藤さん、A1」というテキスト情報222から「佐藤」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象として被介護者C001(図7参照)を特定する(ステップS203)。その後、代替語検出部334が「佐藤さん、A1」というテキスト情報222から「A」及び「1」という代替語を検出し(ステップS301:YES)、記録作成部3331が介護作業の内容として「種類:排泄介助(便),量:少量」を取得し(ステップS302)、「種類:排泄介助(便),量:少量」及び被介護者C001を示す情報を含む介護記録を作成し(ステップS304)、作成した介護記録を介護システム4に登録する(ステップS305)。このように、ユーザは、被介護者の名前(呼称)と、介護記録の内容に対応する代替語と、「完了」というウェイクワードと、を発話するだけで、被介護者などの前で直接的に記録内容を発話することが適切でない(記録内容を被介護者に聞かれることが適切でない)介護記録を作成することができる。すなわち、ユーザは、直接的に記録内容を発話することなく介護記録を作成することができる。
<介護記録の通知方法>
次に、介護記録の通知方法について詳しく説明する。図13は、介護記録の通知方法の一例を示すフローチャートである。図13の処理は、ステップS206の内部処理に相当する。
(ステップS401)
代替語検出部334は、代替語情報323を参照して、テキスト情報222から代替語を検出する。代替語が検出された場合(ステップS401:YES)、処理はステップS402に進む。一方、代替語が検出されない場合(ステップS401:NO)、処理はステップS403に進む。
(ステップS402)
記録通知部3332は、代替語情報323を参照して、ステップS401で検出された代替語に対応する介護作業の内容を、テキスト情報222に対応する介護作業の内容の推定結果として取得する。
(ステップS403)
記録通知部3332は、テキスト情報222に基づいて、介護作業の内容を推定する。推定方法は任意に選択可能である。
(ステップS404)
記録通知部3332は、ステップS402又はステップS403で推定した介護作業の内容(介護作業の種類及び量の少なくとも一方)と、ステップS203で特定したウェイクワード処理の対象(被介護者)を示す情報と、を含む介護記録を介護システム4から取得する。
(ステップS405)
記録通知部3332は、ステップS404で取得した介護記録をユーザ端末2に送信することにより、ユーザに通知する。
<まとめ>
以上の処理により、支援装置3は、ウェイクワード処理の対象(被介護者)の呼称と、代替語に対応する介護作業の内容と、を含む介護記録をユーザに通知することができる。すなわち、ユーザは、確認というウェイクワードと、ウェイクワード処理の対象(被介護者)の呼称と、介護作業の内容に対応する代替語と、を発話するだけで、所望の介護記録を確認することができる。
例えば、ユーザが「佐藤さん、B、確認」と発話すると、取得部331が受信情報D006(図6参照)を取得する(ステップS201)。次に、対象特定部332が「佐藤さん、B」というテキスト情報222から「佐藤」という呼称を検出し(ステップS202:YES)、ウェイクワード処理の対象として被介護者C001(図7参照)を特定する(ステップS203)。その後、代替語検出部334が「佐藤さん、B」というテキスト情報222から「B」という代替語を検出し(ステップS401:YES)、記録通知部3332が介護作業の内容として「種類:排泄介助(尿)」を取得し(ステップS402)、「種類:排泄介助(尿)」及び被介護者C001を示す情報を含む介護記録を介護システム4から取得し(ステップS404)、取得した介護記録をユーザに通知する(ステップS405)。このように、ユーザは、被介護者の名前(呼称)と、介護記録の内容に対応する代替語と、「確認」というウェイクワードと、を発話するだけで、直接的に記録内容を発話することが適切でない(記録内容を被介護者に聞かれることが適切でない)介護記録を確認することができる。すなわち、ユーザは、直接的に記録内容を発話することなく介護記録を確認することができる。
<付記>
本実施形態は、以下の開示を含む。
(付記1-1)
情報処理システムが実行する業務支援方法であって、
ユーザが発話した音声の音声情報を取得する取得処理と、
取得した前記音声情報を所定期間記憶する記憶処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記ウェイクワードより前の音声情報をテキスト情報に変換するテキスト化処理と、
を含む業務支援方法。
(付記1-2)
前記検出処理は、前記ウェイクワードの音声情報を機械学習した検出モデルを利用して前記ウェイクワードを検出する
付記1-1に記載の業務支援方法。
(付記1-3)
前記検出処理は、複数種類の前記ウェイクワードをそれぞれ検出する
付記1-1又は付記1-2に記載の業務支援方法。
(付記1-4)
ユーザが発話した音声の音声情報を取得する取得部と、
取得した前記音声情報を所定期間記憶する記憶部と、
前記音声情報からウェイクワードを検出するウェイクワード検出部と、
前記ウェイクワードを検出した場合、前記ウェイクワードより前の音声情報をテキスト情報に変換するテキスト化部と、
を備える業務支援システム。
(付記1-5)
情報処理装置システムに、
ユーザが発話した音声の音声情報を取得する取得処理と、
取得した前記音声情報を所定期間記憶する記憶処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記ウェイクワードより前の音声情報をテキスト情報に変換するテキスト化処理と、
を含む業務支援方法を実行させるためのプログラム。
(付記2-1)
情報処理システムが実行する業務支援方法であって、
ユーザが発話した音声の音声情報を取得する取得処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
前記テキスト情報に基づいて対象を特定する対象特定処理と、
前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理と、
を含む業務支援方法。
(付記2-2)
前記ウェイクワード処理は、第1ウェイクワードが検出された場合、前記テキスト情報から推定した作業の内容と、前記対象を示す情報と、を含む記録を作成する
付記2-1に記載の業務支援方法。
(付記2-3)
前記ウェイクワード処理は、第2ウェイクワードが検出された場合、前記テキスト情報から推定した作業の内容と、前記対象を示す情報と、を含む記録を前記ユーザに通知する
付記2-1又は付記2-2に記載の業務支援方法。
(付記2-4)
前記ウェイクワード処理は、第3ウェイクワードが検出された場合、前記音声情報及び前記テキスト情報の少なくとも一方を前記対象に送信する
付記2-1から付記2-3までのいずれかに記載の業務支援方法。
(付記2-5)
前記ウェイクワード処理は、第4ウェイクワードが検出された場合、前記音声情報及び前記テキスト情報の少なくとも一方を前記対象に関する申し送り事項として登録する
付記2-1から付記2-4までのいずれかに記載の業務支援方法。
(付記2-6)
前記対象は、前記作業者、被作業者、及び予め設定されたグループの少なくとも1つを含む
付記2-1から付記2-5までのいずれかに記載の業務支援方法。
(付記2-7)
ユーザが発話した音声の音声情報を取得する取得部と、
前記音声情報からウェイクワードを検出するウェイクワード検出部と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化部と、
前記テキスト情報に基づいて対象を特定する対象特定部と、
前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理部と、
を備える業務支援システム。
(付記2-8)
情報処理システムに、
ユーザが発話した音声の音声情報を取得する取得処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
前記テキスト情報に基づいて対象を特定する対象特定処理と、
前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理と、
を含む業務支援方法を実行させるためのプログラム。
(付記3-1)
情報処理システムが実行する業務支援方法であって、
音声情報を取得する取得処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
前記テキスト情報から予め登録された代替語を検出する代替語検出処理と、
前記代替語に対応する作業の内容を含む記録を作成する記録作成処理と、
を含む業務支援方法。
(付記3-2)
前記テキスト情報に基づいて対象を特定する対象特定処理を更に含み、
前記記録は、特定された前記対象を示す情報を更に含む
付記3-1に記載の業務支援方法。
(付記3-3)
前記代替語は、作業の種類及び作業に関する量の少なくとも一方に対応する
付記3-1又は付記3-2に記載の業務支援方法。
(付記3-4)
前記代替語は、アルファベット、数値、又はこれらの組み合わせである
付記3-1から付記3-3までのいずれかに記載の業務支援方法。
(付記3-5)
音声情報を取得する取得部と、
前記音声情報からウェイクワードを検出するウェイクワード検出部と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化部と、
前記テキスト情報から予め登録された代替語を検出する代替語検出部と、
前記代替語に対応する作業の内容を含む記録を作成する記録作成部と、
を備える業務支援システム。
(付記3-6)
情報処理システムに、
音声情報を取得する取得処理と、
前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
前記テキスト情報から予め登録された代替語を検出する代替語検出処理と、
前記代替語に対応する作業の内容を含む記録を作成する記録作成処理と、
を含む業務支援方法を実行させるためのプログラム。
今回開示された実施形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。また、本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
1:インカム
2:ユーザ端末
3:介護業務支援装置
4:介護システム
21:通信部
22:記憶部
23:制御部
221:音声情報
222:テキスト情報
231:ウェイクワード検出部
232:テキスト化部
31:通信部
32:記憶部
33:制御部
321:受信情報
322:対象情報
323:代替語情報
331:取得部
332:対象特定部
333:ウェイクワード処理部
334:代替語検出部
100:情報処理装置
101:プロセッサ
102:メモリ
103:ストレージ
104:通信I/F
105:入出力I/F
106:入力装置
107:出力装置
108:ドライブ装置
109:ディスクメディア

Claims (4)

  1. 情報処理システムが実行する業務支援方法であって、
    ユーザが発話した音声の音声情報を取得する取得処理と、
    前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
    前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
    前記テキスト情報に基づいて対象を特定する対象特定処理と、
    前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理と、
    を含み、
    前記ウェイクワード処理は、第2ウェイクワードが検出された場合、前記テキスト情報から推定した作業の内容と、前記対象を示す情報と、を含む記録を前記ユーザに通知する
    業務支援方法。
  2. 前記対象は、作業者、被作業者、及び予め設定されたグループの少なくとも1つを含む
    請求項1に記載の業務支援方法。
  3. ユーザが発話した音声の音声情報を取得する取得部と、
    前記音声情報からウェイクワードを検出するウェイクワード検出部と、
    前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化部と、
    前記テキスト情報に基づいて対象を特定する対象特定部と、
    前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理部と、
    を備え、
    前記ウェイクワード処理部は、第2ウェイクワードが検出された場合、前記テキスト情報から推定した作業の内容と、前記対象を示す情報と、を含む記録を前記ユーザに通知する
    業務支援システム。
  4. 情報処理システムに、
    ユーザが発話した音声の音声情報を取得する取得処理と、
    前記音声情報からウェイクワードを検出するウェイクワード検出処理と、
    前記ウェイクワードを検出した場合、前記音声情報をテキスト情報に変換するテキスト化処理と、
    前記テキスト情報に基づいて対象を特定する対象特定処理と、
    前記ウェイクワード及び前記対象に応じた処理を実行するウェイクワード処理と、
    を含み、
    前記ウェイクワード処理は、第2ウェイクワードが検出された場合、前記テキスト情報から推定した作業の内容と、前記対象を示す情報と、を含む記録を前記ユーザに通知する
    業務支援方法を実行させるためのプログラム。
JP2021020158A 2021-02-10 2021-02-10 業務支援方法、システム及びプログラム Active JP6995273B1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021020158A JP6995273B1 (ja) 2021-02-10 2021-02-10 業務支援方法、システム及びプログラム
JP2021092188A JP2022122808A (ja) 2021-02-10 2021-06-01 業務支援方法、装置、及びプログラム
JP2021092216A JP6995275B1 (ja) 2021-02-10 2021-06-01 業務支援方法、システム及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021020158A JP6995273B1 (ja) 2021-02-10 2021-02-10 業務支援方法、システム及びプログラム

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2021092188A Division JP2022122808A (ja) 2021-02-10 2021-06-01 業務支援方法、装置、及びプログラム
JP2021092216A Division JP6995275B1 (ja) 2021-02-10 2021-06-01 業務支援方法、システム及びプログラム

Publications (2)

Publication Number Publication Date
JP6995273B1 true JP6995273B1 (ja) 2022-01-14
JP2022122726A JP2022122726A (ja) 2022-08-23

Family

ID=80448053

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021020158A Active JP6995273B1 (ja) 2021-02-10 2021-02-10 業務支援方法、システム及びプログラム
JP2021092188A Pending JP2022122808A (ja) 2021-02-10 2021-06-01 業務支援方法、装置、及びプログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021092188A Pending JP2022122808A (ja) 2021-02-10 2021-06-01 業務支援方法、装置、及びプログラム

Country Status (1)

Country Link
JP (2) JP6995273B1 (ja)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004102727A (ja) 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd 作業支援システム
JP2011090452A (ja) 2009-10-21 2011-05-06 Fuji Xerox Co Ltd 情報処理装置および情報処理システムおよび情報処理プログラム
JP2016110169A (ja) 2014-12-02 2016-06-20 エンカレッジ・テクノロジ株式会社 作業申請処理装置、作業申請処理方法、及びプログラム
JP2019016137A (ja) 2017-07-06 2019-01-31 富士通株式会社 記録プログラム、記録方法、及び記録装置
JP2019181591A (ja) 2018-04-04 2019-10-24 パナソニックIpマネジメント株式会社 電動工具
JP2020030780A (ja) 2018-08-20 2020-02-27 社会福祉法人文珠福祉会 Aiアシスタントを活用したハンズフリーの看護・介護記録システム
JP2020135667A (ja) 2019-02-22 2020-08-31 菱洋エレクトロ株式会社 報告書作成するための方法、システム、及び装置
JP2020160387A (ja) 2019-03-28 2020-10-01 Necパーソナルコンピュータ株式会社 電子機器、制御方法およびプログラム
JP2020187554A (ja) 2019-05-15 2020-11-19 株式会社スター精機 機械作業情報の記録方法及び確認方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004102727A (ja) 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd 作業支援システム
JP2011090452A (ja) 2009-10-21 2011-05-06 Fuji Xerox Co Ltd 情報処理装置および情報処理システムおよび情報処理プログラム
JP2016110169A (ja) 2014-12-02 2016-06-20 エンカレッジ・テクノロジ株式会社 作業申請処理装置、作業申請処理方法、及びプログラム
JP2019016137A (ja) 2017-07-06 2019-01-31 富士通株式会社 記録プログラム、記録方法、及び記録装置
JP2019181591A (ja) 2018-04-04 2019-10-24 パナソニックIpマネジメント株式会社 電動工具
JP2020030780A (ja) 2018-08-20 2020-02-27 社会福祉法人文珠福祉会 Aiアシスタントを活用したハンズフリーの看護・介護記録システム
JP2020135667A (ja) 2019-02-22 2020-08-31 菱洋エレクトロ株式会社 報告書作成するための方法、システム、及び装置
JP2020160387A (ja) 2019-03-28 2020-10-01 Necパーソナルコンピュータ株式会社 電子機器、制御方法およびプログラム
JP2020187554A (ja) 2019-05-15 2020-11-19 株式会社スター精機 機械作業情報の記録方法及び確認方法

Also Published As

Publication number Publication date
JP2022122808A (ja) 2022-08-23
JP2022122726A (ja) 2022-08-23

Similar Documents

Publication Publication Date Title
KR102622356B1 (ko) 장치에 대한 다중 사용자 인증
US20130144619A1 (en) Enhanced voice conferencing
WO2018043113A1 (ja) 情報処理装置、情報処理方法、プログラム
WO2020105302A1 (ja) 応答生成装置、応答生成方法及び応答生成プログラム
JPWO2018043114A1 (ja) 情報処理装置、情報処理方法、プログラム
EP3040917A1 (en) Speech recognition systems and methods for maintenance repair and overhaul
JP5974903B2 (ja) 予定に係る音声メモ蓄積方法
JP2019016137A (ja) 記録プログラム、記録方法、及び記録装置
US10678941B2 (en) Privacy focused network sensor device object recognition
JP6995273B1 (ja) 業務支援方法、システム及びプログラム
JP6995275B1 (ja) 業務支援方法、システム及びプログラム
JP6937484B1 (ja) 業務支援方法、システム、及びプログラム
JP6937483B1 (ja) 業務支援方法、装置、及びプログラム
JP7095684B2 (ja) 情報処理装置、情報処理方法、プログラム
JPWO2020003785A1 (ja) 音声処理装置、音声処理方法及び記録媒体
JP6146703B2 (ja) 予定に係る音声メモ蓄積方法
JP2003158579A (ja) 電話応答支援装置及び方法
JP2021018664A (ja) 情報処理システム、情報処理方法、及びプログラム
US10667057B1 (en) Systems and methods of tracking users within a facility
US11755652B2 (en) Information-processing device and information-processing method
TWM599424U (zh) 用於管理會議出席的系統
JP6820632B1 (ja) 情報処理装置、及びプログラム
KR20200090579A (ko) 스마트 디바이스를 이용한 통번역 방법 및 시스템
JP2022057109A (ja) 情報提供方法、情報処理システム、及びプログラム
Patil et al. MuteTrans: A communication medium for deaf

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210210

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210215

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20210421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210428

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210803

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211019

R150 Certificate of patent or registration of utility model

Ref document number: 6995273

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150