JP6939294B2 - 情報処理装置及びプログラム - Google Patents

情報処理装置及びプログラム Download PDF

Info

Publication number
JP6939294B2
JP6939294B2 JP2017174224A JP2017174224A JP6939294B2 JP 6939294 B2 JP6939294 B2 JP 6939294B2 JP 2017174224 A JP2017174224 A JP 2017174224A JP 2017174224 A JP2017174224 A JP 2017174224A JP 6939294 B2 JP6939294 B2 JP 6939294B2
Authority
JP
Japan
Prior art keywords
file
image
function
document
format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017174224A
Other languages
English (en)
Other versions
JP2019049903A (ja
Inventor
賢吾 得地
賢吾 得地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2017174224A priority Critical patent/JP6939294B2/ja
Priority to US16/019,557 priority patent/US11006017B2/en
Priority to CN201811007885.2A priority patent/CN109491969B/zh
Publication of JP2019049903A publication Critical patent/JP2019049903A/ja
Priority to US17/239,706 priority patent/US20210250463A1/en
Application granted granted Critical
Publication of JP6939294B2 publication Critical patent/JP6939294B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/116Details of conversion of file system types or formats
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32112Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate computer file, document page or paper sheet, e.g. a fax cover sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0094Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3247Data linking a set of images to one another, e.g. sequence, burst or continuous capture mode

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、情報処理装置及びプログラムに関する。
特許文献1には、複数の機器を連携させる技術が開示されている。
特開2014−16898号公報
本発明の目的は、連携機能の情報を提供することにある。
請求項1に記載の発明は、選択された複数のファイルに応じた連携機能の通知を制御する制御手段を有し、前記制御手段は、前記ファイルに紐付く画像中の部分が選択された場合、その選択された前記部分に応じた前記連携機能の通知を制御する、情報処理装置である。
請求項2に記載の発明は、前記ファイルは、制御可能なアプリケーションソフトウェアによって実行される前の状態のファイルである、ことを特徴とする請求項1に記載の情報処理装置である。
請求項に記載の発明は、前記制御手段は、選択されたファイルの形式に応じた連携機能の通知を制御する、ことを特徴とする請求項1又は請求項2に記載の情報処理装置である。
請求項に記載の発明は、前記制御手段は、互いに形式の異なる複数のファイルが選択された場合、その選択されたファイルの形式に応じた連携機能の通知を制御する、ことを特徴とする請求項に記載の情報処理装置である。
請求項に記載の発明は、前記制御手段は、互いに形式が同じ複数のファイルが選択された場合、その選択されたファイルの形式に応じた連携機能の通知を制御する、ことを特徴とする請求項に記載の情報処理装置である。
請求項に記載の発明は、前記制御手段は、複数のファイルの選択の順番に応じた連携機能の通知を制御する、ことを特徴とする請求項1から請求項何れかに記載の情報処理装置である。
請求項7に記載の発明は、前記制御手段は、選択された複数の部分の組み合わせに応じた連携機能の通知を制御する、ことを特徴とする請求項に記載の情報処理装置である。
請求項に記載の発明は、前記連携機能は、各ファイルに紐付けられているソフトウェアを使用して実行可能な機能である、ことを特徴とする請求項1から請求項何れかに記載の情報処理装置である。
請求項に記載の発明は、前記連携機能は、選択されたファイルに対して実行される機能である、ことを特徴とする請求項1から請求項何れかに記載の情報処理装置である。
請求項1に記載の発明は、前記連携機能は、選択された複数のファイルの中の第1ファイルに含まれる情報を第2ファイルに追加する機能である、ことを特徴とする請求項に記載の情報処理装置である。
請求項1に記載の発明は、選択されたファイルの形式に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、ことを特徴とする請求項1に記載の情報処理装置である。
請求項1に記載の発明は、選択されたファイルの最終保存日に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、ことを特徴とする請求項1に記載の情報処理装置である。
請求項1に記載の発明は、選択されたファイルの名称に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、ことを特徴とする請求項1に記載の情報処理装置である。
請求項1に記載の発明は、前記制御手段は、前記第1ファイルと前記第2ファイルに対して連携機能を実行することで、前記第1ファイルと前記第2ファイルを編集せずに、その実行の結果としての第3ファイルを生成する、ことを特徴とする請求項1から請求項1何れかに記載の情報処理装置である。
請求項1に記載の発明は、前記制御手段は、複数のファイルの選択の仕方に応じた連携機能の通知を制御する、ことを特徴とする請求項1から請求項1何れかに記載の情報処理装置である。
請求項1に記載の発明は、コンピュータを、選択された複数のファイルに応じた連携機能の通知を制御する制御手段、として機能させ、前記制御手段は、前記ファイルに紐付く画像中の部分が選択された場合、その選択された前記部分に応じた前記連携機能の通知を制御する、プログラムである。
請求項1,2,に記載の発明によれば、連携機能の情報が提供される。
請求項に記載の発明によれば、ファイルの形式に応じた連携機能の情報が提供される。
請求項に記載の発明によれば、ファイルの選択順に応じた連携機能の情報が提供される。
請求項,7に記載の発明によれば、画像中の部分に応じた連携機能の情報が提供される。
請求項に記載の発明によれば、ファイルに紐付けられているソフトウェアを使用して連携機能が実行される。
請求項に記載の発明によれば、選択されたファイルに連携機能が実行される。
請求項1に記載の発明によれば、簡易な操作によって、第1ファイルの情報を第2ファイルに追加される。
請求項1,1,1に記載の発明によれば、簡易な操作で、追加対象のファイルと追加先のファイルが選択される。
請求項1に記載の発明によれば、元の第1ファイルと第2ファイルはそのままの状態で保持されて、新たなファイルが生成される。
請求項1に記載の発明によれば、ファイルの選択の仕方に応じた連携機能の情報が提供される。
本発明の実施形態に係る端末装置を示すブロック図である。 連携機能管理テーブルの一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 変形例1に係る連携機能管理テーブルの一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 画面の一例を示す図である。 文書の一例を示す図である。 文書の一例を示す図である。 文書の一例を示す図である。 画像の一例を示す図である。 文書の一例を示す図である。
図1を参照して、本発明の実施形態に係る情報処理装置としての端末装置について説明する。図1には、本実施形態に係る端末装置の一例が示されている。端末装置10は、パーソナルコンピュータ(PC)、タブレットPC、スマートフォン、携帯電話、等の装置である。また、端末装置10は、ウェアラブル端末(腕時計型端末、リストバンド型端末、眼鏡型端末、指輪型端末、コンタクトレンズ型端末、体内埋め込み型端末、ヒアラブル端末等)であってもよい。以下、端末装置10の構成について詳しく説明する。
通信部12は通信インターフェースであり、他の装置にデータを送信する機能、及び、他の装置からデータを受信する機能を有する。通信部12は、無線通信機能を有する通信インターフェースであってもよいし、有線通信機能を有する通信インターフェースであってもよい。通信部12は、例えば、1又は複数の種類の通信方式に対応しており、通信相手に適した通信方式(つまり、通信相手が対応している通信方式)に従って通信相手と通信してもよい。通信方式は、例えば、赤外線通信、可視光通信、Wi−Fi(登録商標)通信、近接無線通信(例えばNFC(Near Field Communication)等)、等である。近接無線通信としては、Felica(登録商標)、Bluetooth(ブルートゥース)(登録商標)、RFID(Radio Frequency Identifier)等が用いられる。もちろん、別の方式の無線通信が近接無線通信として用いられてもよい。通信部12は、例えば、通信相手に応じて通信方式や周波数帯域を切り替えてもよいし、周囲の環境に応じて通信方式や周波数帯域を切り替えてもよい。
記憶部14はハードディスクやメモリ(例えばSSD等)等の記憶装置である。記憶部14には、例えば、連携機能管理情報16、各種のファイル(データ)、各種のプログラム(OS(Operating System)、アプリケーションソフトウェア等)、他の装置のアドレスを示す情報、等が記憶されている。もちろん、それらは別々の記憶装置に記憶されてもよいし、1つの記憶装置に記憶されてもよい。
連携機能管理情報16は、複数の機能を連携させることによって実行される連携機能を管理するための情報である。複数の機能を連携させることによって、1又は複数の連携機能が実現される。連携機能は、複数のソフトウェアを連携させることによって実現される機能である。もちろん、連携機能は、ハードウェアとしての機器が有する機能と、ソフトウェアによって実現される機能と、を連携させることによって実現される機能であってもよいし、複数の機器を連携させることによって実現される機能であってもよい。なお、機器は、例えば、画像形成機能を備えた画像形成装置、PC、タブレットPC、スマートフォン、携帯電話、ロボット(人型ロボット、人以外の動物型ロボット、それら以外のロボット等)、プロジェクタ、液晶ディスプレイ等の表示装置、記録装置、再生装置、カメラ等の撮像装置、冷蔵庫、炊飯器、電子レンジ、コーヒーメーカー、掃除機、洗濯機、空調機、照明機器、時計、監視カメラ、自動車、二輪車、航空機(例えば無人航空機(いわゆるドローン))、ゲーム機、各種のセンシング機器(例えば温度センサ、湿度センサ、電圧センサ、電流センサ等)等の装置である。機器は、ユーザに対してアウトプットを出力する機器(例えば画像形成装置やPC等)であってもよいし、ユーザに対してアウトプットを出力しない機器(例えばセンシング機器)であってもよい。また、連携機能を実行する複数の機器の中のすべての機器が、ユーザに対してアウトプットを出力する機器であってもよいし、一部の機器がユーザに対してアウトプットを出力する機器であり、他の機器がユーザに対してアウトプットを出力しない機器であってもよいし、すべての機器がユーザに対してアウトプットを出力しない機器であってもよい。機器の概念の範疇には機器全般が含まれてもよい。例えば、情報機器、映像機器、音響機器、その他の機器も、本実施形態に係る機器の範疇に含まれてもよい。また、複数のアウトプット機能を有する機器(ユーザに対してアウトプットを出力する機器であって複数のアウトプット機能を有する機器)とアウトプット機能を有していないセンシング機器(ユーザに対してアウトプットを出力しない機器)とを連携させる場合、連携機能管理情報16には、特定のセンシング機器と当該複数のアウトプット機能の中の特定のアウトプット機能との組み合わせを示す情報が含まれてもよい。こうすることで、複数のアウトプット機能の中から、特定のセンシング機器と組み合わせて使用されるアウトプット機能が特定される。
連携機能について更に詳しく説明する。連携機能は、複数のファイル(データ)がユーザによって選択された場合に、当該複数のファイルを対象にして実行される機能である。例えば、個々のファイル毎に、当該ファイルに対して処理を実行するソフトウェア(アプリケーション)が紐付けられている。連携機能は、ユーザによって選択された複数のファイルのそれぞれに紐付けられているアプリケーションを連携させることによって実現される機能である。
ファイルは、例えば、文書ファイル、画像ファイル、動画ファイル、表計算ファイル、プレゼンテーション用ファイル、図形(図面)ファイル、音声ファイル等である。
文書ファイルは、文書形式(文書フォーマット)を有するファイルであり、文字列やその他の情報によって構成されるファイルである。画像や表や図形が、その他の情報として文書ファイルに含まれてもよい。文書形式は、例えばテキスト形式やドキュメント形式等である。テキスト形式を有するデータ(例えば、拡張子として文字列「.txt」が紐付いているデータ)や、ドキュメント形式を有するデータ(例えば、拡張子として文字列「.doc」や「.docx」が紐付いているデータ)等が、文書ファイルに該当する。
画像ファイルは、画像形成(画像フォーマット)を有するファイルである。画像ファイルは、ラスター形式を有する画像データであってもよいし、ベクター形式を有する画像データであってもよい。画像形式は、例えばJPEG形式、BMP(ビットマップ)形式、PDF形式、GIF形式、TIFF形式、PICT形式等である。JPEG形式を有するデータ(拡張子として文字列「.jpeg」が紐付いているデータ)、BMP形式を有するデータ(拡張子として文字列「.bmp」が紐付いているデータ)、PDF形式を有するデータ(拡張子として文字列「.pdf」が紐付いているデータ)、GIF形式を有するデータ(拡張子として文字列「.gif」が紐付いているデータ)、TIFF形式を有するデータ(拡張子として文字列「.tiff」が紐付いているデータ)、PNG形式を有するデータ(拡張子として文字列「.png」が紐付いているデータ)、PICT形式を有するデータ(拡張子として文字列「.pict」が紐付いているデータ)等が、画像ファイルに該当する。もちろん、これら以外の形式を有する画像データが、本実施形態に係る画像ファイルとして用いられてもよい。
動画ファイルは、動画形式(動画フォーマット)を有するファイルである。動画形式は、例えばAVI形式、MP4形式、MOV形式、MPEG2-TS形式、MPEG2-PS形式、WMV形式、FLV形式等である。AVI形式を有するデータ(拡張子として文字列「.avi」が紐付いているデータ)、MP4形式を有するデータ(拡張子として文字列「.mp4」が紐付いているデータ)、MOV形式を有するデータ(拡張子として文字列「.mov」が紐付いているデータ)、MPEG2-TS形式を有するデータ(拡張子として文字列「.m2ts」が紐付いているデータ)、MPEG2-PS形式を有するデータ(拡張子として文字列「.mpeg」が紐付いているデータ)、WMV形式を有するデータ(拡張子として文字列「.wmv」が紐付いているデータ)、FLV形式を有するデータ(拡張子として文字列「.flv」が紐付いているデータ)等が、動画ファイルに該当する。もちろん、これら以外の形式を有する動画データが、本実施形態に係る動画ファイルとして用いられてもよい。
表計算ファイルは、表形式(表フォーマット)を有するファイルであり、表やグラフやその他の情報によって構成されるファイルである。文字列や画像や図形が、その他の情報として表計算ファイルに含まれてもよい。例えば、拡張子として文字列「.csv」や「.xls」や「.xlsx」が紐付いているデータである。
プレゼンテーション用ファイルは、プレゼンテーション用のシート形式(シートフォーマット)を有するファイルである。例えば、拡張子として文字列「.ppt」や「.pptx」が紐付いているデータが、プレゼンテーション用ファイルに該当する。プレゼンテーション用ファイルは、例えば、文字列、画像(静止画像や動画像)、図形、音声等によって構成される。
図形ファイルは、図形(図面)形式(図形フォーマット)を有するファイルである。図形ファイルは、例えば、図形作成ソフトウェア(例えば2次元CADや3次元CAD等)によって作成されるファイルである。例えば、DXF形式(フォーマット)を有するデータ(拡張子として文字列「.dxf」が紐付いているデータ)、DWG形式を有するデータ(拡張子として文字列「.dwg」が紐付いているデータ)等である。その他、拡張子として「.vsd」や「.vsdx」が紐付いているデータが図形ファイルとして扱われてもよい。
音声ファイルは、音声形式(音声フォーマット)を有するファイルである。音声形式は、例えば、非圧縮音声形式(WAV形式、AIFF形式、BWF形式等)、非可逆圧縮音声形式(mp3形式、AAC形式、WMA形式等)、可逆圧縮音声形式(TAK形式、FLAC形式等)等である。非圧縮音声形式を有するデータ(拡張子として「.wav」等が紐付いているデータ)、非可逆圧縮音声形式を有するデータ(拡張子として文字列「.mp3」等が紐付いているデータ)、非圧縮音声形式を有するデータ(拡張子として文字列「.tak」等が紐付いているデータ)等が、音声ファイルに該当する。
本実施形態では、連携機能は、ファイルの形式(属性)毎に定められており、連携機能管理情報16は、例えば、複数のファイル形式の組み合わせを示す情報と、連携機能を示す情報(連携機能情報)と、の対応付けを示す情報である。連携機能情報は、例えば、連携機能IDや連携機能名称等である。ファイル形式は、上記の文書形式、画像形式、動画形式、表形式、シート形式、図形形式、音声形式等である。連携機能管理情報16を参照することで、複数のファイル形式の組み合わせに対応する連携機能が特定(識別)される。
例えば、連携機能に利用される機能が更新された場合(例えば、その機能を実現するためのソフトウェアが更新(アップデート)された場合)、その更新に伴って、その連携機能が更新され、これにより、連携機能管理情報16も更新される。その結果、更新前には互いに連携不可能であった複数の機能による連携機能が更新後には利用可能になったり、それとは逆に、更新前には利用可能な連携機能が更新後には利用不可能になったりする場合がある。更新後に利用可能になった連携機能を示す連携機能情報が、連携機能管理情報16に登録され、更新後に利用不可能になった連携機能を示す連携機能情報が、連携機能管理情報16から削除され、又は、使用不可な情報として登録される。端末装置10は、任意のタイミング、定期的、又は、ユーザ等によって指定されたタイミング等で、連携機能管理情報16を更新してもよい。例えば、アップデート用のソフトウェアが端末装置10にインストールされることによって、機能が更新される。そのアップデートは、例えばインターネット等を利用して行われてもよい。また、新たなソフトウェアが端末装置10にインストールされることによって、利用可能な連携機能が追加され、これによっても連携機能管理情報16が更新される。
連携機能は、互いに異なる複数の機能(例えば、互いに異なるソフトウェア)を連携させることによって実現される機能であってもよいし、同一の機能(例えば、同一のソフトウェア)を連携させることによって実現される機能であってもよい。連携機能は、連携前には利用できなかった機能であってもよい。連携前には利用できなかった機能は、同じ機能を連携させることによって利用可能になる機能であってもよいし、互いに異なる機能を組み合わせることによって利用可能になる機能であってもよい。例えば、文書作成機能(文書作成ソフトウェア)と画像表示機能(画像表示ソフトウェア(例えば画像ビューア))とを連携させることによって、連携機能として、文書への画像の挿入(添付)機能や、画像上への文書(文字列、テキスト)の重畳機能が実現される。すなわち、文書作成機能と画像表示機能とを連携させることによって、画像挿入機能やテキスト重畳機能が実現される。
連携機能の概念の範疇には、複数の機能を連携させることによって新たな機能の実行が可能となる合体機能が含まれてもよい。例えば、複数の表示機能を組み合わせることで、合体機能としての拡張表示機能が実現されてもよい。また、複数の撮影機能を組み合わせることで、合体機能としての撮影領域拡張機能が実現されてもよい。また、通話機能と翻訳機能とを組み合わせることで、合体機能としての翻訳通話機能(通話内容を翻訳する機能)が実現されてもよい。このように、連携機能の概念の範疇には、互いに同一の種類の機能を連携させることで実現可能となる機能や、互いに異なる種類の機能を連携させることで実現可能となる機能が含まれてもよい。
連携機能管理情報16によって管理されている連携機能は、端末装置10にインストールされているソフトウェアによって実行可能な機能であってもよいし、外部装置(例えばサーバや他の端末装置等)にインストールされているソフトウェアによって実行可能な機能であってもよいし、端末装置10にインストールされているソフトウェアと外部装置にインストールされているソフトウェアとによって実行可能な機能であってもよい。
なお、連携機能管理情報16の別の例として、複数の機能(複数のソフトウェア)の組み合わせを示す情報と、当該複数の機能を連携させることによって実行可能な連携機能を示す情報(連携機能情報)と、が対応付けられていてもよい。
記憶部14には、利用可能機能管理情報が記憶されていてもよい。利用可能機能管理情報は、各ユーザが利用可能な機能を管理するための情報である。例えば、ユーザを識別するための情報(ユーザ識別情報)と、当該ユーザが利用可能な機能を示す機能情報(連携機能情報を含む)と、の対応付けを示す情報である。ユーザが利用可能な機能は、例えば、ユーザに無償で提供された機能や、ユーザが購入した機能等である。ユーザ識別情報は、例えば、ユーザIDや氏名等のユーザアカウント情報である。利用可能機能管理情報を参照することで、各ユーザが利用可能な機能が特定(識別)される。利用可能機能管理情報は、例えば、ユーザに無償又は有償で機能が提供される度に更新される。
UI部18はユーザインターフェース部であり、表示部と操作部を含む。表示部は、例えば液晶ディスプレイ等の表示装置である。操作部は、例えばタッチパネルやキーボード等の入力装置である。もちろん、表示部と操作部を兼ねたユーザインターフェース(例えば、タッチ式のディスプレイや、ディスプレイ上に電子的にキーボード等を表示する装置等を含む)であってもよい。
制御部20は、端末装置10の各部の動作を制御する。制御部20は、例えば、通信部12による通信、UI部18の表示部への各種の情報の表示、等を制御する。また、制御部20は特定部22を含む。
特定部22は、連携機能管理情報16において、ユーザによって選択された複数のファイルの形式(ファイル形式)の組み合わせに対応付けられている連携機能を特定する機能を有する。これにより、複数のファイルが選択されたときに実行可能な連携機能が特定される。
制御部20は、特定部22によって特定された連携機能を通知(案内)する制御を行う。制御部20は、その連携機能を示す情報をUI部18に表示させてもよいし、スピーカ等を用いることで、その連携機能を示す情報を音声情報として発してもよい。また、制御部20は、その連携機能の実行を制御してもよい。また、ユーザによるファイルの選択は、UI部18の表示部の画面上で行われてもよいし、音声によって行われてもよい。例えば、ファイルに紐付く画像がUI部18の画面に表示されている場合において、ユーザが、その画面上で画像を選択することでファイルを選択してもよい。別の例として、ファイルに紐付く画像がUI部18の画面に表示されているか否かに関わらず、ユーザが音声によってファイルを選択してもよい。例えば、ユーザがファイル名を音声によって発した場合、その音声はマイク等の集音手段によって集音され、ファイル名を示す音声情報が端末装置10に入力される。特定部22は、そのファイル名を有するファイルがユーザによって選択されたと判断して連携機能を特定する。このように、ファイルを選択するための操作と連携機能の通知は、画面上の表示によって行われてもよいし、音声によって行われてもよい。画面上の表示と音声とを組み合わせてもよい。例えば、画面上でユーザがファイルに紐付く画像を選択することでファイルが選択され、連携機能を示す情報が画面に表示されてもよい。別の例として、画面上でユーザがファイルに紐付く画像を選択することでファイルが選択され、連携機能を示す情報が音声によって発せられてもよい。更に別の例として、ファイル名が音声情報として端末装置10に入力されることでファイルが選択され、連携機能を示す情報が画面に表示されてもよい。更に別の例として、ファイル名が音声情報として端末装置10に入力されることでファイルが選択され、連携機能を示す情報が音声によって発せられてもよい。
なお、ユーザの利用可能機能が管理されている場合、特定部22は、ユーザ識別情報を受け、記憶部14に記憶されている利用可能機能管理情報において当該ユーザ識別情報に対応付けられている機能を特定してもよい。例えば、特定部22は、端末装置10にログインしているユーザの識別情報を受け、利用可能機能管理情報において当該ユーザの識別情報に対応付けられている機能を特定し、更に、当該ユーザによって選択された複数のファイルのそれぞれのファイル形式を示す情報を受け、連携機能管理情報16において当該複数のファイル形式の組み合わせに対応付けられている連携機能を特定する。利用可能機能管理情報において当該ユーザの識別情報に対応付けられている機能であって、ユーザによって選択された複数のファイルのそれぞれのファイル形式の組み合わせに対応付けられている連携機能が、当該ユーザが利用可能な連携機能である。
なお、連携機能管理情報16は、端末装置10以外の外部装置(例えばサーバ等)に記憶されてもよい。この場合、連携機能管理情報16は端末装置10に記憶されていなくてもよい。また、特定部22は、外部装置に設けられてもよい。この場合、特定部22は端末装置10に設けられていなくてもよい。つまり、連携機能の管理や、ファイル形式に基づく連携機能の特定処理は、端末装置10によって行われてもよいし、外部装置によって行われてもよい。外部装置によって当該特定処理が行われた場合、その処理の結果(例えば、特定された連携機能を示す情報)が当該外部装置から端末装置10に送信され、UI部18に表示される。
以下、端末装置10について更に詳しく説明する。
図2を参照して、連携機能管理情報16について詳しく説明する。図2には、連携機能管理情報16としての連携機能管理テーブルの一例が示されている。連携機能管理テーブルにおいては、一例として、複数のファイル形式の組み合わせを示す情報と、連携機能を示す情報(連携機能情報)と、が互いに対応付けられている。例えば、ユーザがUI部18を用いて複数のファイルを選択した場合、特定部22は、連携機能管理テーブルにおいて、当該複数のファイルのそれぞれのファイル形式の組み合わせに対応付けられている連携機能を特定する。制御部20は、例えば、その連携機能に関する情報(例えば、連携機能情報や連携機能の説明情報等)をUI部18に表示させる。なお、図2には、2つのファイル形式の組み合わせが示されているが、3つ以上のファイル形式の組み合わせと連携機能との対応付けが連携機能管理テーブルに登録されていもてよい。
以下、図2に示されている各連携機能について説明する。
図2中の「文書形式」は、テキスト形式(拡張子が「.txt」である)やドキュメント形式(拡張子が「.doc」や「.docx」である)である。「表形式」は、拡張子が「.csv」や「.xls」等で表現される形式である。画像形式は、拡張子が「.jpeg」や「.pdf」等で表現される形式である。動画形式は、拡張子が「.avi」や「.mpeg」等で表現される形式である。シート形式は、拡張子が「.ppt」等で表現される形式である。図2には、図形形式や音声形式が示されていないが、これらを含む組み合わせと連携機能との対応付けが連携機能管理テーブルに登録されてもよい。もちろん、図2に示されているファイル形式以外のファイル形式を含む組み合わせと連携機能との対応付けが定められて連携機能管理テーブルに登録されてもよい。
以下、図2に示されている各連携機能について説明する。ユーザによって文書ファイルAと表計算ファイルBが選択された場合、文書形式と表形式との組み合わせに対応付けられている「表を文書に挿入する機能」と「文書を表に挿入する機能」が連携機能として特定される。「表を文書に挿入する機能」は、文書ファイルAによって表される文書中に、表計算ファイルBによって表される表を挿入する機能である。「文書を表に挿入する機能」は、上記の表計算ファイルBによって表される表中に、文書ファイルAによって表される文書を挿入する機能である。
ユーザによって文書ファイルAと画像ファイルCが選択された場合、文書形式と画像形式との組み合わせに対応付けられている「画像を文書に挿入する機能」と「文書を画像上に重畳する機能」が連携機能として特定される。「画像を文書に挿入する機能」は、文書ファイルAによって表される文書に、画像ファイルCによって表される画像を挿入する機能である。「文書を画像上に重畳する機能」は、画像ファイルCによって表される画像上に、文書ファイルAによって表される文書を重畳する機能である。
ユーザによって文書ファイルAと動画ファイルDが選択された場合、文書形式と動画形式との組み合わせに対応付けられている「動画を文書に挿入する機能」と「静止画を文書に挿入する機能」が連携機能として特定される。「動画を文書に挿入する機能」は、文書ファイルAによって表される文書に、動画ファイルDによって表される動画を挿入する機能である。「静止画を文書に挿入するという機能」は、文書ファイルAによって表される文書に、動画ファイルDを構成する1又は複数のフレーム(静止画)を挿入する機能である。例えば、文書ファイルAは、動画に対応していない文書ファイル、つまり、動画を挿入することができないファイルに該当する場合において、「静止画を文書に挿入する機能」が実行された場合、動画ファイルD中の1又は複数フレーム(静止画)が、文書ファイルAによって表される文書に挿入される。
同一のファイル形式を有する複数のファイルがユーザによって選択されてもよい。例えば、ユーザによって文書ファイルA1,A2が選択された場合、文書形式と文書形式との組み合わせに対応付けられている「文書同士を合体する機能」が連携機能として特定される。「文書同士を合体する機能」は、文書ファイルA1,A2が表す文書を合体する(例えば、2つの文書を結合する)ことで、文書ファイルA1,A2を残しつつ、又は、文書ファイルA1,A2を残さずに、別の新たな文書ファイルA3を生成する機能である。
ユーザによって表計算ファイルB1,B2が選択された場合、表形式と表形式との組み合わせに対応付けられている「表同士を合体する機能」が連携機能として特定される。「表同士を合体する機能」は、表計算ファイルB1,B2が表す表を合体する(例えば、2つの表を結合する)ことで、表計算ファイルB1,B2を残しつつ、又は、表計算ファイルB1,B2を残さずに、別の新たな表計算ファイルB3を生成する機能である。
ユーザによって動画ファイルD1,D2が選択された場合、動画形式と動画形式との組み合わせに対応付けられている「動画同士を合体する機能」が連携機能として特定される。「動画同士を合体する機能」は、動画ファイルD1,D2が表す動画を合体する(例えば、2つの動画を結合する)ことで、動画ファイルD1,D2を残しつつ、又は、動画ファイルD1,D2を残さずに、別の新たな動画ファイルD3を生成する機能である。
その他、ユーザによってプレゼンテーション用ファイルEと文書ファイルAが選択された場合、シート形式と文書形式との組み合わせに対応付けられている「文書をプレゼンテーション用シートに挿入する機能」が連携機能として特定される。「文書をプレゼンテーション用シートに挿入する機能」は、プレゼンテーション用ファイルEによって表されるシートに、文書ファイルAによって表される文書を挿入する機能である。
以下、端末装置10の動作について詳しく説明する。
図3には、端末装置10のUI部18に表示される画面の一例が示されている。画面24には、各種のファイルに紐付く画像(例えばアイコン)や、各種のソフトウェアに紐付く画像(例えばアイコン)が表示される。
図3に示す例では、文書ファイルAに紐付く画像26と画像ファイルCに紐付く画像28が、画面24に表示されている。ユーザが画面24上で画像26と画像28を選択した場合、文書ファイルAと画像ファイルCが連携対象のファイルとして選択される。
例えば、ユーザが画面24上で、矢印30で示すように、画像26と画像28とを互いに繋げた場合、特定部22は、画像26に紐付く文書ファイルAと画像28に紐付く画像ファイルCとを連携対象のファイルとして識別する。また、特定部22は、文書ファイルAの拡張子(例えば、文書ファイルAの属性情報として文書ファイルAに紐付けられている拡張子)に基づいて文書ファイルAのファイル形式を識別する。同様に、特定部22は、画像ファイルCの拡張子(例えば、画像ファイルCの属性情報として画像ファイルCに紐付けられている拡張子)に基づいて画像ファイルCのファイル形式を識別する。なお、拡張子は、ファイル名に含まれている場合がある。文書ファイルAの拡張子が、「.txt」や「.docx」等のように文書形式を表す拡張子に該当する場合、特定部22は、文書ファイルAのファイル形式は文書形式であると識別する。画像ファイルCの拡張子が、「.jpeg」等のように画像形式を表す拡張子に該当する場合、特定部22は、画像ファイルCのファイル形式は画像形式であると識別する。そして、特定部22は、図2に示されている連携機能管理テーブルにおいて、文書形式と画像形式との組み合わせに対応付けられている連携機能(「画像を文書に挿入する機能」と「文書を画像上に重畳する機能」)を特定する。もちろん、ユーザは、音声によってファイルを選択してもよい。以下の実施形態においても同様である。
例えば、ユーザが画面24上で複数の画像(上記の例では画像26,28)を指示子(例えばユーザの指、ペン、スタイラス等)によってなぞることで(例えば画像をタッチしてなぞることで)、当該複数の画像同士が繋げられる。制御部20は、画面24への指示子の接触を検知し、画面24上での指示子の移動を検知する。なお、画像26,28を指定する順番や繋げる順番は、矢印30の向きとは逆であってもよい。
上記のように特定部22によって連携機能が特定されると、制御部20は、特定された連携機能を示す情報をUI部18に表示させる。図4には、その表示例が示されている。制御部20は、UI部18の表示部に画面32を表示させ、その画面32に、特定部22によって特定された連携機能を示す情報を表示させる。上記の例では、連携機能としての「画像を文書に挿入する機能」を示す情報と、「文書を画像上に重畳する機能」を示す情報が、画面32に表示される。もちろん、連携機能を示す情報が音声情報として発せられてもよい。以下の実施形態においても同様である。
ユーザが画面32上で連携機能を指定して実行指示を与えた場合、制御部20は、その指定された連携機能を実行する。例えば、「画像を文書に挿入する機能」の実行指示がユーザによって与えられた場合、制御部20は、文書ファイルAによって表される文書中に、画像ファイルCによって表される画像を挿入する。もちろん、ユーザは、音声によって連携機能の実行指示を与えてもよい。以下の実施形態においても同様である。
より詳しく説明すると、制御部20は、文書アプリケーションと画像アプリケーションを起動させる。文書アプリケーションは、文書形式を有するファイルの生成や編集や表示を行う機能を有するソフトウェア(プログラム)である。画像アプリケーションは、画像形式を有するファイルの生成や編集や表示を行う機能を有するソフトウェア(プログラム)である。なお、文書アプリケーションは、文書ファイルAに予め紐付けられていてもよいし、画像アプリケーションは、画像ファイルCに予め紐付けられていてもよい。制御部20は、画像アプリケーションが有する機能を利用することで、画像ファイルCから画像をコピーし、文書アプリケーションが有する機能を利用することで、文書ファイルAによって表される文書中に当該画像を貼り付ける。これにより、画像が挿入された文書が生成される。なお、制御部20は、画像アプリケーションが有る機能を利用することで、画像ファイルCによって表される画像から特定部分を表す部分画像を抽出し、その部分画像を文書中に貼り付けてもよい。文書において画像が貼り付けられる領域は、予め定められた領域であってもよいし、ユーザによって指定された領域であってもよいし、その画像に関連する文字列が記述されていると推測される領域であってもよい。例えば、制御部20は、画像に表されている特徴部分を表現する文字列を推測や検索し、文書において、その文字列と同一又は類似の意味を有する文字列が記述されている領域を、画像に関連する文字列が記述されている領域であると推測する。もちろん、別の手法によって、その領域が推測されてもよい。
「文書を画像上に重畳する機能」の実行指示がユーザによって与えられた場合も上記と同様に、文書アプリケーションが有する機能によって、文書ファイルAによって表される文書の全部又は一部がコピーされ、コピーされた文書が、画像ファイルCによって表される画像上に重畳される。文書においてコピーされる部分は、予め定められていてもよいし、ユーザによって指定されてもよい。また、画像において文書が重畳される部分は、予め定められていてもよいし、ユーザによって指定されてもよい。
制御部20は、連携機能を実行することで新たなファイルを生成してもよい。この場合、連携対象として選択された複数のファイル自体は編集されない。例えば、文書ファイルAと画像ファイルCが連携対象のファイルとして選択され、例えば「画像を文書に挿入する機能」の実行指示が与えられた場合、制御部20は、文書ファイルAによって表される文書中に画像ファイルCによって表される画像を貼り付けることで、新たな文書ファイルACを生成する。この場合、図5に示すように、制御部20は、文書ファイルACに紐付く新たな画像34(例えばアイコン)を生成し、その画像34を画面24に表示させる。この場合、文書ファイルAと画像ファイルC自体は編集されず、画像26,28は画面24に表示される。
「文書を画像上に重畳する機能」の実行指示が与えられた場合も同様に、制御部20は、画像ファイルCによって表される画像上に、文書ファイルAによって表される文書の全部又は一部を重畳させることで、新たな画像ファイルCAを生成し、その画像ファイルCAに紐付く新たな画像を生成する。その新たな画像は画面24に表示される。この場合も、文書ファイルAと画像ファイルC自体は編集されず、画像26,28は画面24に表示される。
別の例として、制御部20は、連携機能を実行することで、新たなファイルを生成せずに、連携対象として選択されたファイル自体を編集(加工等を含む)してもよい。上記の例で説明すると、制御部20は、文書ファイルAによって表される文書中に画像ファイルCによって表される画像を貼り付け、その画像の貼り付けが反映された文書ファイルを文書ファイルAとして保存する。この場合、文書ファイルAが更新される。
以下、図6を参照して、別の操作例について説明する。図6には、画面24が示されている。画面24には、図3に示す例と同様に、画像26,28が表示されている。ユーザが画面24上で、例えば矢印36で示すように、画像26を画像28まで移動させて画像28上に重ねた場合、特定部22は、画像26に紐付く文書ファイルAと画像28に紐付く画像ファイルCを連携対象のファイルとして識別する。また、上記と同様に、特定部22は、文書ファイルAと画像ファイルCのそれぞれのファイル形式を特定し、連携機能管理テーブルにおいて、文書形式と画像形式との組み合わせに対応付けられている連携機能を特定する。特定された連携機能を示す情報は、図4に示すように、UI部18の表示部に表示される。例えば、ユーザが指示子を用いてドラッグ&ドロップ操作することで、画像を他の画像に重ねる。図6に示す例では、ユーザは画像26をドラッグ操作し(破線で示す画像26)、画像28に重なる位置で画像26をドロップ操作している。なお、ユーザの音声指示に従って、重ね合わせ操作が行われてもよい。ユーザが画像28を画像26上に重ねた場合も、文書ファイルAと画像ファイルCが連携対象のファイルとして識別され、文書形式と画像形式との組み合わせに対応付けられている連携機能が特定される。
図6に示す例においても、連携機能の実行の結果、新たなファイル(例えば文書ファイルAC)が生成され、その新たなファイルに紐付く画像(例えば文書ファイルACに紐付く画像34)が生成されてもよい。別の例として、連携機能の実行の結果として、連携対象のファイル(例えば文書ファイルA)が更新されてもよい。
複数の画像が互いに重ねられた場合、制御部20は、その重ねられた状態を表す新たな合成画像を生成してもよい。合成画像は、連携機能の実行の結果が反映されたファイルに紐付く画像である。例えば、画像26,28が互いに重ねられて連携機能が実行されたものとする。この場合、制御部20は、画像26,28が重ねられた状態を表す新たな合成画像を生成する。合成画像は、画像28上に画像26が重ねられたそのままの状態を表す画像、又は、画像26上に画像28が重ねられたそのままの状態を表す画像であってもよいし、その状態を模式的に表す画像であってもよい。上記の例では、合成画像は、文書ファイルAC又は画像ファイルCAに紐付く画像(例えば図5に示されている画像34)である。なお、合成画像が生成された場合であっても、元の画像26,28はそのままの状態で表示される。
上記のように合成画像が生成された場合、制御部20は、合成画像を画面24に表示させる。その合成画像が、他のファイルに紐付く画像に重ねられた場合、特定部22は、合成画像に紐付くファイルと当該他のファイルを連携対象のファイルとして識別する。この場合、特定部22は、図2に示されている連携機能管理テーブルにおいて、合成画像に紐付くファイルのファイル形式と当該他のファイルのファイル形式との組み合わせに対応付けられている連携機能を特定する。その連携機能を示す情報は、UI部18の表示部に表示される。
例えば、合成画像が文書ファイルACに紐付く画像である場合、特定部22は、文書ファイルACのファイル形式は文書形式であると識別する。また、合成画像が画像ファイルCAに紐付く画像である場合、特定部22は、画像ファイルCAのファイル形式は画像形式であると識別する。
上記のように合成画像を生成して表示することで、連携対象として処理されたファイルを視覚的に認識しやすい状態にしてユーザに提供することが可能となる。
上記以外の方法によって連携対象のファイルが選択されてもよい。例えば、ファイルに紐付く画像に対して丸を付けるような描画操作によって、連携対象のファイルが選択されてもよい。また、特定部22は、予め定められた制限時間内にユーザによって選択されたファイルを、連携対象のファイルとして識別してもよい。制限時間の開始時点は、例えば、最初のファイルがユーザによって選択された時点である。その制限時間内に、複数のファイルに紐付く複数の画像が互いに繋げられたり、当該複数の画像が互いに重ねられたり、当該複数の画像に対して描画操作が行われたりした場合、特定部22は、当該複数のファイルを連携対象のファイルとして識別し、当該複数のファイルのファイル形式の組み合わせに対応付けられている連携機能を特定する。
なお、連携を解除する場合、ユーザが画面24上で解除対象のファイルを選択してもよいし、画面24上に表示された連携解除ボタンを押してもよい。
別の例として、連携対象のファイルが予め定められていてもよい。また、画面24上に連携用領域が定められ、特定部22は、その連携用領域に表示されている画像に紐付くファイルを連携対象のファイルとして識別してもよい。例えば、ユーザが、画面24上に表示されている画像を操作して連携用領域に移動させた場合、その画像に紐付くファイルは連携対象のファイルとして識別される。複数の画像が連携用領域に表示されている状態で、ユーザが連携機能の表示指示を与えた場合(例えば、その指示を与えるためのボタンをユーザが押した場合)、特定部22は、当該複数の画像に紐付く複数のファイルの形式の組み合わせに対応付けられている連携機能を特定する。その特定された連携機能を示す情報が、UI部18の表示部に表示される。例えば、連携領域に画像26,28が移動させられ、連携機能の表示指示が与えられた場合、図4に示されている情報が画面32に表示される。
(変形例1)
以下、変形例1について説明する。変形例1では、複数のファイルの選択順に応じて、連携機能に関する情報の表示や、実行される連携機能が変更される。
図7には、変形例1に係る連携機能管理テーブルの一例が示されている。この連携機能管理テーブルにおいては、一例として、ファイル形式の組み合わせを示す情報と、ファイルの選択順を示す情報と、連携機能と優先順位を示す情報(連携機能情報)と、が互いに対応付けられている。選択順は、ファイルの選択の順番であり、例えば、ファイルに紐付く画像を繋げる順番や重ねる順番である。例えばユーザが複数のファイルを順番に選択した場合、その選択の順番が「選択順」に相当する。より具体的には、ユーザが第1ファイルに紐付く第1画像を第2ファイルに紐付く第2画像に繋げた場合、第1ファイルの選択順が1番となり、第2ファイルの選択順が2番となる。また、ユーザが第1画像を第2画像上に重ねた場合、第1ファイルの選択順が1番となり、第2ファイルの選択順が2番となる。優先順位は、連携機能に関する情報の表示の優先順位である。
文書形式と画像形式との組み合わせに対応付けられている連携機能は、「画像を文書に挿入する機能」と「文書を画像上に重畳する機能」である。
例えば、文書ファイル、画像ファイルの順番で各ファイルがユーザによって選択された場合(例えば、文書ファイルに紐付く画像が画像ファイルに紐付く画像に繋げられた場合や、文書ファイルに紐付く画像が画像ファイルに紐付く画像上に重ねられた場合)、文書ファイルの選択順が1位となり、画像ファイルの選択順が2位となる。この場合、「文書を画像上に重畳する機能」の優先順位が「1位」となり、「画像を文書に挿入する機能」の優先順位が「2位」となる。この場合、「文書を画像上に重畳する機能」に関する情報が、「画像を文書に挿入する機能」に関する情報よりも優先的に表示される。例えば、「文書を画像上に重畳する機能」に関する情報が、「画像を文書に挿入する機能」に関する情報よりも上位に表示されたり、先に表示されたりする。
上記とは逆に、画像ファイル、文書ファイルの順番で各ファイルがユーザによって選択された場合(例えば、画像ファイルに紐付く画像が文書ファイルに紐付く画像に繋げられた場合や、画像ファイルに紐付く画像が文書ファイルに紐付く画像上に重ねられた場合)、画像ファイルの選択順が1位となり、文書ファイルの選択順が2位となる。この場合、「画像を文書に挿入する機能」の優先順位が「1位」となり、「文書を画像上に重畳する機能」の優先順位が「2位」となる。この場合、「画像を文書に挿入する機能」に関する情報が、「文書を画像上に重畳する機能」に関する情報よりも優先的に表示される。例えば、「画像を文書に挿入する機能」に関する情報が、「文書を画像上に重畳する機能」に関する情報よりも上位に表示されたり、先に表示されたりする。
以下、変形例1について具体例を挙げて説明する。図8には、画面24が示されている。画面24には、文書ファイルAに紐付く画像26と画像ファイルCに紐付く画像28が表示されている。
例えば、ユーザが画像26を先に選択し、矢印38で示すように画像26を画像28に繋げた場合、文書ファイルAの選択順が1位となり、画像ファイルCの選択順が2位となる。この場合、「文書を画像上に重畳する機能」の優先順位が「1位」となり、「画像を文書に挿入する機能」の優先順位が「2位」となる(図7参照)。図9には、このときの表示例が示されている。制御部20は、図9に示すように、UI部18の画面32に、「文書を画像上に重畳する機能」に関する情報を、「画像を文書に挿入する機能」に関する情報よりも優先的に(例えば上位に)表示させる。
上記とは逆に、ユーザが画像28を先に選択し、矢印40で示すように画像28を画像26に繋げた場合、画像ファイルCの選択順が1位となり、文書ファイルAの選択順が2位となる。この場合、「画像を文書に挿入する機能」の優先順位が「1位」となり、「文書を画像上に重畳する機能」の優先順位が「2位」となる。図10には、このときの表示例が示されている。制御部20は、図10に示すように、UI部18の画面32に、「画像を文書に挿入する機能」に関する情報を、「文書を画像上に重畳する機能」に関する情報よりも優先的に(例えば上位に)表示させる。
図9,10に示されている画面32上にて連携機能がユーザによって指定されて実行指示が与えられた場合、その指定された連携機能が実行される。
以上のように変形例1においては、ファイルの選択の順番に応じて、連携機能に関する情報の表示順位が変更される。ファイルの選択順は、ファイルに表されるコンテンツ(例えば、文書、画像、動画、表、シート、図形、音声等)の貼り付け対象や貼り付け先の順番を兼ねている。それ故、ファイルの選択順に応じて連携機能に関する情報の表示順位を変えることで、ユーザが利用するであろうと予測される連携機能に関する情報が優先的に表示される。つまり、ユーザが利用する可能性がより高いと予測される連携機能に関する情報が優先的に表示される。例えば、文書ファイルAに紐付く画像26、画像ファイルCに紐付く画像28の順番で各ファイルが選択された場合、「文書ファイルAによって表される文書を画像ファイルCによって表される画像上に重畳する」という連携機能がユーザによって利用されると予測される。また、画像ファイルCに紐付く画像28、文書ファイルAに紐付く画像26の順番で各ファイルが選択された場合、「画像ファイルCによって表される画像を文書ファイルAによって表される文書に挿入する」という連携機能がユーザによって利用されると予測される。それ故、ファイルを選択する順番に応じて連携機能に関する情報の表示順位を変えることで、ユーザが利用する可能性がより高い連携機能に関する情報が優先的に表示される。
(変形例2)
以下、変形例2について説明する。変形例2では、ファイル同士の主従関係に応じて、連携機能に関する情報の表示や、実行される連携機能が変更される。例えば、ファイルに表されるコンテンツ自体の編集が可能なファイルが主ファイルに該当し、コンテンツ自体の編集が不可能なファイルが従ファイルに該当する。一例として、文書ファイルに表される文書自体の編集が可能な場合、当該文書ファイルは主ファイルに該当する。また、画像ファイルに表される画像自体の編集が不可能な場合(つまり、画像上にコンテンツを重畳させることは可能であるが、当該画像自体の編集が不可能な場合)、当該画像ファイルは従ファイルに該当する。他のファイルについても同様である。もちろん、文書ファイルであっても、文書の編集が不可能な文書ファイルは従ファイルに該当し、画像ファイルであっても、画像の編集が可能な画像ファイルは主ファイルに該当する。
特定部22は、ファイル形式(つまり拡張子)に基づいて、ファイルが主ファイル又は従ファイルの何れかに該当するのかを判断してもよい。例えば、特定部22は、文書形式を有するファイル、表形式を有するファイル、シート形式を有するファイル、及び、図形形式を有するファイルは、主ファイルに該当すると判断し、画像形式を有するファイル、動画形式を有するファイル、及び、音声形式を有するファイルは、従ファイルに該当すると判断してもよい。もちろん、ファイルが主ファイル又は従ファイルの何れかに該当するのかという判断は、ファイル形式によって一概に判断されずに、連携対象として選択されたファイルを個別的に判断することで、当該ファイルが主ファイル又は従ファイルの何れかに該当するのかを判断してもよい。例えば、画像形式を有するファイルであっても、画像の編集が可能なファイルであれば、当該ファイルは主ファイルに該当してもよい。
以下、図11を参照して、変形例2について具体例を挙げて説明する。図11には、UI部18に表示される画面24が示されている。画面24には、文書ファイルAに紐付く画像26と画像ファイルCに紐付く画像28が表示されている。例えば符号42で示すように、ユーザが、画像26,28を囲むように領域を指定した場合(例えばユーザが画面24上を指示子によってなぞった場合)、特定部22は、画像26に紐付く文書ファイルAと画像28に紐付く画像ファイルCとを連携対象のファイルとして識別する。
また、特定部22は、文書ファイルAに紐付く拡張子に基づいて、文書ファイルAが主ファイル又は従ファイルの何れかに該当するのかを判断する。同様に、特定部22は、画像ファイルCに紐付く拡張子に基づいて、画像ファイルCが主ファイル又は従ファイルの何れかに該当するのかを判断する。文書ファイルAの拡張子は、例えば「.docx」であり、画像ファイルCの拡張子は、例えば「.jpeg」であるものとする。この場合、文書ファイルAは、文書形式を有し編集可能なファイルに該当するため、特定部22は、文書ファイルAが主ファイルに該当すると判断する。また、画像ファイルCは、画像形式を有し編集不可能なファイルに該当するため、特定部22は、画像ファイルCが従ファイルに該当すると判断する。もちろん、特定部22は、拡張子に基づいて判断せずに、文書ファイルAと画像ファイルCを個別的に判断することで、文書ファイルAと画像ファイルCが編集可能なファイルに該当するか否かを判断してもよい。
文書ファイルAが主ファイルに該当し、画像ファイルCが従ファイルに該当するため、画像ファイルCに表された画像が貼り付け対象のコンテンツに該当し、文書ファイルAに表された文書が当該画像の貼り付け先のコンテンツに該当する。この場合、特定部22は、「画像を文書に挿入する機能」を連携機能として特定する。制御部20は、「画像を文書に挿入する機能」に関する情報をUI部18に表示させる。特定部22によって複数の連携機能が特定された場合、制御部20は、複数の連携機能に関する情報をUI部18に表示させる。
また、制御部20は、連携機能管理テーブルに登録されている複数の連携機能の中で、ファイルの主従関係に基づいて特定された連携機能に関する情報を、他の連携機能に関する情報よりも優先的にUI部18に表示させてもよい。文書ファイルAと画像ファイルCを例に挙げて説明すると、文書形式と画像形式との組み合わせに対応する連携機能として、「画像を文書に挿入する機能」と「文書を画像上に重畳する機能」が連携機能管理テーブルに登録されている(図2参照)。この場合、特定部22は、ファイルの主従関係に基づいて特定された「画像を文書に挿入する機能」を優先順位が「1位」の連携機能として特定し、「文書を画像上に重畳する機能」を優先順位が「2位」の連携機能として特定する。制御部20は、優先順位に従って、「画像を文書に挿入する機能」に関する情報を「文書を画像上に重畳する機能」に関する情報よりも優先的に(例えば上位に)UI部18に表示させる。
なお、図11に示されている画面24上において、ユーザが画像26,28を囲むように領域を指定した後に、ユーザが連携機能の表示指示を与えた場合、制御部20は、特定部22によって特定された連携機能に関する情報をUI部18に表示させてもよい。例えば、ユーザが、UI部18の操作部を構成するマウスの特定ボタンを押した場合(例えば右クリック)、連携機能の表示指示が与えられる。
また、ファイルの主従関係に基づいて複数の連携機能が特定された場合、制御部20は、ユーザによる各連携機能の使用履歴に基づいて各連携機能の優先順位を決定し、各連携機能の優先順位に従って、各連携機能に関する情報をUI部18に表示させてもよい。例えば、制御部20は、使用頻度の高い連携機能に関する情報ほど優先的に(例えば上位に)UI部18に表示させる。
また、ファイルの主従関係に基づいて複数の連携機能が特定された場合、制御部20は、連携対象として選択された複数のファイルの関係性(つまり、複数のファイル形式の関係性)に基づいて各連携機能の優先順位を決定し、各連携機能の優先順位に従って、各連携機能に関する情報をUI部18に表示させてもよい。例えば、制御部20は、複数のファイル形式に基づいて、特定部22によって特定された複数の連携機能に含まれる各連携機能について、使用される可能性の高さを決定する。制御部20は、使用される可能性が高い連携機能に関する情報ほど優先的に(例えば上位に)UI部18に表示させる。例えば、文書形式と画像形式との組み合わせにおいては、「文書を画像上に重畳する機能」よりも「画像を文書に挿入する機能」の方が使用される可能性が高いと予測される。この場合、制御部20は、「画像を文書に挿入する機能」に関する情報を「文書を画像上に重畳する機能」に関する情報よりも優先的にUI部18に表示させる。
(変形例3)
以下、変形例3について説明する。変形例3では、ファイルに紐付く画像内の複数の部分の組み合わせに応じて連携機能が変更される。例えば、ファイルに紐付く画像には部分画像が含まれており、複数の部分画像がユーザによって指定された場合、当該複数の部分画像に応じた連携機能に関する情報が表示される。以下では、ファイルに紐付く画像を、「部分画像」と区別する意味で「全体画像」と称することとする。以下、変形例3について詳しく説明する。
図12には、UI部18に表示される画面24が示されている。画面24には、文書ファイルAに紐付く画像26(以下、「全体画像26」と称する)と画像ファイルCに紐付く画像28(以下、「全体画像28」と称する)が表示されている。全体画像26は、例えば、部分画像26a,26b,26c,26d,26eによって構成されている。なお、部分画像26eは、全体画像26の本体部を構成しており、部分画像26eがユーザによって選択された場合(例えば押された場合)、制御部20は、全体画像26の全体がユーザによって選択されたと認識する。同様に、全体画像28は、例えば、部分画像28a,28b,28c,28d,28eによって構成されている。なお、部分画像28eは、画像28の本体部を構成しており、部分画像28eがユーザによって選択された場合(例えば押された場合)、制御部20は、画像28の全体がユーザによって選択されたと認識する。
複数の部分画像がユーザによって選択された場合、特定部22は、選択された部分画像毎に、部分画像を含む全体画像に紐付くファイルを連携対象のファイルとして識別する。そして、特定部22は、連携対象として選択された複数のファイルの形式の組み合わせに対応する連携機能であって、選択された複数の部分画像の組み合わせに対応する連携機能を特定する。
例えば、変形例3に係る連携機能管理テーブルにおいては、複数のファイル形式の組み合わせに対応付けられ、かつ、複数の部分画像の組み合わせに対応付けられている連携機能が登録されている。特定部22は、この連携機能管理テーブルを参照することで、ユーザによって選択された複数の部分画像の組み合わせに対応付けられている連携機能を特定する。
具体例を挙げて説明する。例えば、文書ファイルAに紐付く部分画像26aと画像ファイルCに紐付く部分画像28aがユーザによって選択された場合、特定部22は、「画像を文書に挿入する機能」を連携機能として特定する。また、文書ファイルAに紐付く部分画像26bと画像ファイルCに紐付く部分画像28bがユーザによって指定された場合、特定部22は、「文書を画像上に重畳する機能」を連携機能として特定する。その他の部分画像についても同様である。制御部20は、特定部22によって特定された連携機能に関する情報をUI部18に表示させる。
なお、部分画像と全体画像がユーザによって選択されてもよい。この場合も、その組み合わせに対応付けられている連携機能が特定される。例えば、部分画像を含まない全体画像と、他の全体画像に含まれる部分画像とがユーザによって選択されてもよい。
以下、図13を参照して、部分画像の選択方法について説明する。図13には、UI部18に表示される画面24が示されている。例えば、ユーザが画面24上で指示子を用いて、矢印44で示すように、部分画像26bと部分画像28aとを互いに繋いだ場合(例えば、部分画像26bと部分画像28aとの間をなぞった場合)、特定部22は、部分画像26bと部分画像28aがユーザによって選択されたことを検知し、文書ファイルAと画像ファイルCを連携対象のファイルとして識別する。特定部22は、部分画像26bと部分画像28aとの組み合わせに対応付けられている連携機能を特定し、制御部20は、その特定された連携機能に関する情報をUI部18に表示させる。
また、部分画像は全体画像から切り離されて移動可能な画像であってもよい。例えば、矢印46で示すように、ユーザが部分画像26dを選択して部分画像28cの位置まで移動させた場合(部分画像26dをドラッグ&ドロップ操作した場合)、特定部22は、部分画像26dと部分画像28cがユーザによって選択されたことを検知し、文書ファイルAと画像ファイルCを連携対象のファイルとして識別する。図13には、部分画像26dの移動の様子が破線で示されている。部分画像26dがユーザによって移動させられた場合であっても、全体画像26中の元の部分画像26dはそのままの状態で表示される。特定部22は、部分画像26dと部分画像28cとの組み合わせに対応付けられている連携機能を特定し、制御部20は、その特定された連携機能に関する情報をUI部18に表示させる。
変形例3によれば、ユーザによって選択された部分画像に応じた連携機能に関する情報が表示されるので、同じファイルに紐付く画像がユーザによって選択された場合であっても、部分に応じて連携機能を変えることが可能となる。
なお、同一の全体画像中の複数の部分画像が選択されて、当該複数の部分画像の組み合わせに対応付けられている連携機能に関する情報が表示されてもよい。また、同一又は異なる全体画像を対象として3つ以上の部分画像が選択された場合、当該3つ以上の部分画像に対応付けられている連携機能に関する情報が表示されてもよい。
また、変形例1,3を組み合わせてもよい。つまり、部分画像の選択の順番に応じて、連携機能に関する情報の表示が切り替えられてもよい。図12に示す例で説明すると、先に部分画像26aが選択され、次に部分画像28aが選択された場合と、先に部分画像28aが選択され、次に部分画像26aが選択された場合とで、互いに異なる連携機能に関する情報の表示が切り替えられてもよい。
例えば、部分画像26a,28aの順番で各部分画像が選択された場合、「文書を画像上に重畳する機能」の優先順位が「1位」となり、「画像を文書に挿入する機能」の優先順位が「2位」となる。この場合、制御部20は、「文書を画像上に重畳する機能」に関する情報を「画像を文書中に挿入する機能」に関する情報よりも優先的に(例えば上位に)UI部18に表示させる。
上記とは逆に、部分画像28a,26aの順番で各部分画像が選択された場合、「画像を文書に挿入する機能」の優先順位が「1位」となり、「文書を画像上に重畳する機能」の優先順位が「2位」となる。この場合、制御部20は、「画像を文書に挿入する機能」に関する情報を「文書を画像上に重畳する機能」に関する情報よりも優先的に(例えば上位に)UI部18に表示させる。
(変形例4)
以下、変形例4について説明する。変形例4では、連携対象として選択された複数のファイルのそれぞれの最終保存日(日時を含む概念であってもよい)に応じて、コンテンツが追加されるファイルが変更される。例えば、当該複数のファイルの中で最終保存日が最も新しい(最終保存日が最も遅い)ファイルに対して、他のファイルによって表されるコンテンツが追加される。
例えば、図3に示すように、画像26に紐付く文書ファイルAと画像28に紐付く画像ファイルCが、連携対象としてのファイルとしてユーザによって選択されたものとする。特定部22は、文書ファイルAの属性情報に含まれる最終保存日情報を参照することで、文書ファイルAの最終保存日を識別し、画像ファイルCの属性情報に含まれる最終保存日情報を参照することで、画像ファイルCの最終保存日を識別する。
文書ファイルAの最終保存日が画像ファイルCの最終保存日よりも後の場合、特定部22は、コンテンツの追加先のファイルが文書ファイル(第2ファイルに相当)であり、追加対象のコンテンツが画像(第1ファイルに含まれる情報に相当)である連携機能を特定する。そのような連携機能は、「画像を文書に挿入する機能」である。この場合、制御部20は、「画像を文書に挿入する機能」に関する情報をUI部18に表示させる。また、制御部20は、「画像を文書に挿入する機能」に関する情報を他の連携機能に関する情報(例えば「文書を画像上に重畳する機能」に関する情報)よりも優先的にUI部18に表示させてもよい。「画像を文書に挿入する機能」の実行指示がユーザによって与えられた場合、画像ファイルC(第1ファイルに相当)によって表される画像が、文書ファイルA(第2ファイルに相当)によって表される文書に挿入される。その結果、新たな文書ファイルACが生成されてもよいし、文書ファイルAが更新されてもよい。
一方、画像ファイルCの最終保存日が文書ファイルAの最終保存日よりも後の場合、特定部22は、コンテンツの追加先のファイルが画像ファイル(第2ファイルに相当)であり、追加対象のコンテンツが文書(第1ファイルに含まれる情報に相当)である連携機能を特定する。そのような連携機能は、「文書を画像上に重畳する機能」である。この場合、制御部20は、「文書を画像上に重畳する機能」に関する情報を他の連携機能に関する情報(例えば「画像を文書に挿入する機能」に関する情報)よりも優先的にUI部18に表示させる。「文書を画像上に重畳する機能」の実行指示がユーザによって与えられた場合、文書ファイルA(第1ファイルに相当)によって表される文書が、画像ファイルC(第2ファイルに相当)によって表される画像上に重畳される。その結果、新たな画像ファイルCAが生成されてもよいし、画像ファイルCが更新されてもよい。
最終保存日がより新しい(より遅い)ファイルは、最終保存日がより古いファイルと比べて、今後もユーザによって操作されて更新される可能性の高いファイルであると予測される。それ故、最終保存日がより新しいファイルに、他のファイルのコンテンツを追加することで、連携機能の内容がユーザの操作意思に合致し易くなる。
(変形例5)
以下、変形例5について説明する。変形例5では、特定部22は、複数のファイルの選択の仕方に応じた連携機能を特定する。例えば、特定部22は、画面への指示子の接触の態様に応じた連携機能を特定してもよい。この場合、連携機能管理テーブルにおいて、ファイル形式の組み合わせと、選択の仕方(例えば接触の態様)と、連携機能と、が互いに対応付けられており、特定部22は、その連携機能管理テーブルを参照することで、選択されたファイルの形式の組み合わせと選択の仕方(接触の態様)とに対応付けられている連携機能を特定する。例えば、選択の仕方毎に異なる連携機能が対応付けられている。
図3を参照して、この処理について詳しく説明する。例えば、ユーザが指示子によって画像26,28に対してタップ操作を行った場合(つまり、ユーザが画面24上にて指示子によって画像26,28をタッチし、直ちに指示子を画面24から離した場合)、特定部22は、連携機能管理テーブルにおいて、文書形式と画像形式との組み合わせに対応付けられ、かつ、そのタップ操作に対応付けられている連携機能を特定する。
また、ユーザが指示子によって画像26,28を長押しした場合(つまり、ユーザが画面24上にて指示子によって画像26,28をタッチし、予め定められた時間にわたってそのタッチ状態を維持した場合)、特定部22は、連携機能管理テーブルにおいて、文書形式と画像形式との組み合わせに対応付けられ、かつ、その長押し操作に対応付けられている連携機能を特定する。
また、ドラッグ&ドロップ操作によって複数の画像が選択された場合、特定部22は、指定された複数のファイルの形式の組み合わせとドラッグ&ドロップ操作とに対応付けられている連携機能を特定する。
また、音声入力によって複数のファイルが選択された場合、特定部22は、選択された複数のファイルの形式の組み合わせと音声入力方法とに対応付けられている連携機能を特定する。
変形例5によれば、ファイルの選択の仕方に応じた連携機能が特定されるので、連携対象として選択されるファイルが同一であっても、その選択の仕方に応じて異なる連携機能に関する情報が表示される。
(変形例6)
変形例6では、ファイルに紐付く画像が、他のファイルに紐付く画像上に予め定められた時間以上の間、重ねられた場合、特定部22は、当該他のファイルを連携対象のファイルとして識別する。図3に示す例で説明すると、ユーザが画像26を画像28上まで移動させ、予め定められた時間以上の間、画像26を画像28に重ねた場合、特定部22は、画像28に紐付く画像ファイルCを連携対象のファイルとして識別する。その重ね合わせの時間の長さが予め定められた時間未満の場合、特定部22は、画像28に紐付く画像ファイルCを連携対象のファイルとして識別しない。
別の例として、ユーザが画像26を選択した後、画像26から画像28まで画面24上を指示子でなぞって、予め定められた時間以上の間、画像28を選択した場合、特定部22は、画像28に紐付く画像ファイルCを連携対象のファイルとして識別してもよい。画像28への選択時間の長さが予め定められた時間未満の場合、特定部22は、画像28に紐付く画像ファイルCを連携対象のファイルとして識別しない。
変形例6によれば、画像の重ね合わせの時間の長さや選択時間の長さが予め定められた時間未満の場合、その重ね合わせや選択された画像に紐付くファイルは連携対象のファイルとして識別されない。それ故、ユーザの意図しないファイルが連携対象のファイルとして識別されることが防止される。例えば、ユーザが画像26を移動させるときや、画像26から画像28にかけて画面24上をなぞる場合において、画像26と画像28との間に他のファイルに紐付く画像が表示されている場合、画像26の移動やなぞる操作によって、当該他のファイルに紐付く画像に画像26が接触したり、その画像がなぞられたりすることがある。この場合、当該他のファイルが連携対象のファイルとして識別されてしまう。これに対して変形例6によれば、その接触の時間や、なぞる操作中の選択時間の長さが、上記の予め定められた時間未満の場合、当該他のファイルは連携対象のファイルとして識別されないので、当該他のファイルがユーザの意図しないところで連携対象のファイルとして識別されることが防止される。
(変形例7)
ユーザによって選択されたファイルの形式の組み合わせに対応付けられている連携機能が連携機能管理テーブルに登録されていない場合、特定部22は、利用可能な連携機能が登録されていないと判断する。この場合、制御部20は、利用可能な連携機能が登録されていないことを示すメッセージをUI部18に表示させる。このような場合であっても、ソフトウェアの更新状況、ソフトウェアのインストールの有無、ソフトウェアによる処理の実行状況等によって、連携機能の利用が可能になる場合がある。例えば、新たなソフトウェアが端末装置10にインストールされた場合や、サーバ等が提供する新たなソフトウェアのユーザによる利用が可能になった場合、以前には利用不可能であった連携機能の利用が可能になることがある。この場合、特定部22は、利用可能になった連携機能を特定する。
(変形例8)
変形例8では、特定部22は、連携対象として選択された複数のファイルの名称(ファイル名)に応じた連携機能を特定する。変形例8に係る連携機能管理テーブルにおいては、ファイル名の組み合わせと連携機能とが互いに対応付けられており、特定部22は、その連携機能管理テーブルを参照することで、選択されたファイルの名称(ファイル名)の組み合わせに対応付けられている連携機能を特定する。
また、特定部22は、連携対象として選択されたファイルの名称に基づいて、コンテンツが追加されるファイルを特定する。例えば、選択されたファイルの名称(ファイル名)に、文字列「台帳」、「まとめ」、「管理」、「統計」、「グラフ」、「表」、「リスト」等のように、データをまとめるファイル(つまり、他のデータのコンテンツが追加されることが想定又は予測されるファイル)であることを示唆する文字列が含まれている場合、特定部22は、当該ファイルを、コンテンツの追加先のファイル(第2ファイルに相当)として識別する。また、特定部22は、上記のまとめ用の文字列が含まれないファイル名を有するファイルや、コンテンツ(材料)を提供するファイルであることを示唆する文字列が含まれるファイル名を有するファイルを、追加対象のコンテンツ(追加対象の材料)を含むファイル(第1ファイルに相当)として識別する。例えば、文字列「レシート」、「伝票」、「個人データ」、「機器データ」等が含まれるファイル名を有するファイルは、上記のまとめ用のファイルに該当せず、また、コンテンツ(材料)を提供するファイルであると判断される。
例えば、連携対象のファイルとして文書ファイルA1,A2が選択された場合において、文書ファイルA1が、上記のまとめ用の文字列を含むファイル名を有し、文書ファイルA2が、まとめ用の文字列を含まず材料提供用の文字列を含むファイル名を有する場合、特定部22は、材料側の文書ファイルA2をまとめ用の文書ファイルA1に記入、複製、統計処理等を行う連携機能を、優先的な連携機能として特定する。制御部20は、その優先的な連携機能を、他の連携機能よりも優先的にUI部18に表示させる。
なお、上記の変形例1−8の中の複数の変形例を組み合わせてもよい。
(連携機能の実行例)
以下、連携機能の実行例について説明する。図14には実行例1が示されている。例えば、2つの文書ファイルが連携対象のファイルとして選択されて「文書を他の文書に挿入する機能」(文書同士を合体(結合)する機能)が実行された場合、文書アプリケーションが起動させられ、文書ファイルによって表される文書48中に、別の文書ファイルによって表される文書50が挿入される。文書48,50は、例えば文字列を含む。もちろん、文書48,50は、表や画像や動画等を含んでもよい。文書50は、当該別の文書ファイルによって表される文書の全部又は一部である。この連携機能の実行によって、文書48中に文書50が挿入された状態を表す新たな文書ファイルが生成されてもよいし、文書48を表す文書ファイルに文書50の内容が反映されて、当該文書ファイルが更新されてもよい。
図15には実行例2が示されている。例えば、文書ファイルと表ファイルが連携対象のファイルとして選択されて「表を文書に挿入する機能」が実行された場合、文書アプリケーションと表計算アプリケーションが起動させられ、文書ファイルによって表される文書52中に、表ファイルによって表される表54が挿入される。表54は、表ファイルによって表される表の全部又は一部である。なお、表ファイルにグラフが含まれている場合、当該グラフが文書52に挿入されてもよい。この連携機能の実行によって、文書52中に表54が挿入された状態を表す新たな文書ファイルが生成されてもよいし、文書52を表す文書ファイルに表54が挿入されて、当該文書ファイルが更新されてもよい。
図16には実行例3が示されている。例えば、文書ファイルと画像ファイルが連携対象のファイルとして選択されて「画像を文書に挿入する機能」が実行された場合、文書アプリケーションと画像アプリケーションが起動させられ、文書ファイルによって表される文書56中に、画像ファイルによって表される画像58が挿入される。画像58は、画像ファイルによって表される画像の全部又は一部である。この連携機能の実行によって、文書56中に画像58が挿入された状態を表す新たな文書ファイルが生成されてもよいし、文書56を表す文書ファイルに画像58が挿入されて、当該文書ファイルが更新されてもよい。
図17には実行例4が示されている。例えば、文書ファイルと画像ファイルが連携対象のファイルとして選択されて「文書を画像上に重畳する機能」が実行された場合、文書アプリケーションと画像アプリケーションが起動させられ、画像ファイルによって表される画像60上に、文書ファイルによって表される文書62が重畳される。このとき、画像60自体は加工されずに、画像60上に文書62が重畳される。例えば、画像60上の文書62を削除すれば、元の画像60が得られる。もちろん、画像60自体の加工が可能であれば、画像60内に文書62が埋め込まれてもよい。文書62は、文書ファイルによって表される文書の全部又は一部である。この連携機能の実行によって、画像60上に文書62が重畳された状態を表す新たな画像ファイルが生成されてもよいし、画像60を表す画像ファイルに文書62が重畳されて、当該画像ファイルが更新されてもよい。
図18には実行例5が示されている。上記の実行例では、2つのファイルが連携対象のファイルとして選択されているが、3つ以上のファイルが連携対象のファイルとして選択されてもよい。この場合、3つ以上のファイルに対応付けられている連携機能が実行される。実行例5では、例えば、文書ファイル、画像ファイル及び表ファイルが連携対象のファイルとして選択されており、「画像と表を文書に挿入する機能」が実行されている。この場合、文書アプリケーション、表計算アプリケーション、及び、画像アプリケーションが起動させられ、文書ファイルによって表される文書64上に、画像ファイルによって表される画像66と、表ファイルによって表されるグラフ68が挿入される。画像66は、画像ファイルによって表される画像の全部又は一部であり、グラフ68は、表ファイルによって表されるグラフの全部又は一部である。なお、表ファイルに表が含まれている場合、当該表が文書64に挿入されてもよい。4つ以上のファイルが連携対象のファイルとして選択された場合も、上記と同様の処理が実行される。
上記以外の実行例として、文書ファイルと動画ファイルが連携対象のファイルとして指定された場合、当該文書ファイルによって表される文書中に当該動画ファイルによって表される動画が挿入されてもよい。当該文書ファイルが動画の挿入に対応していないファイルの場合、動画中の1又は複数のフレーム(静止画)が文書中に挿入されてもよい。
また、文書ファイルと音楽ファイルが連携対象のファイルとして指定された場合、当該文書ファイルによって表される文書中に当該音楽ファイルによって表される音楽が挿入されてもよい。当該文書ファイルが音楽の挿入に対応していないファイルの場合、音楽のタイトル等の文字列が文書中に挿入されてもよい。
また、動画ファイルと音楽ファイルが連携対象のファイルとして指定された場合、当該動画ファイルによって表される動画中に当該音楽ファイルによって表される音楽が挿入されてもよい。
なお、上記の実行例において、コンテンツ(文書、表、画像、動画、音楽等)への他のコンテンツの挿入位置は、ユーザによって指定されてもよいし、予め定められていてもよい。コンテンツが挿入された後、ユーザによってその位置が変更されてもよい。挿入後のコンテンツに対して実行可能な編集機能は、利用されるソフトウェアの機能に依存する。
上記の実施形態及び変形例は、RPA(Robotics Process Automation)による自動実行処理を設定するときに適用されてもよい。例えば、設定者によって指定された複数のファイルの形式、複数のファイル形式の組み合わせ、及び、その組み合わせに対応付けられている連携機能が、設定内容として保存され、その設定内容に従って処理が実行される。RPAとして、例えば、データ入力や複数のアプリケーションソフトウェアの組み合わせで実行可能な作業等の定型処理、データの収集や分析等の処理、データに基づいて学習して判断する処理、等が行われてもよい。
上記の端末装置10は、一例としてハードウェアとソフトウェアとの協働により実現される。具体的には、端末装置10は、図示しないCPU等の1又は複数のプロセッサを備えている。当該1又は複数のプロセッサが、図示しない記憶装置に記憶されたプログラムを読み出して実行することにより、端末装置10の各部の機能が実現される。上記プログラムは、CDやDVD等の記録媒体を経由して、又は、ネットワーク等の通信経路を経由して、記憶装置に記憶される。別の例として、端末装置10の各部は、例えばプロセッサや電子回路やASIC(Application Specific Integrated Circuit)等のハードウェア資源により実現されてもよい。その実現においてメモリ等のデバイスが利用されてもよい。更に別の例として、端末装置10の各部は、DSP(Digital Signal Processor)やFPGA(Field Programmable Gate Array)等によって実現されてもよい。
10 端末装置、16 連携機能管理情報、20 制御部、22 特定部。

Claims (16)

  1. 選択された複数のファイルに応じた連携機能の通知を制御する制御手段を有し、
    前記制御手段は、前記ファイルに紐付く画像中の部分が選択された場合、その選択された前記部分に応じた前記連携機能の通知を制御する、
    情報処理装置。
  2. 前記ファイルの状態は、前記ファイルを制御可能なアプリケーションソフトウェアによって実行される前の状態である、
    ことを特徴とする請求項1に記載の情報処理装置。
  3. 前記制御手段は、選択されたファイルの形式に応じた連携機能の通知を制御する、
    ことを特徴とする請求項1又は請求項2に記載の情報処理装置。
  4. 前記制御手段は、互いに形式の異なる複数のファイルが選択された場合、その選択されたファイルの形式に応じた連携機能の通知を制御する、
    ことを特徴とする請求項に記載の情報処理装置。
  5. 前記制御手段は、互いに形式が同じ複数のファイルが選択された場合、その選択されたファイルの形式に応じた連携機能の通知を制御する、
    ことを特徴とする請求項に記載の情報処理装置。
  6. 前記制御手段は、複数のファイルの選択の順番に応じた連携機能の通知を制御する、
    ことを特徴とする請求項1から請求項何れかに記載の情報処理装置。
  7. 前記制御手段は、選択された複数の部分の組み合わせに応じた連携機能の通知を制御する、
    ことを特徴とする請求項に記載の情報処理装置。
  8. 前記連携機能は、各ファイルに紐付けられているソフトウェアを使用して実行可能な機能である、
    ことを特徴とする請求項1から請求項何れかに記載の情報処理装置。
  9. 前記連携機能は、選択されたファイルに対して実行される機能である、
    ことを特徴とする請求項1から請求項何れかに記載の情報処理装置。
  10. 前記連携機能は、選択された複数のファイルの中の第1ファイルに含まれる情報を第2ファイルに追加する機能である、
    ことを特徴とする請求項に記載の情報処理装置。
  11. 選択されたファイルの形式に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、
    ことを特徴とする請求項1に記載の情報処理装置。
  12. 選択されたファイルの最終保存日に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、
    ことを特徴とする請求項1に記載の情報処理装置。
  13. 選択されたファイルの名称に応じて、選択されたファイルが前記第1ファイル又は前記第2ファイルとして用いられる、
    ことを特徴とする請求項1に記載の情報処理装置。
  14. 前記制御手段は、前記第1ファイルと前記第2ファイルに対して連携機能を実行することで、前記第1ファイルと前記第2ファイルを編集せずに、その実行の結果としての第3ファイルを生成する、
    ことを特徴とする請求項1から請求項1何れかに記載の情報処理装置。
  15. 前記制御手段は、複数のファイルの選択の仕方に応じた連携機能の通知を制御する、
    ことを特徴とする請求項1から請求項1何れかに記載の情報処理装置。
  16. コンピュータを、
    選択された複数のファイルに応じた連携機能の通知を制御する制御手段、
    として機能させ
    前記制御手段は、前記ファイルに紐付く画像中の部分が選択された場合、その選択された前記部分に応じた前記連携機能の通知を制御する、
    プログラム。
JP2017174224A 2017-09-11 2017-09-11 情報処理装置及びプログラム Active JP6939294B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017174224A JP6939294B2 (ja) 2017-09-11 2017-09-11 情報処理装置及びプログラム
US16/019,557 US11006017B2 (en) 2017-09-11 2018-06-27 Information processing device, information processing method, and non-transitory computer readable medium having controller for controlling notification of executing linkage function
CN201811007885.2A CN109491969B (zh) 2017-09-11 2018-08-31 信息处理装置、信息处理方法以及计算机可读介质
US17/239,706 US20210250463A1 (en) 2017-09-11 2021-04-26 Information processing device, information processing method, and non-transitory computer readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017174224A JP6939294B2 (ja) 2017-09-11 2017-09-11 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2019049903A JP2019049903A (ja) 2019-03-28
JP6939294B2 true JP6939294B2 (ja) 2021-09-22

Family

ID=65631814

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017174224A Active JP6939294B2 (ja) 2017-09-11 2017-09-11 情報処理装置及びプログラム

Country Status (3)

Country Link
US (2) US11006017B2 (ja)
JP (1) JP6939294B2 (ja)
CN (1) CN109491969B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7268449B2 (ja) * 2019-03-29 2023-05-08 京セラドキュメントソリューションズ株式会社 表示制御装置、表示制御方法、及び表示制御プログラム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3371007B2 (ja) 1993-03-17 2003-01-27 三菱電機株式会社 手続きコマンド方式
JPH09297750A (ja) * 1996-03-08 1997-11-18 Nikon Corp ソースファイル編集装置
JP3598668B2 (ja) 1996-08-19 2004-12-08 村田機械株式会社 通信端末装置
JP3832077B2 (ja) * 1998-03-06 2006-10-11 富士ゼロックス株式会社 文書管理装置
EP1298554A4 (en) * 2000-04-28 2006-05-31 Matsushita Electric Ind Co Ltd AUDIO DISTRIBUTION SYSTEM BASED ON SYNTHESIS AND AUDIO DISTRIBUTION SYSTEM BASED ON LOADING
JP2003316770A (ja) * 2002-04-19 2003-11-07 Canon Inc 文書管理システム、方法、プログラム及び記憶媒体
AU2003244073A1 (en) * 2002-07-19 2004-02-09 Matsushita Electric Industrial Co., Ltd. Device linkage control apparatus
JP4664108B2 (ja) * 2005-03-31 2011-04-06 富士通株式会社 表示装置、表示方法、表示プログラム及び表示システム
JP4609398B2 (ja) * 2006-08-23 2011-01-12 カシオ計算機株式会社 撮像装置及びプログラム
US7944572B2 (en) * 2007-01-26 2011-05-17 Xerox Corporation Protocol allowing a document management system to communicate inter-attribute constraints to its clients
JP5127585B2 (ja) * 2008-06-20 2013-01-23 キヤノン株式会社 画像形成装置及び画像形成方法
KR101475939B1 (ko) * 2008-07-02 2014-12-23 삼성전자 주식회사 이미지 처리 장치의 제어 방법과 이미지 처리 장치, 이미지파일
JP5704800B2 (ja) * 2009-07-10 2015-04-22 キヤノン株式会社 データ処理装置、データ処理処理方法、プログラム
JP5370029B2 (ja) * 2009-09-10 2013-12-18 株式会社リコー 統合管理装置、統合管理システム、統合管理方法、統合管理プログラム、及びそのプログラムを記録した記録媒体
CN102053956B (zh) * 2009-10-30 2013-02-20 北大方正集团有限公司 一种指定符号的优先编辑区域的系统和方法
JP2012043084A (ja) * 2010-08-17 2012-03-01 Sharp Corp 文章編集装置、文章編集方法、コンピュータプログラムおよび記録媒体
CN102054040A (zh) * 2010-12-30 2011-05-11 百度在线网络技术(北京)有限公司 知识信息交互服务方法、站点及问答交互平台
JP5801689B2 (ja) * 2011-10-27 2015-10-28 京セラ株式会社 電子機器
JP6044143B2 (ja) 2012-07-10 2016-12-14 株式会社リコー サービス提供システム及びサービス提供方法
CN103076792B (zh) * 2013-01-23 2016-05-18 中禹环境工程(北京)有限公司 感知传输设备及管理系统
JP5692319B2 (ja) 2013-09-19 2015-04-01 株式会社リコー 統合管理装置、制御方法及びプログラム
JP6569368B2 (ja) * 2015-08-04 2019-09-04 株式会社リコー 連携システム、連携装置及び連携方法
CN106375828A (zh) * 2016-08-30 2017-02-01 胡峰 一种基于人工智能的人机互动方法

Also Published As

Publication number Publication date
CN109491969A (zh) 2019-03-19
US20190082075A1 (en) 2019-03-14
CN109491969B (zh) 2023-08-04
JP2019049903A (ja) 2019-03-28
US20210250463A1 (en) 2021-08-12
US11006017B2 (en) 2021-05-11

Similar Documents

Publication Publication Date Title
US11474670B2 (en) Device and non-transitory computer readable medium for switching display of conversation partner to display of device designated by user
EP2804178A1 (en) Reproduction of file series
US20130254692A1 (en) Method of generating an electronic folder and an electronic device thereof
US10712981B2 (en) Information processing device and non-transitory computer readable medium
WO2022062070A1 (en) Software clipboard
KR101964914B1 (ko) 컨텐트에 대한 오토 네이밍 방법 및 이 기능을 갖는 장치와 기록 매체
US11119706B2 (en) Information processing device and non-transitory computer readable medium for notification of linkage function
CN105378728A (zh) 用于表示和操纵元数据的装置和方法
KR20160053462A (ko) 단말장치 및 그 제어 방법
US20200225824A1 (en) Methods and systems for managing data and files
US20160359932A1 (en) Display device and method of controlling the same
US20210250463A1 (en) Information processing device, information processing method, and non-transitory computer readable medium
JP5975113B2 (ja) 情報処理装置、作業環境連携方法、及び作業環境連携プログラム
US11657023B2 (en) Information processing apparatus, non-transitory computer readable medium, and information processing method
KR20130089893A (ko) 컨텐츠 관리 방법과 장치 및 기록 매체
TWI679574B (zh) 電腦可讀取式紀錄媒體、具備顯示器的電子裝置及其方法
JP7302642B2 (ja) 情報処理装置、プログラム及び制御方法
KR102126514B1 (ko) 컨텐츠 관리 방법과 장치 및 기록 매체
JP2005092269A (ja) オブジェクト操作装置、オブジェクト操作方法、オブジェクト操作プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210706

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210816

R150 Certificate of patent or registration of utility model

Ref document number: 6939294

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150