JP2017182763A - イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム - Google Patents

イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム Download PDF

Info

Publication number
JP2017182763A
JP2017182763A JP2016147029A JP2016147029A JP2017182763A JP 2017182763 A JP2017182763 A JP 2017182763A JP 2016147029 A JP2016147029 A JP 2016147029A JP 2016147029 A JP2016147029 A JP 2016147029A JP 2017182763 A JP2017182763 A JP 2017182763A
Authority
JP
Japan
Prior art keywords
image
user
user terminal
translation
sentence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016147029A
Other languages
English (en)
Other versions
JP6378263B2 (ja
Inventor
ソク キム,ジュン
Jun Seok Kim
ソク キム,ジュン
ギュ リ,ヒョン
Hyoung Gyu Lee
ギュ リ,ヒョン
ヒ シン,ジュン
Joong Hwi Shin
ヒ シン,ジュン
ソン リ,ジェ
Jae Song Lee
ソン リ,ジェ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Naver Corp
Original Assignee
Naver Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Naver Corp filed Critical Naver Corp
Publication of JP2017182763A publication Critical patent/JP2017182763A/ja
Application granted granted Critical
Publication of JP6378263B2 publication Critical patent/JP6378263B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • G06F40/58Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018Input/output arrangements for oriental characters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • G06F3/04855Interaction with scrollbars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/40Processing or translation of natural language
    • G06F40/42Data-driven translation

Abstract

【課題】 本発明はユーザに翻訳文を提供する方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムを提供する。
【解決手段】 本発明はユーザ端末において原文およびそれに対する翻訳文を提供する方法であって、前記ユーザ端末がユーザに複数のイメージを提示するステップと、前記ユーザ端末が前記複数のイメージのうち前記ユーザが選択したイメージを確認するステップと、前記ユーザ端末がデータベースから前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文を取得するステップと、前記ユーザ端末が前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供するステップを含む翻訳文提供方法を開示する。
【選択図】 図2

Description

本発明は、ユーザに翻訳文を提供する方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムに関し、より具体的には、ユーザに複数の特定文章に対応する複数のイメージを提示した後、ユーザが前記複数のイメージのうち1つを選択すれば、前記選択されたイメージと共にそれに対する原文および翻訳文を同時に提供するようにすることによって、ユーザがより便利に自身に必要な翻訳文を検索して提供を受けるようにする翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムに関する。
最近、海外旅行、出張などで外国を訪問したり業務などを進行したりするために外国人とのコミュニケーションを行う場合が大きく増えることにつれ、スマートフォンやPCなどの端末で駆動される通訳・翻訳のためのアプリやプログラムなどを活用するユーザが持続的に増加している。それにより、機械学習などによって翻訳アルゴリズムを実現するなど、より効率的な通訳・翻訳アルゴリズムを実現するための様々な試みがなされている。例えば、大韓民国公開特許第10−2011−0112192号には、構文分析および階層的語句モデルに基づいた機械翻訳システムおよび方法が開示されている。
しかし、現在の技術レベルで実現可能な通訳・翻訳アルゴリズムは、1つの言語を他言語に自然に通訳・翻訳できるレベルにまでは未だに達していないのが現実である。そのため、ユーザが翻訳を要求した原文に対する翻訳文が不自然な場合が頻繁に発生する。
さらに、ユーザが、自身が表現しようとする翻訳文に対する原文を直接構成し、それを、ユーザ端末などを介して入力する作業にも相当な時間が必要となるところ、ユーザと相手方に不便を招くことになる。
したがって、ユーザとしては上記のような不自然な翻訳文を使うよりは、予め定められた特定状況で使用できる定型文に対する原文(例えば、「バス停はどこですか?」)およびそれに対して正確に翻訳された翻訳文(例えば、「Where is the bus stop?」)のうち適切な文章を選択して使うことがより好ましい。
しかし、ユーザが上記のように予め定められた特定状況で使用できる定型文の提示を複数受け(例えば、数百〜数千種類の文章)、その中から自身に好適な文を選択するのは非常に不便な作業となる。
また、原文を翻訳しようとするユーザや翻訳された文章の提示を受ける相手方にとっても、適切なイメージなどの提示を共に受ける場合に比べて、単純に文章だけの提示を受ける場合には相手方の認知速度や理解度が落ちる。
大韓民国公開特許第10−2011−0112192号明細書(2011年10月12日公開)
本発明は、前記のような従来技術の問題点を解決するために導き出されたものであり、ユーザに予め定められた特定状況で使用できる定型文に対する原文およびそれに対して正確に翻訳された翻訳文を提供するが、ユーザがそれをより容易に検索して選択することができるようにする翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムを提供することを目的とする。
また、本発明は、原文を翻訳しようとするユーザと翻訳された文章の提示を受ける相手方がより効率的に原文と翻訳文を認知して理解度を高めるようにする翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムを提供することを目的とする。
前記課題を解決するための本発明の一側面による翻訳文提供方法は、ユーザ端末において原文およびそれに対する翻訳文を提供する方法であって、前記ユーザ端末がユーザに複数のイメージを提示するステップと、前記ユーザ端末が前記複数のイメージのうち前記ユーザが選択したイメージを確認するステップと、前記ユーザ端末がデータベースから前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文を取得するステップと、前記ユーザ端末が前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供するステップを含むことを特徴とする。
本発明の他の側面による翻訳文提供方法は、サーバがユーザ端末を用いて原文およびそれに対する翻訳文を提供する方法であって、前記サーバが前記ユーザ端末から前記ユーザ端末に提示された複数のイメージのうちユーザが選択したイメージに対する情報を受信するステップと、前記サーバが、前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文をデータベースから取得するステップと、前記サーバが、前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文に対する情報を前記ユーザ端末に送信するステップを含むことを特徴とする。
本発明のまた他の側面によるコンピュータプログラムは、前記記載された翻訳文提供方法の各ステップをコンピュータに実行させるためのコンピュータプログラムであることを特徴とする。
本発明のまた他の側面によるユーザ端末は、原文およびそれに対する翻訳文を提供するユーザ端末であって、ユーザに複数のイメージを提示するイメージ提示部と、前記複数のイメージのうち前記ユーザによって選択されたイメージを確認する選択イメージ確認部と、データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得するイメージ対応情報取得部と、前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供するイメージ対応情報提供部を含んで構成されることを特徴とする。
本発明のまた他の側面によるサーバは、ユーザ端末を用いて原文およびそれに対する翻訳文を提供するサーバであって、前記ユーザ端末に提示された複数のイメージのうちユーザによって選択されたイメージに対する情報を受信する選択情報受信部と、データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得するイメージ対応情報取得部と、前記ユーザ端末に前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を送信するイメージ対応情報送信部を含んで構成されることを特徴とする。
本発明のまた他の側面による翻訳文提供システムは、原文およびそれに対する翻訳文を提供する翻訳文提供システムであって、ユーザに複数のイメージを提示し、前記複数のイメージのうち前記ユーザによって選択されたイメージに対する情報をサーバに送信するユーザ端末と、前記ユーザ端末から前記選択されたイメージに対する情報を受信し、データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得した後、前記ユーザ端末に前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を送信するサーバを含んで構成され、前記ユーザ端末は前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供することを特徴とする。
本発明の一実施形態によれば、ユーザに予め定められた特定状況に対する複数のアイコンを提供し、前記複数のアイコンのうち1つを選択すれば、前記アイコンと共にそれに対する原文および翻訳文を同時に提供することによって、ユーザが自身に必要な原文およびそれに対する翻訳文をより容易に検索して選択することができる。
また、本発明の一実施形態によれば、ユーザと相手方に原文および翻訳文と共にそれに対する適切なイメージなどを共に提供することによって、ユーザと相手方がより効率的に原文と翻訳文を認知して理解度を高めるようにすることができる。
本発明に関する理解を助けるために詳細な説明の一部として含まれる、添付図面は本発明に対する実施形態を提供し、詳細な説明と共に本発明の技術的思想を説明する。
本発明の一実施形態による翻訳文提供システムの構成図である。 本発明の一実施形態によるユーザ端末観点での翻訳文提供方法のフローチャートである。 本発明の一実施形態により、ユーザ端末においてアイコンを選択して翻訳文提供方法を開示する場合の例示図である。 本発明の一実施形態により、複数のイメージの中からイメージを選択する場合の例示図である。 本発明の一実施形態により、選択されたイメージに対する原文および翻訳文を提示する画面の例示図である。 本発明の一実施形態によるデータベースの構成を説明する説明図である。 本発明の一実施形態によるキーワード入力画面の例示図である。 本発明の一実施形態により、入力されたキーワードに対応するイメージ提示画面の例示図である。 本発明の一実施形態によるイメージスクロール画面の例示図である。 本発明の一実施形態によるカテゴリーを用いたイメージ検索画面の例示図である。 本発明の一実施形態により、カテゴリーを選択した場合のイメージ提示画面の例示図である。 本発明の一実施形態によるサーバ観点での翻訳文提供方法のフローチャートである。 本発明の一実施形態による翻訳文を提供するためのユーザ端末の構成図である。 本発明の一実施形態による翻訳文を提供するためのサーバの構成図である。
本発明は、様々な変換を加えてもよく、色々な実施形態を有してもよいが、以下では、特定の実施形態を添付図面に基づいて詳細に説明する。
本発明を説明するにおいて、関連の公知技術に関する具体的な説明が本発明の要旨を曖昧にする恐れがあると判断される場合にはその詳細な説明は省略する。
第1、第2などの用語が様々な構成要素を説明するのに用いられるが、前記構成要素は前記用語によって限定されるものではなく、前記用語は1つの構成要素を他の構成要素から区別する目的にのみ用いられる。
以下では、添付図面を参照して、本発明による翻訳文を提供する方法、ユーザ端末、サーバ、システムおよびコンピュータプログラムの例示的な実施形態を詳細に説明する。
先ず、図1には、本発明の一実施形態による翻訳文提供システム100の構成図が示されている。図1に示すように、本発明の一実施形態による翻訳文提供システム100は、ユーザに複数のイメージを提示した後、ユーザが前記複数のイメージのうち1つを選択すれば、前記選択されたイメージと共にそれに対する原文および翻訳文を同時に提供するユーザ端末110、前記選択されたイメージに対する原文および翻訳文を算出するのに用いられるサーバ120、および前記ユーザ端末110とサーバ120を連結するネットワーク130を含んで構成されることができる。
この時、前記ユーザ端末110としてはスマートフォン、タブレットPC、PDA、携帯電話などといった様々な携帯端末が用いられることができ、その他にもパーソナルコンピューター(PC)、ノートブックPCなど、ユーザに複数のイメージを提示し、ユーザが前記複数のイメージのうち1つを選択すれば、前記選択されたイメージと共にそれに対する原文および翻訳文を同時に提供するのに用いられる様々な端末が採用されることができる。
しかし、本発明において、前記ユーザ端末110が必ずしも前記サーバ120の助力によってユーザが選択したイメージに対する原文および翻訳文を算出しなければならないということではなく、前記ユーザ端末110が独立に前記ユーザが選択したイメージに対する原文および翻訳文を算出してもよい。
また、本発明において、イメージは絵、写真などに限定されず、アイコンや動きのある画像などを含んでもよく、更には文字や記号、図形などを含んで実現されてもよい。
また、前記ユーザ端末110とサーバ120を連結するネットワーク130としては有線ネットワークと無線ネットワークを含むことができ、具体的には、ローカルエリアネットワーク(LAN:Local Area Network)、メトロポリタンエリアネットワーク(MAN:Metropolitan Area Network)、広域ネットワーク(WAN:Wide Area Network)などの様々な通信網を含むことができる。また、前記ネットワーク130は公知のワールドワイドウェブ(WWW:World Wide Web)を含むこともできる。しかし、本発明による通信ネットワーク130は前記で列挙されたネットワークに限定されず、公知の無線データネットワークや公知の電話ネットワークまたは公知の有無線テレビジョンネットワークを少なくとも一部として含むことができる。
図2には、本発明の一実施形態によるユーザ端末の観点による翻訳文提供方法のフローチャートが示されている。以下では、図2を参照して本発明の一実施形態による翻訳文提供方法を各ステップ別に分けて詳しく検討する。
先ず、S110ステップにおいては、ユーザ端末110がユーザに複数のイメージを提示する。
ここで、前記複数のイメージは各々それに対応する第1言語および第2言語を含む複数の言語の文章と対応する。例えば、前記第1言語が韓国語であり、前記第2言語が英語であるとき、韓国語を使うユーザにとって、第1言語の文章、すなわち韓国語文章は原文となり、それに対応する第2言語の文章、すなわち英語文章は翻訳文として使用されることができる。第2言語の英語文章が原文となり、第1言語の韓国語文章が翻訳文となり得ることは勿論である。
また、本発明は独立したアプリ(App)やプログラムで実現されてもよいが、ユーザが入力する原文を翻訳文に翻訳して提供するアプリ(App)やプログラムに統合して構成されてもよい。
この時、ユーザが入力する原文を翻訳文に翻訳して提供するアプリ(App)やプログラムが駆動される画面においてアイコンやメニューなどを選択することによって、本発明の一実施形態による翻訳文提供方法が駆動されるようにすることもできる。
それに対する具体的な実施形態として、図3には、ユーザが入力する原文を翻訳文に翻訳して提供するアプリ(App)においてユーザがアイコン310をクリックすることによって、本発明の一実施形態による翻訳文提供方法を駆動させる場合に対するユーザ端末110の画面が例示されている。
それにより、図4に示すように、ユーザ端末110の画面には複数のイメージが提示できるようになる。
さらに、前記複数のイメージを所定の方法によって配置することや、特定イメージをユーザに推薦することもできる。
例えば、前記ユーザが位置している地域の情報を反映して、前記イメージの配列順序を異にしたり、特定イメージを推薦したりすることもできる。具体的な例として、ユーザが空港に位置している場合、空港と関連したイメージを上位に配置してユーザが先に見ることができるようにしたり、空港と関連したイメージを別途の項目に分けてユーザに推薦したりすることもできる。
他の例として、ユーザが過去に選択したイメージの履歴を反映して、前記複数のイメージのうち一部または全部の配置を調整して提供または推薦することもできる。すなわち、ユーザが一度選択したイメージは再び選択する確率が高く、さらには、ユーザが最近選択したイメージを再び選択する確率は更に高い。このように、ユーザのイメージ選択履歴を反映して、前記イメージの配列順序を異にしたり、特定イメージを推薦したりすることもできる。
また、ユーザがイメージを選択するのに役に立つために、ユーザが、前記ユーザ端末110の画面において特定領域を示すポインタを特定イメージ上に位置させる場合、前記ユーザ端末110においては、前記特定イメージに対応する原文または翻訳文の一部または全部を画面上に提示することもできる。
次に、S120ステップにおいては、前記ユーザ端末110が、前記複数のイメージのうち前記ユーザが選択したイメージを確認する。
例えば、図4に示すように、スマートフォンなどのユーザ端末110において、ユーザは、複数のイメージのうち1つのイメージをクリックするなどの方法によって選択(410)することができ、それにより、ユーザ端末110は、前記ユーザが選択したイメージの識別情報などを認識して前記選択されたイメージを確認できるようになる。
次に、S130ステップにおいては、前記ユーザ端末110が、データベースから前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文を取得する。
それに対する一実施形態として、前記ユーザ端末110は、前記データベースを検索できるサーバ120に、前記選択されたイメージに対する情報を送信し、前記サーバ120が前記データベースを用いて前記選択されたイメージに対応する原文および翻訳文を導出するようにした後、その送信を受けることによって、前記算出された前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得することができる。
この場合、ユーザ端末110においては、前記データベースを直接駆動させる必要がなく、データベースに対する検索作業を直接行う必要なしに検索結果のみの送信を受けて使用することができるため、ユーザ端末110におけるコンピューティング資源(computing resource)の消耗を減らせるという長所を有する。
あるいは、前記ユーザ端末110が前記データベースを直接検索して、前記選択されたイメージに対応する原文および翻訳文を導出することもできる。特に、前記ユーザ端末110のユーザは、前記ユーザ端末110がネットワーク130の接続が難しい状況に備え(例えば、海外出張などで通信サービス領域から離れることになるか、他の理由でネットワークの接続に制限がある場合)、前記データベースの全部または一部のデータをユーザ端末110にダウンロードして使用することもできる。
最後に、S140ステップにおいては、前記ユーザ端末110が前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共にユーザに提供する。
ここで、原文およびそれに対する翻訳文をイメージと共に提供することとは、前記原文、翻訳文およびイメージをユーザ端末110のディスプレイ装置において1つの画面に提供するなど、ユーザが前記原文、翻訳文およびイメージを同時に見ることができるように提供するということを意味する。
例えば、図5には、スマートフォンなどのユーザ端末110の画面に、前記選択されたイメージ530に対応する原文510およびそれに対する翻訳文520を、前記選択されたイメージと共に提供する場合が例示されている。
図5に示すように、前記選択されたイメージ530に対応する原文510およびそれに対する翻訳文520を、前記選択されたイメージ530と共に提供することによって、原文を翻訳しようとするユーザと翻訳された文章の提示を受ける相手方がより効率的に原文と翻訳文を認知して理解度を高めることができるという長所を有する。
さらに、ユーザは、前記選択されたイメージに対応する原文を修正して、それに対する翻訳文を算出するようにすることもできる。
ユーザが、前記選択されたイメージに対応する原文を修正して翻訳を要請する場合、前記ユーザ端末110においては、修正された原文に対して機械学習などによって実現された翻訳アルゴリズムなどを適用して翻訳文を導出してもよく、更には前記データベースに格納された原文および翻訳文を用いて修正された翻訳文を導出してもよい。例えば、原文の修正部分を算出した後、前記原文に対応する翻訳文に前記原文の修正部分を反映して、修正された翻訳文を導出してもよい。より具体的な例として、データベースに格納された原文が「バスターミナルはどこですか?」であり、それに対する翻訳文が「Where is the bus terminal?」である場合を考慮してみれば次の通りである。この時、ユーザが原文を「高速バスターミナルはどこですか?」に修正してそれに対する翻訳文を要請する場合、前記原文において「バス」が「高速バス」に修正されたことを考慮し、翻訳文において「bus」を「express bus」に修正して最終翻訳文を「Where is the express bus terminal?」と算出することもできる。
また、前記ユーザが、前記選択されたイメージに対応する原文および翻訳文をより適切な表現に修正する場合、前記ユーザ端末110においては、前記修正された原文および翻訳文を格納し、今後ユーザが同一のイメージを選択する場合、修正された原文および翻訳文を提供できるようにすることもできる。
図6は、本発明の一実施形態によるデータベースの構成を説明している。図6に示すように、前記データベースは前記複数のイメージ、それに対応する原文および翻訳文のマッチング情報を含んで構成されることができる。
より具体的には、1つのイメージ610に対し、それに対応する第1言語の文章
Figure 2017182763
620、第2言語の文章(「I am sorry」)630、第3言語の文章(「ごめんなさい」)640、第4言語の文章
Figure 2017182763
650を含む複数の言語の文章に対するマッチング情報を含むように前記データベースを構成することができる。それにより、ユーザが選択するイメージに対する原文(例えば、韓国語の場合、第1言語の文章)およびそれに対応する翻訳文(第2言語〜第4言語の文章のうち1つあるいは2つ以上)を提供することができるようになる。
この時、前記第2言語〜第4言語の文章が原文となり、残りの言語の文章を翻訳文として使うこともできる。さらに、1つの原文に対して複数の言語の翻訳文を一緒に提供することもできる。
また、前記データベースは前記サーバ120に接続されて駆動されてもよく、前記ユーザ端末110においてダウンロードして駆動されてもよい。
それにより、ユーザが前記ユーザ端末110に提示された複数のイメージのうち1つを選択する場合、前記ユーザ端末110においては、前記データベースを検索して算出される前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供できるようになる。
また、前記データベースは前記イメージのカテゴリーに対する情報を更に含むこともでき、また、前記イメージに対するキーワードを更に含むこともできる。
図7には、本発明の一実施形態によるキーワード入力画面の例示図が示されている。本発明の一実施形態によって複数のイメージをユーザに提示するが、この時、前記複数のイメージは相当な数に増えるのでユーザにそれを効果的に検索して選択することができるようにすることが好ましい。
それに対する一実施形態として、ユーザがキーワードを入力することができるようにし、前記入力されたキーワードと関連したイメージを検索してユーザに提示することによって、ユーザが複数のイメージのうち自身が選択しようとするイメージをより便利に選択できるようにすることができる。
より具体的な例として、図7には、ユーザが「地下鉄」というキーワードを入力710する場合が示されている。
それにより、前記入力されたキーワードは、前記データベースにおいて前記入力されたキーワードを含む原文または翻訳文がある場合、それに対応するイメージを導出してユーザに提示することができる。
あるいは、前記データベースにおいて前記入力されたキーワードをイメージに対する主題語と対比して、前記入力されたキーワードに対応するイメージを導出してユーザに提示することもできる。
それにより、ユーザは、図8に示すように、ユーザが入力したキーワード810に対応する1つ以上のイメージ820の提示を受けることができる。
図9には、本発明の一実施形態により、ユーザがイメージをスクロールして所望のイメージを検索する画面が例示されている。前述したように、ユーザ端末110は複数のイメージをユーザに提示するが、この時、前記複数のイメージは相当な数に増えるため、それを限定された画面に表示するためにスクロールなどの構成を含むことができる。それにより、ユーザは、前記ユーザ端末110の画面をスクロール910しながら自身が所望するイメージを検索して選択できるようになる。
また、図10には、本発明の一実施形態によるカテゴリーを用いたイメージ検索画面が例示されている。
図9に示すようにスクロールを用いてユーザが前記複数のイメージを検索しながら選択するようにすることもできるが、このような場合にも前記イメージ数が大きく増えると、ユーザにとっては適切なイメージを検索して選択するのに相当な困難がある。
したがって、前記複数のイメージに対して分類されたカテゴリーを提示し、ユーザが前記カテゴリーを選択して限定されたイメージのうち適切なイメージを検索して選択できるようにすることによって、ユーザがより効率的にイメージを選択できるようにすることができる。
それにより、図10に示すようにユーザが特定カテゴリー(「交通」)を選択(1010)すれば、図11に示すように特定カテゴリー(「交通」)に属するイメージが提示され、それにより、ユーザはより便利にイメージを検索して選択できるようになる。この時、前記選択されたカテゴリーを選択されていないカテゴリーと区別できるように表示(1110)することもできる。
図12には、本発明の一実施形態によるサーバの観点による翻訳文提供方法のフローチャートが示されている。以下では図12を参照して本発明の一実施形態による翻訳文提供方法を各ステップ別に分けて詳しく検討する。
先ず、S210ステップについて検討する。本ステップ(S210)においては、サーバが、ユーザ端末110から、前記ユーザ端末110に提示された複数のイメージのうちユーザが選択したイメージに対する情報を受信する。
すなわち、ユーザ端末110においては、図4に例示したように複数のイメージをユーザに提示し、それに対してユーザは前記複数のイメージのうち1つを選択し、それにより、前記ユーザ端末110においては、前記ユーザが選択したイメージの識別情報などを認識して前記選択されたイメージを確認できるようになる。
この時、前記ユーザ端末110においては、前記ユーザに対する情報を反映して前記複数のイメージのうち一部または全部の配置を調整して提供または推薦することもできる。
より具体的には、例えば、前記ユーザ端末110は前記ユーザの位置情報を用いて前記複数のイメージのうち一部または全部の配置を調整して提供または推薦してもよく、あるいは前記ユーザの過去のイメージ選択履歴を反映して前記複数のイメージのうち一部または全部の配置を調整して提供または推薦してもよい。
また、前記ユーザ端末110は、ユーザが過去に選択したイメージの履歴を反映して前記複数のイメージのうち一部または全部の配置を調整して提供または推薦してもよい。
なお、ユーザがイメージを選択するのに役に立つために、ユーザが前記ユーザ端末110の画面において特定領域を示すポインタを特定イメージ上に位置させる場合、前記ユーザ端末110においては、前記特定イメージに対応する原文または翻訳文の一部または全部を画面上に提示することもできる。
次に、前記ユーザ端末110は、前記複数のイメージのうち前記ユーザによって選択されたイメージに対する情報を前記サーバ120に送信する。例えば、図4に示すようにスマートフォンなどのユーザ端末110において、ユーザが複数のイメージのうち1つのイメージをクリックするなどの方法によって選択することができ、それにより、ユーザ端末110は、前記ユーザが選択したイメージの識別情報などを認識して前記選択されたイメージを確認し、前記選択されたイメージに対する情報がネットワーク130を介して前記サーバ120に送信される。
次に、S220ステップにおいては、前記サーバ120は、前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文をデータベースから取得する。
それに対する一実施形態として、前記サーバ120は、前記ユーザ端末110から前記選択されたイメージに対する情報の送信を受けた後、前記データベースを用いて前記選択されたイメージに対応する原文および翻訳文を算出することができる。
この場合、ユーザ端末110においては、前記データベースを直接駆動させる必要がなく、データベースに対する検索作業を直接行う必要なしに検索結果のみの送信を受けて使用することができるため、ユーザ端末110におけるコンピューティング資源の消耗を減らせるという長所を有する。
最後に、S230ステップにおいて、前記サーバ120は、前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を前記ユーザ端末110へ送信する。それにより、前記ユーザ端末110においては、ユーザに前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供できるようになる。
例えば、図5には、スマートフォンなどのユーザ端末110が、サーバ120から前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報の送信を受けた後、前記ユーザ端末110の画面に、前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供する場合が例示されている。
図5に示すように、前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供することによって、原文を翻訳しようとするユーザと翻訳された文章の提示を受ける相手方が、より効率的に原文と翻訳文を認知して理解度を高めることができるという長所を有する。
さらに、ユーザは前記選択されたイメージに対応する原文を修正し、それに対する翻訳文を算出できるようにすることもできる。
ユーザが前記選択されたイメージに対応する原文を修正して翻訳を要請する場合、前記サーバ120においては、修正された原文に対して機械学習などによって実現された翻訳アルゴリズムなどを適用して翻訳文を導出してもよく、更には前記データベースに格納された原文および翻訳文を用いて修正された翻訳文を導出してもよい。例えば、原文の修正部分を算出した後、前記原文に対応する翻訳文に前記原文の修正部分を反映して、修正された翻訳文を導出してもよい。
また、前記ユーザが前記選択されたイメージに対応する原文および翻訳文をより適切な表現に修正する場合、前記サーバ120においては、前記修正された原文および翻訳文を格納し、今後ユーザが同一のイメージを選択する場合、修正された原文および翻訳文を提供できるようにすることもできる。
なお、本発明のまた他の側面によるコンピュータプログラムは、前述した翻訳文提供方法の各ステップをコンピュータで実行させるためのプログラムであることを特徴とする。前記コンピュータプログラムは、コンパイラによって作られる機械語コードを含むコンピュータプログラムだけでなく、インタープリタなどを用いてコンピュータで実行できる高級言語コードを含むコンピュータプログラムであってもよい。この時、前記コンピュータとしては、パーソナルコンピューター(PC)やノートブックコンピュータなどに限定されず、サーバ、スマートフォン、タブレットPC、PDA、携帯電話など、中央処理処置(CPU)を備えてコンピュータプログラムを実行できる全ての情報処理装置を含む。
また、図13には、本発明の一実施形態による翻訳文を提供するためのユーザ端末110の構成図が例示されている。
図13に示すように、本発明の一実施形態による翻訳文を提供するためのユーザ端末110は、イメージ提示部111、選択イメージ確認部112、イメージ対応情報取得部113、およびイメージ対応情報提供部114を含んで構成されることができる。
以下では、本発明の一実施形態による翻訳文を提供するためのユーザ端末110を各構成要素別に分けて検討する。本発明の一実施形態による翻訳文を提供するためのユーザ端末110に関するより詳しい内容は、前述した本発明の一実施形態による翻訳文提供方法に関する説明から類推することができるので、以下ではより詳しい説明は省略する。
先ず、イメージ提示部111はユーザに複数のイメージを提示する。
次に、選択イメージ確認部112は、前記複数のイメージのうちユーザによって選択されたイメージを確認する。
次に、イメージ対応情報取得部113は、データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得する。この時、前記データベースは、図13に示すように前記ユーザ端末110に備えられてもよい。
最後に、イメージ対応情報提供部114は、ユーザに前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供する。
また、図14には、本発明の一実施形態による翻訳文を提供するためのサーバ120の構成図が例示されている。
図14に示すように、本発明の一実施形態による翻訳文を提供するためのサーバ120は、選択情報受信部121、イメージ対応情報取得部122、およびイメージ対応情報送信部123を含んで構成されることができる。
以下では本発明の一実施形態による翻訳文を提供するためのサーバ120を各構成要素別に分けて検討する。本発明の一実施形態による翻訳文を提供するためのサーバ120に関するより詳しい内容は、前述した本発明の一実施形態による翻訳文提供方法に関する説明から類推することができるので、以下ではより詳しい説明は省略する。
先ず、選択情報受信部121は、ユーザ端末110から前記ユーザ端末110に提示された複数のイメージのうち、ユーザによって選択されたイメージに対する情報を受信する。
次に、イメージ対応情報取得部122は、データベースから、前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得する。この時、前記イメージ対応情報取得部122は、図14に示すようにサーバ120に備えられたデータベースを用いて、前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得することもできる。
最後に、イメージ対応情報送信部123は、前記ユーザ端末110に、前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を送信する。それにより、前記ユーザ端末110においては、前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供できるようになる。
以上の説明は本発明の技術思想を例示的に説明したものに過ぎず、本発明が属する技術分野の当業者であれば、本発明の本質的な特性から逸脱しない範囲で様々な修正および変形が可能である。よって、本発明に記載された実施形態は、本発明の技術思想を限定するためのものではなく説明するためのものであり、このような実施形態に限定されるものではない。本発明の保護範囲は下記の特許請求の範囲によって解釈しなければならず、それと均等な範囲内にある全ての技術思想は本発明の権利範囲に含まれると解釈しなければならない。
100 ・・・翻訳文提供システム
110、110a、110b ・・・ユーザ端末
111 ・・・イメージ提示部
112 ・・・選択イメージ確認部
113 ・・・イメージ対応情報取得部
114 ・・・イメージ対応情報提供部
120 ・・・サーバ
121 ・・・選択情報受信部
122 ・・・イメージ対応情報取得部
123 ・・・イメージ対応情報送信部
130 ・・・ネットワーク

Claims (14)

  1. ユーザ端末において原文およびそれに対する翻訳文を提供する方法であって、
    前記ユーザ端末がユーザに複数のイメージを提示するステップと、
    前記ユーザ端末が前記複数のイメージのうち前記ユーザが選択したイメージを確認するステップと、
    前記ユーザ端末がデータベースから前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文を取得するステップと、
    前記ユーザ端末が前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供するステップと
    を含む、翻訳文提供方法。
  2. 前記複数のイメージを提示するステップにおいて、
    前記ユーザ端末は、前記ユーザに対する情報を反映して前記複数のイメージのうち一部または全部の配置を調整して提供または推薦することを特徴とする、請求項1に記載の翻訳文提供方法。
  3. 前記複数のイメージを提示するステップにおいて、
    前記ユーザ端末は、前記ユーザの位置情報を用いて前記複数のイメージのうち一部または全部の配置を調整して提供または推薦することを特徴とする、請求項2に記載の翻訳文提供方法。
  4. 前記複数のイメージを提示するステップにおいて、
    前記ユーザ端末は、前記ユーザの過去のイメージ選択履歴を反映して前記複数のイメージのうち一部または全部の配置を調整して提供または推薦することを特徴とする、請求項2または3に記載の翻訳文提供方法。
  5. 前記複数のイメージを提示するステップにおいて、
    ユーザが前記ユーザ端末の画面において特定領域を示すポインタを特定イメージ上に位置させる場合、
    前記ユーザ端末においては、前記特定イメージに対応する原文または翻訳文の一部または全部を画面上に提示することを特徴とする、請求項1または2に記載の翻訳文提供方法。
  6. 前記原文およびそれに対する翻訳文を取得するステップにおいて、
    前記ユーザ端末は、前記ユーザによって選択されたイメージに対する情報をサーバに送信した後、
    前記サーバから、前記データベースを検索して算出した前記選択されたイメージに対応する原文およびそれに対する翻訳文の提供を受けることを特徴とする、請求項1、2または5のうちいずれか1項に記載の翻訳文提供方法。
  7. 前記ユーザ端末は、前記ユーザが過去の原文または翻訳文を修正した履歴を保管し、
    前記ユーザが前記過去の原文または翻訳文を修正した履歴を反映して、前記選択されたイメージに対応する原文またはそれに対する翻訳文を修正して提供することを特徴とする、請求項1、2、5または6のうちいずれか1項に記載の翻訳文提供方法。
  8. 前記複数のイメージを提示するステップは、
    前記ユーザ端末がユーザによって入力されたキーワードを受信するステップ、および
    前記ユーザ端末が前記キーワードと関連したイメージを検索して提示するステップ
    を含むことを特徴とする、請求項1、2、5〜7のうちいずれか1項に記載の翻訳文提供方法。
  9. 前記ユーザ端末が、サーバから前記データベースのうち少なくとも一部データをダウンロードして格納するステップを更に含むことを特徴とする、請求項1、2、5〜8のうちいずれか1項に記載の翻訳文提供方法。
  10. サーバがユーザ端末を用いて原文およびそれに対する翻訳文を提供する方法であって、
    前記サーバが、前記ユーザ端末から前記ユーザ端末に提示された複数のイメージのうちユーザが選択したイメージに対する情報を受信するステップと、
    前記サーバが、前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文をデータベースから取得するステップと、
    前記サーバが、前記ユーザが選択したイメージに対応する原文およびそれに対する翻訳文に対する情報を前記ユーザ端末に送信するステップと
    を含む、翻訳文提供方法。
  11. コンピュータに請求項1〜10のいずれか1項に記載の方法の各ステップを実行させるためのコンピュータプログラム。
  12. 原文およびそれに対する翻訳文を提供するユーザ端末であって、
    ユーザに複数のイメージを提示するイメージ提示部と、
    前記複数のイメージのうち前記ユーザによって選択されたイメージを確認する選択イメージ確認部と、
    データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得するイメージ対応情報取得部と、
    前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供するイメージ対応情報提供部と
    を含んで構成される、ユーザ端末。
  13. ユーザ端末を用いて原文およびそれに対する翻訳文を提供するサーバであって、
    前記ユーザ端末に提示された複数のイメージのうちユーザによって選択されたイメージに対する情報を受信する選択情報受信部と、
    データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得するイメージ対応情報取得部と、
    前記ユーザ端末に前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を送信するイメージ対応情報送信部と
    を含んで構成される、サーバ。
  14. 原文およびそれに対する翻訳文を提供する翻訳文提供システムであって、
    ユーザに複数のイメージを提示し、前記複数のイメージのうち前記ユーザによって選択されたイメージに対する情報をサーバに送信するユーザ端末と、
    前記ユーザ端末から前記選択されたイメージに対する情報を受信し、
    データベースから前記選択されたイメージに対応する原文およびそれに対する翻訳文を取得した後、
    前記ユーザ端末に前記選択されたイメージに対応する原文およびそれに対する翻訳文に対する情報を送信する、
    サーバと
    を含んで構成され、
    前記ユーザ端末は前記選択されたイメージに対応する原文およびそれに対する翻訳文を前記選択されたイメージと共に提供する、翻訳文提供システム。
JP2016147029A 2016-03-29 2016-07-27 イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム Active JP6378263B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0037416 2016-03-29
KR1020160037416A KR101769981B1 (ko) 2016-03-29 2016-03-29 이미지를 이용한 번역문 제공 방법, 사용자 단말, 서버, 시스템 및 컴퓨터 프로그램

Publications (2)

Publication Number Publication Date
JP2017182763A true JP2017182763A (ja) 2017-10-05
JP6378263B2 JP6378263B2 (ja) 2018-08-22

Family

ID=59757836

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016147029A Active JP6378263B2 (ja) 2016-03-29 2016-07-27 イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム

Country Status (3)

Country Link
US (1) US10372829B2 (ja)
JP (1) JP6378263B2 (ja)
KR (1) KR101769981B1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102118322B1 (ko) 2017-08-31 2020-06-04 주식회사 에버트란 원문과 번역문 파일을 개별적으로 생성하는 문서 번역 서버 및 번역 방법
KR20220145038A (ko) * 2021-04-21 2022-10-28 삼성전자주식회사 번역을 수행하는 방법 및 전자 장치
CN113609870A (zh) * 2021-07-23 2021-11-05 深圳市元征信息技术开发有限公司 翻译方法、装置、服务器及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006190A (ja) * 2001-06-27 2003-01-10 Nri & Ncc Co Ltd 辞書作成装置、自動翻訳装置、辞書作成方法、自動翻訳方法、辞書作成プログラム、自動翻訳プログラム、辞書作成プログラムを記録したコンピュータ読み取り可能な記録媒体、自動翻訳プログラムを記録したコンピュータ読み取り可能な記録媒体及び翻訳文の製造方法
JP2011159077A (ja) * 2010-01-29 2011-08-18 Fujitsu Toshiba Mobile Communications Ltd 携帯端末装置
JP2012243060A (ja) * 2011-05-19 2012-12-10 Dat Japan Kk 翻訳システム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010032070A1 (en) * 2000-01-10 2001-10-18 Mordechai Teicher Apparatus and method for translating visual text
KR100401470B1 (ko) 2000-05-22 2003-10-17 진천웅 사용자 입력 텍스트에 관한 이미지 처리 서비스 방법
US7219310B2 (en) * 2001-11-05 2007-05-15 Xerox Corporation Instruction generating system and process via symbolic representations
GB0204246D0 (en) * 2002-02-22 2002-04-10 Mitel Knowledge Corp System and method for message language translation
JP2006252049A (ja) * 2005-03-09 2006-09-21 Fuji Xerox Co Ltd 翻訳システム、翻訳方法およびプログラム
JP2006277103A (ja) * 2005-03-28 2006-10-12 Fuji Xerox Co Ltd 文書翻訳方法および文書翻訳装置
US7778632B2 (en) * 2005-10-28 2010-08-17 Microsoft Corporation Multi-modal device capable of automated actions
TWI291143B (en) * 2006-08-04 2007-12-11 Kuo-Ping Yang Method of learning the second language through picture guiding
US8144990B2 (en) * 2007-03-22 2012-03-27 Sony Ericsson Mobile Communications Ab Translation and display of text in picture
CN101408874A (zh) * 2007-10-09 2009-04-15 深圳富泰宏精密工业有限公司 图像文字翻译装置及方法
US8635058B2 (en) * 2010-03-02 2014-01-21 Nilang Patel Increasing the relevancy of media content
KR101777421B1 (ko) 2010-04-06 2017-09-11 삼성전자주식회사 구문 분석 및 계층적 어구 모델 기반 기계 번역 시스템 및 방법
US20120182288A1 (en) 2011-01-18 2012-07-19 Sony Corporation Method and apparatus for information presentation
JP5579202B2 (ja) * 2012-01-16 2014-08-27 東芝テック株式会社 情報処理装置、店舗システム及びプログラム
US9165406B1 (en) * 2012-09-21 2015-10-20 A9.Com, Inc. Providing overlays based on text in a live camera view
US9898935B2 (en) * 2013-12-23 2018-02-20 Maurice Hazan Language system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006190A (ja) * 2001-06-27 2003-01-10 Nri & Ncc Co Ltd 辞書作成装置、自動翻訳装置、辞書作成方法、自動翻訳方法、辞書作成プログラム、自動翻訳プログラム、辞書作成プログラムを記録したコンピュータ読み取り可能な記録媒体、自動翻訳プログラムを記録したコンピュータ読み取り可能な記録媒体及び翻訳文の製造方法
JP2011159077A (ja) * 2010-01-29 2011-08-18 Fujitsu Toshiba Mobile Communications Ltd 携帯端末装置
JP2012243060A (ja) * 2011-05-19 2012-12-10 Dat Japan Kk 翻訳システム

Also Published As

Publication number Publication date
JP6378263B2 (ja) 2018-08-22
KR101769981B1 (ko) 2017-08-22
US10372829B2 (en) 2019-08-06
US20170286406A1 (en) 2017-10-05

Similar Documents

Publication Publication Date Title
US10890451B2 (en) Place of interest recommendation
US20200133464A1 (en) Interactive icons with embedded functionality used in text messages
CN105320652A (zh) 用于提供翻译内容的方法、设备和系统
JP6219642B2 (ja) 使用者デバイスで入力文字を利用した知能型サービス提供方法及び装置
KR102340228B1 (ko) 검색 서비스와 연결된 메시지 서비스를 위한 메시지 서비스 제공 방법 및 상기 메시지 서비스 제공 방법을 수행하는 메시지 서버 및 사용자 단말
KR101882293B1 (ko) 문자 입력 및 컨텐츠 추천을 위한 통합 키보드
CN113268498A (zh) 业务推荐方法和具有智能助手的装置
JP7124232B2 (ja) 名前タグ表示方法及び装置
US9262399B2 (en) Electronic device, character conversion method, and storage medium
CN109213779B (zh) 用户终端和搜索服务器及操作方法、传输方法和传输装置
JP6378263B2 (ja) イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム
CN103384244A (zh) 针对网络浏览器配置键盘的方法和装置
JPWO2017175275A1 (ja) 翻訳システム
KR20200034660A (ko) 쉬워진 사용자 반응
KR101537555B1 (ko) 인스턴트 메신저 상의 메시지 바로 검색 지원 방법
KR20120058659A (ko) 이동 통신 단말기의 메신저를 이용한 광고방법
CN113383339A (zh) 能够支持多语言翻译的聊天系统和用于提供翻译的方法
US11012382B2 (en) State display information transmission system using chatbot
KR20160039523A (ko) 키보드 어플리케이션 서버 및 그것을 이용한 광고 콘텐츠 제공 방법
CN106034154B (zh) 公交信息共享方法和装置
KR20160008083A (ko) 검색어 기반의 광고 콘텐츠 서버 및 그것을 이용한 광고 콘텐츠 오버레이 방법
KR102062069B1 (ko) 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법
US11122324B2 (en) Method for displaying video related service, storage medium, and electronic device therefor
KR102454351B1 (ko) 자동 완성 기능을 지원하는 쇼핑몰 서비스 제공 장치 및 이를 포함하는 쇼핑몰 서비스 제공 시스템 및 방법, 그리고 컴퓨터 프로그램이 기록된 기록매체
EP2717121A2 (en) Method and apparatus for providing intelligent service using inputted character in a user device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170912

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171205

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180601

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20180611

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180710

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180726

R150 Certificate of patent or registration of utility model

Ref document number: 6378263

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250