JP2021520533A

JP2021520533A - How and system to recommend profile pictures, and non-temporary computer-readable recording media

Info

Publication number: JP2021520533A
Application number: JP2020546093A
Authority: JP
Inventors: ペ，ヒジョン; キム，ヒョンヨン; チョウ，ヒョンジ
Original assignee: Line Plus Corp
Current assignee: Line Plus Corp
Priority date: 2018-03-06
Filing date: 2018-03-06
Publication date: 2021-08-19
Anticipated expiration: 2038-03-06
Also published as: KR20220156099A; JP7119106B2; WO2019172463A1; JP2022169565A; KR20200106186A; JP7393487B2

Abstract

カスタムプロフィール提供方法は、チャットルームに対して前記チャットルームに表示されるプロフィールのカスタマイズのための入力イベントが認識されれば、前記チャットルームに写真添付機能を提供する段階、前記チャットルームで作成されたメッセージの送信要求に前記写真添付機能によって特定された写真が含まれる場合、前記メッセージとともに前記特定された写真を送信する段階、および前記チャットルームの前記メッセージと対応する前記メッセージのプロフィール領域に前記送信された写真を表示する段階を含む。【選択図】図４The custom profile providing method is created in the chat room at the stage of providing the photo attachment function to the chat room when the input event for customizing the profile displayed in the chat room is recognized for the chat room. If the request to send the message includes a photo specified by the photo attachment function, the step of sending the specified photo together with the message, and the profile area of the message corresponding to the message in the chat room. Includes the step of displaying the transmitted photo. [Selection diagram] Fig. 4

Description

以下の説明は、チャットルームにおけるメッセージのプロフィール領域に写真を反映する技術に関する。 The following description relates to a technique for reflecting a photo in the profile area of a message in a chat room.

一般的なコミュニケーションツールであるインスタントメッセンジャーは、メッセージやデータをリアルタイムで送受信することのできるソフトウェアであって、ユーザがメッセンジャー上に会話の相手を登録すると、会話リストに登録された相手とリアルタイムでメッセージをやり取りすることができる。 Instant messenger, which is a general communication tool, is software that can send and receive messages and data in real time. When a user registers a conversation partner on the messenger, a message is sent in real time with the person registered in the conversation list. Can be exchanged.

このようなメッセンジャー機能は、ＰＣはもちろん、移動通信端末のモバイル環境でもその使用が普遍化している。 The use of such a messenger function is becoming universal not only in PCs but also in mobile environments of mobile communication terminals.

例えば、韓国公開特許第１０−２００２−００７４３０４号公報（公開日２００２年９月３０日）には、携帯端末機にインストールされたモバイルメッセンジャー間にメッセンジャーサービスを提供することができるようにした、無線通信網を利用した携帯端末機のモバイルメッセンジャーサービスシステムおよび方法が開示されている。 For example, in Korean Publication No. 10-2002-0074304 (publication date: September 30, 2002), wireless messenger services can be provided between mobile messengers installed in mobile terminals. A mobile messenger service system and method for a mobile terminal using a communication network are disclosed.

一般的にメッセンジャーのチャットルームには、メッセージ別に該当のメッセージを送信したユーザのプロフィール写真を示す領域が提供される。 Generally, a messenger chat room is provided with an area showing the profile picture of the user who sent the message for each message.

メッセンジャーやＳＮＳ（ｓｏｃｉａｌｎｅｔｗｏｒｋｓｅｒｖｉｃｅ）などのチャットルームにおいて、写真撮影および／または写真推薦によってメッセージ別にプロフィール写真領域をカスタマイズすることができる。 In chat rooms such as messenger and SNS (social network service), the profile picture area can be customized for each message by taking a picture and / or recommending a picture.

チャットルームでプロフィールカスタマイズのための写真添付にかかる過程と時間を最小化することにより、カスタムプロフィール機能の使用性を高めることができる。 You can increase the usability of the custom profile feature by minimizing the process and time it takes to attach a photo to customize your profile in a chat room.

電子機器が実行するカスタムプロフィール提供方法であって、前記電子機器は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、前記カスタムプロフィール提供方法は、前記少なくとも１つのプロセッサにより、チャットルームに対して前記チャットルームに表示されるプロフィールのカスタマイズのための入力イベントが認識されれば、前記チャットルームに写真添付機能を提供する段階、前記少なくとも１つのプロセッサにより、前記チャットルームで作成されたメッセージの送信要求に前記写真添付機能によって特定された写真が含まれる場合、前記メッセージとともに前記特定された写真を送信する段階、および前記少なくとも１つのプロセッサにより、前記チャットルームの前記メッセージと対応する前記メッセージのプロフィール領域に前記送信された写真を表示する段階を含む、カスタムプロフィール提供方法を提供する。 A custom profile providing method performed by an electronic device, wherein the electronic device includes at least one processor configured to execute a computer-readable instruction contained in a memory, and the custom profile providing method is described. When the input event for customizing the profile displayed in the chat room is recognized by the at least one processor, the step of providing the photo attachment function to the chat room, by the at least one processor. If the request to send a message created in the chat room includes a photo specified by the photo attachment function, the chat is performed by the step of transmitting the specified photo together with the message, and by the at least one processor. Provided is a custom profile providing method comprising displaying the transmitted photo in the profile area of the message corresponding to the message in the room.

一側面によると、前記提供する段階は、前記チャットルームに対して認識された入力イベントに基づき、写真撮影のためのカメラビューおよび前記電子機器に保存された写真のうちの少なくとも一部を含む写真推薦リストのうちの少なくとも１つの写真添付機能を決定し、前記決定された少なくとも１つの写真添付機能を前記チャットルームに提供する段階を含んでよい。 According to one aspect, the provided step is a photograph including at least a portion of a camera view for photography and a photograph stored in the electronic device, based on an input event recognized for the chat room. It may include the step of determining at least one photo attachment function in the recommendation list and providing the determined at least one photo attachment function to the chat room.

他の側面によると、前記提供する段階は、前記チャットルームのメッセージ入力ウィンドウにタグとして定義された特殊文字が入力されれば、前記チャットルームで前記写真添付機能を自動的にアクティブ化する段階を含んでよい。 According to another aspect, the provided step is to automatically activate the photo attachment function in the chat room when a special character defined as a tag is input in the message input window of the chat room. May include.

また他の側面によると、前記タグは、前記写真添付機能のうち、前記カメラビューを呼び出すための第１タグと前記写真推薦リストを呼び出すための第２タグを含んでよい。 According to another aspect, the tag may include a first tag for calling the camera view and a second tag for calling the photo recommendation list among the photo attachment functions.

また他の側面によると、前記提供する段階は、前記電子機器の画面に前記チャットルームが表示された状態で前記電子機器に対して特定のジェスチャーが入力されれば、前記チャットルームで前記写真添付機能を自動的にアクティブ化する段階を含んでよい。 According to another aspect, in the provided stage, if a specific gesture is input to the electronic device while the chat room is displayed on the screen of the electronic device, the photograph is attached in the chat room. It may include a step of automatically activating the function.

また他の側面によると、前記提供する段階は、前記電子機器の画面に前記チャットルームが表示された状態で地面に対する前記電子機器の角度が予め定められた角度以上となれば、前記チャットルームで前記写真添付機能を自動的にアクティブ化する段階を含んでよい。 According to another aspect, the provision stage is performed in the chat room if the angle of the electronic device with respect to the ground is equal to or more than a predetermined angle while the chat room is displayed on the screen of the electronic device. It may include a step of automatically activating the photo attachment function.

また他の側面によると、前記提供する段階は、前記チャットルームのメッセージ入力ウィンドウに入力中のメッセージ内容から感情情報が抽出されれば、前記チャットルームで前記写真添付機能を自動的にアクティブ化する段階を含んでよい。 According to another aspect, the provided stage automatically activates the photo attachment function in the chat room when emotional information is extracted from the message content being input in the message input window of the chat room. It may include steps.

また他の側面によると、前記カスタムプロフィール提供方法は、前記少なくとも１つのプロセッサにより、前記電子機器に保存されたそれぞれの写真に対して前記写真と関連するキーワードを抽出してタグ付けする段階をさらに含み、前記提供する段階は、前記タグ付けされたキーワードに基づき、前記電子機器に保存された写真のうちから前記チャットルームのメッセージ入力ウィンドウに入力されたメッセージに対応する少なくとも１つの写真を選択して前記写真推薦リストとして提供する段階を含んでよい。 According to another aspect, the custom profile providing method further includes a step of extracting and tagging a keyword related to the photograph for each photograph stored in the electronic device by the at least one processor. Including, the providing step selects at least one photo corresponding to the message entered in the message input window of the chat room from the photos stored in the electronic device based on the tagged keyword. This may include the step of providing the photo recommendation list.

また他の側面によると、前記送信する段階は、前記メッセージの送信要求が入力された時点に前記カメラビューによって自動撮影された写真を、前記メッセージとともにサーバに送信する段階を含んでよい。 According to another aspect, the transmission step may include a step of transmitting a photograph automatically taken by the camera view to the server together with the message at the time when the transmission request of the message is input.

また他の側面によると、前記送信する段階は、前記メッセージの送信要求が入力された時点に前記写真推薦リストから写真が選択されている場合、前記選択された写真を前記メッセージとともにサーバに送信する段階を含んでよい。 According to another aspect, the transmitting step transmits the selected photo to the server together with the message if a photo is selected from the photo recommendation list at the time when the request for transmitting the message is input. It may include steps.

さらに他の側面によると、前記メッセージは、前記サーバ上でカスタムプロフィールを含んだメッセージタイプとして分類されて前記写真とともに管理されてよい。 According to yet another aspect, the message may be classified on the server as a message type containing a custom profile and managed with the photo.

前記カスタムプロフィール提供方法をコンピュータに実行させるためのプログラムが記録されている、非一時的なコンピュータ読み取り可能な記録媒体を提供する。 Provided is a non-temporary computer-readable recording medium in which a program for causing a computer to execute the custom profile providing method is recorded.

電子機器に実現されたカスタムプロフィール提供システムであって、メモリ、および前記メモリに接続され、前記メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、前記少なくとも１つのプロセッサは、チャットルームに対して前記チャットルームに表示されるプロフィールのカスタマイズのための入力イベントが認識されれば、前記チャットルームに写真添付機能を提供する写真添付提供部、前記チャットルームで作成されたメッセージの送信要求に前記写真添付機能によって特定された写真が含まれる場合、前記メッセージとともに前記特定された写真を送信するメッセージ送信部、および前記チャットルームの前記メッセージに対応する前記メッセージのプロフィール領域に前記送信された写真を表示するプロフィール反映部を含む、カスタムプロフィール提供システムを提供する。 A custom profile providing system implemented in an electronic device, comprising a memory and at least one processor connected to the memory and configured to execute a computer-readable instruction contained in the memory. One processor is a photo attachment providing unit that provides a photo attachment function to the chat room when the input event for customizing the profile displayed in the chat room is recognized for the chat room, in the chat room. When the transmission request of the created message includes the photo specified by the photo attachment function, the message transmitter that sends the specified photo together with the message, and the message corresponding to the message in the chat room. Provided is a custom profile providing system including a profile reflecting unit that displays the transmitted photo in the profile area.

本発明の一実施形態における、ネットワーク環境の例を示した図である。It is a figure which showed the example of the network environment in one Embodiment of this invention. 本発明の一実施形態における、電子機器およびサーバの内部構成を説明するためのブロック図である。It is a block diagram for demonstrating the internal structure of an electronic device and a server in one Embodiment of this invention. 本発明の一実施形態における、電子機器のプロセッサが含むことのできる構成要素の例を示した図である。It is a figure which showed the example of the component which can include the processor of the electronic device in one Embodiment of this invention. 本発明の一実施形態における、電子機器が実行することのできる方法の例を示したフローチャートである。It is a flowchart which showed the example of the method which an electronic device can perform in one Embodiment of this invention. 本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。It is explanatory drawing for demonstrating the process which the photograph attachment function is automatically activated in one Embodiment of this invention. 本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。It is explanatory drawing for demonstrating the process which the photograph attachment function is automatically activated in one Embodiment of this invention. 本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。It is explanatory drawing for demonstrating the process which the photograph attachment function is automatically activated in one Embodiment of this invention. 本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。It is explanatory drawing for demonstrating the process which the photograph attachment function is automatically activated in one Embodiment of this invention. 本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。It is explanatory drawing for demonstrating the process which the photograph attachment function is automatically activated in one Embodiment of this invention. 本発明の一実施形態における、チャットルームのカスタムプロフィールを説明するための例示図である。It is explanatory drawing for demonstrating the custom profile of a chat room in one Embodiment of this invention.

以下、本発明の実施形態について、添付の図面を参照しながら詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

本発明の実施形態は、チャットルームでメッセージのプロフィール領域に写真を反映する技術に関する。 An embodiment of the present invention relates to a technique for reflecting a photograph in a profile area of a message in a chat room.

本明細書で具体的に開示される事項を含む実施形態は、メッセンジャーやＳＮＳなどのチャットルームでプロフィール写真領域をメッセージ別にカスタマイズすることができ、これによって効率性、使用性、利便性、費用節減などの側面において相当な長所を達成することができる。 Embodiments, including the matters specifically disclosed herein, allow the profile photo area to be customized for each message in chat rooms such as Messenger and SNS, thereby reducing efficiency, usability, convenience and cost. It is possible to achieve considerable advantages in such aspects.

図１は、本発明の一実施形態における、ネットワーク環境の例を示した図である。図１のネットワーク環境は、複数の電子機器１１０、１２０、１３０、１４０、複数のサーバ１５０、１６０、およびネットワーク１７０を含む例を示している。このような図１は、発明の説明のための一例に過ぎず、電子機器の数やサーバの数が図１のように限定されることはない。 FIG. 1 is a diagram showing an example of a network environment according to an embodiment of the present invention. The network environment of FIG. 1 shows an example including a plurality of electronic devices 110, 120, 130, 140, a plurality of servers 150, 160, and a network 170. Such FIG. 1 is merely an example for explaining the invention, and the number of electronic devices and the number of servers are not limited as in FIG.

複数の電子機器１１０、１２０、１３０、１４０は、コンピュータシステムによって実現される固定端末や移動端末であってよい。複数の電子機器１１０、１２０、１３０、１４０の例としては、スマートフォン、携帯電話、ナビゲーション、ＰＣ（ｐｅｒｓｏｎａｌｃｏｍｐｕｔｅｒ）、ノート型ＰＣ、デジタル放送用端末、ＰＤＡ（ＰｅｒｓｏｎａｌＤｉｇｉｔａｌＡｓｓｉｓｔａｎｔ）、ＰＭＰ（ＰｏｒｔａｂｌｅＭｕｌｔｉｍｅｄｉａＰｌａｙｅｒ）、タブレット、ゲームコンソール、ウェアラブルデバイス、ＩｏＴ（ｉｎｔｅｒｎｅｔｏｆｔｈｉｎｇｓ）デバイス、ＶＲ（ｖｉｒｔｕａｌｒｅａｌｉｔｙ）デバイス、ＡＲ（ａｕｇｍｅｎｔｅｄｒｅａｌｉｔｙ）デバイスなどがある。一例として、図１では、電子機器１１０の例としてスマートフォンを示しているが、本発明の実施形態において、電子機器１１０は、実質的に無線または有線通信方式を利用し、ネットワーク１７０を介して他の電子機器１２０、１３０、１４０および／またはサーバ１５０、１６０と通信することのできる多様な物理的なコンピュータシステムのうちの１つを意味してよい。 The plurality of electronic devices 110, 120, 130, 140 may be fixed terminals or mobile terminals realized by a computer system. Examples of a plurality of electronic devices 110, 120, 130, 140 include smartphones, mobile phones, navigation systems, PCs (personal computers), notebook PCs, digital broadcasting terminals, PDAs (Personal Digital Assistants), and PMPs (Portable Multimedia Players). ), Tablets, game consoles, wearable devices, IoT (internet of things) devices, VR (visual reality) devices, AR (augmented reality) devices, and the like. As an example, FIG. 1 shows a smartphone as an example of the electronic device 110, but in the embodiment of the present invention, the electronic device 110 substantially uses a wireless or wired communication method, and another via the network 170. It may mean one of a variety of physical computer systems capable of communicating with electronic devices 120, 130, 140 and / or servers 150, 160.

通信方式が限定されることはなく、ネットワーク１７０が含むことのできる通信網（一例として、移動通信網、有線インターネット、無線インターネット、放送網、衛星網など）を利用する通信方式だけではなく、機器間の近距離無線通信が含まれてもよい。例えば、ネットワーク１７０は、ＰＡＮ（ｐｅｒｓｏｎａｌａｒｅａｎｅｔｗｏｒｋ）、ＬＡＮ（ｌｏｃａｌａｒｅａｎｅｔｗｏｒｋ）、ＣＡＮ（ｃａｍｐｕｓａｒｅａｎｅｔｗｏｒｋ）、ＭＡＮ（ｍｅｔｒｏｐｏｌｉｔａｎａｒｅａｎｅｔｗｏｒｋ）、ＷＡＮ（ｗｉｄｅａｒｅａｎｅｔｗｏｒｋ）、ＢＢＮ（ｂｒｏａｄｂａｎｄｎｅｔｗｏｒｋ）、インターネットなどのネットワークのうちの１つ以上の任意のネットワークを含んでよい。さらに、ネットワーク１７０は、バスネットワーク、スターネットワーク、リングネットワーク、メッシュネットワーク、スター−バスネットワーク、ツリーまたは階層的ネットワークなどを含むネットワークトポロジのうちの任意の１つ以上を含んでもよいが、これらに限定されることはない。 The communication method is not limited, and not only a communication method using a communication network that can be included in the network 170 (for example, a mobile communication network, a wired Internet, a wireless Internet, a broadcasting network, a satellite network, etc.), but also a device. Short-range wireless communication between them may be included. For example, the network 170 includes a PAN (personal area network), a LAN (local area network), a CAN (campus area network), a MAN (metropolitan area network), a WAN (wide area network), etc. It may include any one or more of the networks. Further, network 170 may include, but is limited to, any one or more of network topologies, including bus networks, star networks, ring networks, mesh networks, star-bus networks, tree or hierarchical networks, and the like. Will not be done.

サーバ１５０、１６０それぞれは、複数の電子機器１１０、１２０、１３０、１４０とネットワーク１７０を介して通信して命令、コード、ファイル、コンテンツ、サービスなどを提供する１つ以上のコンピュータ装置によって実現されてよい。例えば、サーバ１５０は、ネットワーク１７０を介して接続した複数の電子機器１１０、１２０、１３０、１４０に第１サービスを提供するシステムであってよく、サーバ１６０も、ネットワーク１７０を介して接続した複数の電子機器１１０、１２０、１３０、１４０に第２サービスを提供するシステムであってよい。より具体的な例として、サーバ１５０は、複数の電子機器１１０、１２０、１３０、１４０においてインストールされて実行されるコンピュータプログラムであるアプリケーションを通じ、該当のアプリケーションが目的とするサービス（一例として、メッセンジャー、ＳＮＳなど）を第１サービスとして複数の電子機器１１０、１２０、１３０、１４０に提供してよい。他の例として、サーバ１６０は、上述したアプリケーションのインストールおよび実行のためのファイルを複数の電子機器１１０、１２０、１３０、１４０に配布するサービスを第２サービスとして提供してよい。 Each of the servers 150, 160 is realized by one or more computer devices that communicate with a plurality of electronic devices 110, 120, 130, 140 via a network 170 to provide instructions, codes, files, contents, services, and the like. good. For example, the server 150 may be a system that provides the first service to a plurality of electronic devices 110, 120, 130, 140 connected via the network 170, and the server 160 may also be a plurality of systems connected via the network 170. It may be a system that provides a second service to electronic devices 110, 120, 130, 140. As a more specific example, the server 150 passes through an application which is a computer program installed and executed in a plurality of electronic devices 110, 120, 130, 140, and a service intended by the application (as an example, a messenger, (SNS, etc.) may be provided to a plurality of electronic devices 110, 120, 130, 140 as a first service. As another example, the server 160 may provide a service as a second service that distributes files for installing and executing the above-mentioned application to a plurality of electronic devices 110, 120, 130, 140.

図２は、本発明の一実施形態における、電子機器およびサーバの内部構成を説明するためのブロック図である。図２では、電子機器に対する例として電子機器１１０の内部構成およびサーバ１５０の内部構成について説明する。また、他の電子機器１２０、１３０、１４０やサーバ１６０も、上述した電子機器１１０またはサーバ１５０と同一または類似の内部構成を有してよい。 FIG. 2 is a block diagram for explaining the internal configurations of the electronic device and the server according to the embodiment of the present invention. FIG. 2 describes the internal configuration of the electronic device 110 and the internal configuration of the server 150 as examples for the electronic device. Further, the other electronic devices 120, 130, 140 and the server 160 may have the same or similar internal configuration as the electronic device 110 or the server 150 described above.

電子機器１１０およびサーバ１５０は、メモリ２１１、２２１、プロセッサ２１２、２２２、通信モジュール２１３、２２３、および入力／出力インタフェース２１４、２２４を含んでよい。メモリ２１１、２２１は、非一時的なコンピュータ読み取り可能な記録媒体であって、ＲＡＭ（ｒａｎｄｏｍａｃｃｅｓｓｍｅｍｏｒｙ）、ＲＯＭ（ｒｅａｄｏｎｌｙｍｅｍｏｒｙ）、ディスクドライブ、ＳＳＤ（ｓｏｌｉｄｓｔａｔｅｄｒｉｖｅ）、フラッシュメモリ（ｆｌａｓｈｍｅｍｏｒｙ）などのような永続的大容量記録装置を含んでよい。ここで、ＲＯＭ、ＳＳＤ、フラッシュメモリ、ディスクドライブのような永続的大容量記録装置は、メモリ２１１、２２１とは区分される別の永続的記録装置として電子機器１１０やサーバ１５０に含まれてもよい。また、メモリ２１１、２２１には、オペレーティングシステムと、少なくとも１つのプログラムコード（一例として、電子機器１１０においてインストールされて実行されるブラウザや、特定のサービスの提供のために電子機器１１０にインストールされるアプリケーションなどのためのコード）が記録されてよい。このようなソフトウェア構成要素は、メモリ２１１、２２１とは別のコンピュータ読み取り可能な記録媒体からロードされてよい。このような別のコンピュータ読み取り可能な記録媒体は、フロッピードライブ、ディスク、テープ、ＤＶＤ／ＣＤ−ＲＯＭドライブ、メモリカードなどのコンピュータ読み取り可能な記録媒体を含んでよい。他の実施形態において、ソフトウェア構成要素は、コンピュータ読み取り可能な記録媒体ではない通信モジュール２１３、２２３を通じてメモリ２１１、２２１にロードされてもよい。例えば、少なくとも１つのプログラムは、開発者またはアプリケーションのインストールファイルを配布するファイル配布システム（一例として、上述したサーバ１６０）がネットワーク１７０を介して提供するファイルによってインストールされるコンピュータプログラム（一例として、上述したアプリケーション）に基づいてメモリ２１１、２２１にロードされてよい。 The electronics 110 and server 150 may include memory 211,221, processors 212,222, communication modules 213 and 223, and input / output interfaces 214 and 224. The memories 211 and 221 are non-temporary computer-readable recording media, and are a RAM (random access memory), a ROM (read only memory), a disk drive, an SSD (solid state drive), and a flash memory (flash memory). Permanent mass recording devices such as, etc. may be included. Here, a permanent large-capacity recording device such as a ROM, SSD, flash memory, or disk drive may be included in the electronic device 110 or the server 150 as another permanent recording device that is separated from the memories 211 and 221. good. Further, the memory 211 and 221 are installed in the operating system and at least one program code (for example, a browser installed and executed in the electronic device 110, or installed in the electronic device 110 to provide a specific service. The code for the application etc.) may be recorded. Such software components may be loaded from a computer-readable recording medium separate from the memories 211 and 221. Such other computer readable recording media may include computer readable recording media such as floppy drives, discs, tapes, DVD / CD-ROM drives, memory cards and the like. In other embodiments, software components may be loaded into memory 211 and 221 through communication modules 213 and 223 that are not computer readable recording media. For example, at least one program is a computer program installed by a file provided via network 170 by a file distribution system (eg, server 160 described above) that distributes developer or application installation files (eg, described above). It may be loaded into the memory 211 or 221 based on the application.

プロセッサ２１２、２２２は、基本的な算術、ロジック、および入出力演算を実行することにより、コンピュータプログラムの命令を処理するように構成されてよい。命令は、メモリ２１１、２２１または通信モジュール２１３、２２３によって、プロセッサ２１２、２２２に提供されてよい。例えば、プロセッサ２１２、２２２は、メモリ２１１、２２１のような記録装置に記録されたプログラムコードにしたがって受信される命令を実行するように構成されてよい。 Processors 212 and 222 may be configured to process instructions in a computer program by performing basic arithmetic, logic, and input / output operations. Instructions may be provided to processors 212 and 222 by memory 211, 221 or communication modules 213 and 223. For example, processors 212 and 222 may be configured to execute instructions received according to program code recorded in a recording device such as memory 211 and 221.

通信モジュール２１３、２２３は、ネットワーク１７０を介して電子機器１１０とサーバ１５０とが互いに通信するための機能を提供してもよいし、電子機器１１０および／またはサーバ１５０が他の電子機器（一例として、電子機器１２０）または他のサーバ（一例として、サーバ１６０）と通信するための機能を提供してもよい。一例として、電子機器１１０のプロセッサ２１２がメモリ２１１のような記録装置に記録されたプログラムコードにしたがって生成した要求が、通信モジュール２１３の制御にしたがってネットワーク１７０を介してサーバ１５０に伝達されてよい。これとは逆に、サーバ１５０のプロセッサ２２２の制御にしたがって提供される制御信号や命令、コンテンツ、ファイルなどが、通信モジュール２２３とネットワーク１７０を経て電子機器１１０の通信モジュール２１３を通じて電子機器１１０に受信されてよい。例えば、通信モジュール２１３を通じて受信されたサーバ１５０の制御信号や命令、コンテンツ、ファイルなどは、プロセッサ２１２やメモリ２１１に伝達されてよく、コンテンツやファイルなどは、電子機器１１０がさらに含むことのできる記録媒体（上述した永続的記録装置）に記録されてよい。 The communication modules 213 and 223 may provide a function for the electronic device 110 and the server 150 to communicate with each other via the network 170, and the electronic device 110 and / or the server 150 may provide another electronic device (as an example). , Electronic device 120) or another server (as an example, server 160). As an example, a request generated by the processor 212 of the electronic device 110 according to a program code recorded in a recording device such as a memory 211 may be transmitted to the server 150 via the network 170 under the control of the communication module 213. On the contrary, control signals, instructions, contents, files, etc. provided under the control of the processor 222 of the server 150 are received by the electronic device 110 through the communication module 213 of the electronic device 110 via the communication module 223 and the network 170. May be done. For example, control signals, instructions, contents, files, etc. of the server 150 received through the communication module 213 may be transmitted to the processor 212 and the memory 211, and the contents, files, etc. may be further included in the electronic device 110. It may be recorded on a medium (permanent recording device described above).

入力／出力インタフェース２１４は、入力／出力装置２１５とのインタフェースのための手段であってよい。例えば、入力装置は、キーボード、マウス、マイクロフォン、カメラなどの装置を、出力装置は、ディスプレイ、スピーカ、触覚フィードバックデバイスなどのような装置を含んでよい。他の例として、入力／出力インタフェース２１４は、タッチスクリーンのように入力と出力のための機能が１つに統合された装置とのインタフェースのための手段であってもよい。入力／出力装置２１５は、電子機器１１０と１つの装置で構成されてもよい。また、サーバ１５０の入力／出力インタフェース２２４は、サーバ１５０に接続するかサーバ１５０が含むことのできる入力または出力のための装置（図示せず）とのインタフェースのための手段であってよい。より具体的な例として、電子機器１１０のプロセッサ２１２がメモリ２１１にロードされたコンピュータプログラムの命令を処理するにあたり、サーバ１５０や電子機器１２０が提供するデータを利用して構成されるサービス画面やコンテンツが、入力／出力インタフェース２１４を通じてディスプレイに表示されてよい。 The input / output interface 214 may be a means for an interface with the input / output device 215. For example, an input device may include a device such as a keyboard, mouse, microphone, camera, and an output device may include a device such as a display, speaker, haptic feedback device, and the like. As another example, the input / output interface 214 may be a means for an interface with a device such as a touch screen in which functions for input and output are integrated into one. The input / output device 215 may be composed of an electronic device 110 and one device. Also, the input / output interface 224 of the server 150 may be a means for connecting to the server 150 or for interfacing with an input or output device (not shown) that the server 150 can include. As a more specific example, when the processor 212 of the electronic device 110 processes an instruction of a computer program loaded in the memory 211, a service screen or content configured by using data provided by the server 150 or the electronic device 120. May be displayed on the display through the input / output interface 214.

また、他の実施形態において、電子機器１１０およびサーバ１５０は、図２の構成要素よりも多くの構成要素を含んでもよい。しかし、大部分の従来技術的構成要素を明確に図に示す必要はない。例えば、電子機器１１０は、上述した入力／出力装置２１５のうちの少なくとも一部を含むように実現されてもよいし、トランシーバ、ＧＰＳ（ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ）モジュール、カメラ、各種センサ、データベースなどのような他の構成要素をさらに含んでもよい。より具体的な例として、電子機器１１０がスマートフォンである場合、一般的にスマートフォンが含んでいる加速度センサやジャイロセンサ、カメラモジュール、物理的な各種ボタン、タッチパネルを利用したボタン、入力／出力ポート、振動のための振動器などのような多様な構成要素が、電子機器１１０にさらに含まれるように実現されてよい。 Also, in other embodiments, the electronic device 110 and the server 150 may include more components than the components of FIG. However, it is not necessary to clearly illustrate most of the prior art components. For example, the electronic device 110 may be realized to include at least a part of the above-mentioned input / output device 215, such as a transceiver, a GPS (Global Positioning System) module, a camera, various sensors, a database, and the like. Other components may be further included. As a more specific example, when the electronic device 110 is a smartphone, an acceleration sensor or gyro sensor, a camera module, various physical buttons, a button using a touch panel, an input / output port, which are generally included in the smartphone, Various components, such as a vibrating device for vibration, may be realized to be further included in the electronic device 110.

以下では、チャットルームに表示されるメッセージのプロフィール写真領域をカスタマイズする方法およびシステムの具体的な実施形態について説明する。 In the following, a method of customizing the profile photo area of the message displayed in the chat room and a specific embodiment of the system will be described.

図３は、本発明の一実施形態における、電子機器のプロセッサが含むことのできる構成要素の例を示したブロック図であり、図４は、本発明の一実施形態における、電子機器が実行することのできる方法の例を示したフローチャートである。 FIG. 3 is a block diagram showing an example of components that can be included in the processor of the electronic device according to the embodiment of the present invention, and FIG. 4 is a block diagram shown by the electronic device according to the embodiment of the present invention. It is a flowchart which showed the example of the possible method.

本実施形態に係る電子機器１１０には、コンピュータで実現されたカスタムプロフィール提供システムが構成されてよい。カスタムプロフィール提供システムは、電子機器１１０上にインストールされるアプリケーションの形態で実現され、サーバ１５０との連動によるネットワーク環境においてメッセンジャーやＳＮＳなどの目的とするサービスを提供してよい。 The electronic device 110 according to the present embodiment may be configured with a custom profile providing system realized by a computer. The custom profile providing system is realized in the form of an application installed on the electronic device 110, and may provide a target service such as a messenger or an SNS in a network environment linked with the server 150.

例えば、電子機器１１０にインストールされたアプリケーションが提供する命令に基づき、電子機器１１０に実現されたカスタムプロフィール提供システムは、カスタムプロフィール提供方法を実行してよい。図４に係るカスタムプロフィール提供方法を実行するために、電子機器１１０のプロセッサ２１２は、構成要素として、図３に示すように、イベント認識部３１０、写真添付提供部３２０、写真管理部３３０、メッセージ送信部３４０、およびプロフィール反映部３５０を含んでよい。実施形態によって、プロセッサ２１２の構成要素は、選択的にプロセッサ２１２に含まれても除外されてもよい。また、実施形態によって、プロセッサ２１２の構成要素は、プロセッサ２１２の機能の表現のために分離されても併合されてもよい。 For example, the custom profile providing system realized in the electronic device 110 may execute the custom profile providing method based on the instruction provided by the application installed in the electronic device 110. In order to execute the custom profile providing method according to FIG. 4, the processor 212 of the electronic device 110 has an event recognition unit 310, a photo attachment providing unit 320, a photo management unit 330, and a message as components, as shown in FIG. A transmission unit 340 and a profile reflection unit 350 may be included. Depending on the embodiment, the components of processor 212 may be selectively included or excluded from processor 212. Also, depending on the embodiment, the components of processor 212 may be separated or merged to represent the functionality of processor 212.

このようなプロセッサ２１２およびプロセッサ２１２の構成要素は、図４のカスタムプロフィール提供方法が含む段階４１０〜４５０を実行するように電子機器１１０を制御してよい。例えば、プロセッサ２１２およびプロセッサ２１２の構成要素は、メモリ２１１が含むオペレーティングシステムのコードと少なくとも１つのプログラムのコードとによる命令を実行するように実現されてよい。 Such a processor 212 and components of the processor 212 may control the electronic device 110 to perform steps 410-450 included in the custom profile providing method of FIG. For example, the processor 212 and the components of the processor 212 may be implemented to execute instructions by the code of the operating system included in the memory 211 and the code of at least one program.

ここで、プロセッサ２１２の構成要素は、電子機器１１０に記録されたプログラムコードが提供する命令（一例として、電子機器１１０で実行されるアプリケーションが提供する命令）にしたがってプロセッサ２１２によって実行される、プロセッサ２１２の互いに異なる機能の表現であってよい。例えば、電子機器１１０がチャットルームに対する入力イベントを認識するように上述した命令にしたがって電子機器１１０を制御するプロセッサ２１２の機能的表現として、イベント認識部３１０が利用されてよい。 Here, the components of the processor 212 are executed by the processor 212 according to an instruction provided by the program code recorded in the electronic device 110 (for example, an instruction provided by an application executed by the electronic device 110). It may be an expression of 212 different functions. For example, the event recognition unit 310 may be used as a functional representation of the processor 212 that controls the electronic device 110 according to the instructions described above so that the electronic device 110 recognizes an input event for the chat room.

段階４１０で、プロセッサ２１２は、電子機器１１０の制御と関連する命令がロードされたメモリ２１１から必要な命令を読み取ってよい。この場合、前記読み取られた命令は、以下で説明される段階４２０〜４５０をプロセッサ２１２が実行するように制御するための命令を含んでよい。 At step 410, the processor 212 may read the required instructions from the memory 211 loaded with the instructions associated with the control of the electronic device 110. In this case, the read instructions may include instructions for controlling the processor 212 to perform steps 420-450 described below.

段階４２０で、イベント認識部３１０は、チャットルームに対して該当のチャットルームに表示されるプロフィールをカスタマイズするための入力イベントを認識してよい。メッセンジャーやＳＮＳなどでは、チャットルームにメッセージを表示するときに該当のメッセージを発信したユーザのプロフィール領域も表示するが、本発明では、メッセージ別に異なるプロフィール写真を適用することができるカスタムプロフィール機能を提供する。カスタムプロフィール機能は、メッセージ送信時に、該当のメッセージのプロフィール領域に適用するための写真をともに添付して送信する。したがって、メッセージごとに異なるプロフィール写真を適用することができ、これによって多様な感情表現や娯楽性を提供することができる。このようなカスタムプロフィール機能の使用性を高めるためには、写真添付のためのユーザ命令を入力する過程と、写真添付にかかる時間を減らすための努力が必要となる。このために、チャットルームで別途のメニューを操作せずに写真添付機能を直ぐに呼び出すための入力ルールを事前に定義してよいが、一例として、イベント認識部３１０は、チャットルームのメッセージ入力ウィンドウにタグとして定義された特殊文字、例えば、「＃、＠、＋」などのような記号が入力されれば、これを写真添付機能の呼び出しのための入力イベントとして認識してよい。他の例として、イベント認識部３１０は、電子機器１１０の画面にチャットルームが表示された状態で特定のジェスチャー、例えば、シェイクジェスチャーが入力されれば、これを写真添付機能の呼び出しのための入力イベントとして認識してよい。また他の例として、イベント認識部３１０は、電子機器１１０の画面にチャットルームが表示された状態で地面に対する電子機器１１０の角度（または傾き）が予め定められた角度（例えば、７０度）以上となれば、これを写真添付機能の呼び出しのための入力イベントとして認識してよい。さらに他の例として、イベント認識部３１０は、チャットルームのメッセージ入力ウィンドウに入力中のメッセージ内容から感情情報が抽出されれば、これを写真添付機能の呼び出しのための入力イベントとして認識してよい。このとき、イベント認識部３１０は、ユーザがチャットルームのメッセージ入力ウィンドウに入力中のメッセージ内容から、感情を示す用語として事前に分類されたキーワードを抽出してよく、カスタムプロフィール機能に対する学習やユーザ履歴に基づいて入力イベントを認識してよい。 At step 420, the event recognition unit 310 may recognize the input event for customizing the profile displayed in the chat room for the chat room. In messenger, SNS, etc., when displaying a message in the chat room, the profile area of the user who sent the message is also displayed, but the present invention provides a custom profile function that allows different profile pictures to be applied to each message. do. When sending a message, the custom profile function attaches a photo to be applied to the profile area of the message and sends it. Therefore, a different profile picture can be applied to each message, which can provide a variety of emotional expressions and entertainment. In order to improve the usability of such a custom profile function, it is necessary to input a user command for attaching a photo and make an effort to reduce the time required for attaching the photo. For this purpose, an input rule for immediately calling the photo attachment function without operating a separate menu in the chat room may be defined in advance, but as an example, the event recognition unit 310 is displayed in the message input window of the chat room. If a special character defined as a tag, for example, a symbol such as "#, @, +" is input, this may be recognized as an input event for calling the photo attachment function. As another example, the event recognition unit 310 inputs a specific gesture, for example, a shake gesture, when the chat room is displayed on the screen of the electronic device 110, for calling the photo attachment function. It may be recognized as an event. As another example, in the event recognition unit 310, the angle (or inclination) of the electronic device 110 with respect to the ground is equal to or higher than a predetermined angle (for example, 70 degrees) while the chat room is displayed on the screen of the electronic device 110. Then, this may be recognized as an input event for calling the photo attachment function. As yet another example, if the emotion information is extracted from the message content being input to the message input window of the chat room, the event recognition unit 310 may recognize this as an input event for calling the photo attachment function. .. At this time, the event recognition unit 310 may extract keywords pre-classified as terms indicating emotions from the message content being input by the user in the message input window of the chat room, and may learn about the custom profile function and the user history. The input event may be recognized based on.

段階４３０で、写真添付提供部３２０は、段階４２０で認識された入力イベントに基づき、写真撮影のためのカメラビューおよび電子機器１１０に保存された写真のうちの少なくとも一部を含む写真推薦リストのうちの少なくとも１つの写真添付機能を決定し、決定された写真添付機能をチャットルームに提供してよい。言い換えれば、写真添付提供部３２０は、チャットルームのプロフィールカスタマイズのための入力イベントが認識されれば、写真添付機能としてカメラビューおよび写真推薦リストのうちの少なくとも１つを提供してよい。このとき、写真添付提供部３２０は、入力イベントに基づき、カメラビューだけを提供するか、写真推薦リストだけを提供するか、あるいはカメラビューと写真推薦リストの両方を提供してよい。したがって、写真添付提供部３２０は、ユーザが個別のメニューを直に操作しなくても、チャットルームにおけるメッセージ作成過程で認識される入力イベントだけで写真添付機能を自動的にアクティブ化することができる。 At step 430, the photo attachment provider 320 is based on the input event recognized at step 420 of the photo recommendation list that includes at least a portion of the photos stored in the camera view and electronic device 110 for photography. At least one of the photo attachment functions may be determined and the determined photo attachment function may be provided to the chat room. In other words, the photo attachment providing unit 320 may provide at least one of the camera view and the photo recommendation list as the photo attachment function if the input event for customizing the profile of the chat room is recognized. At this time, the photo attachment providing unit 320 may provide only the camera view, only the photo recommendation list, or both the camera view and the photo recommendation list based on the input event. Therefore, the photo attachment providing unit 320 can automatically activate the photo attachment function only by the input event recognized in the message creation process in the chat room without the user directly operating the individual menu. ..

写真推薦のための必要な事前過程として、写真管理部３３０は、電子機器１１０に保存された写真それぞれに対して写真から写真と関連する単語やキーワードなどのキーワードを抽出し、抽出されたキーワードをタグ付けしてよい。写真管理部３３０は、人工知能アプリケーションフレームワーク、例えば、ｉＯＳＣｏｒｅＭＬのＶｉｓｉｏｎｆｒａｍｅｗｏｒｋ（ｈｔｔｐｓ：／／ｄｅｖｅｌｏｐｅｒ．ａｐｐｌｅ．ｃｏｍ／ｄｏｃｕｍｅｎｔａｔｉｏｎ／ｖｉｓｉｏｎ／ｃｌａｓｓｉｆｙｉｎｇ＿ｉｍａｇｅｓ＿ｗｉｔｈ＿ｖｉｓｉｏｎ＿ａｎｄ＿ｃｏｒｅ＿ｍｌ）または顔認識ＡＰＩ（ｈｔｔｐｓ：／／ｗｉｃｇ．ｇｉｔｈｕｂ．ｉｏ／ｓｈａｐｅ−ｄｅｔｅｃｔｉｏｎ−ａｐｉ／）などを利用することで、写真から関連するキーワード（事物の名称や類似語など）を抽出して記録してよい。写真管理部３３０は、電子機器１１０に保存された全体の写真に対して事前にタグ付け作業を完了させることも可能であるし、あるいは写真添付提供部３２０から写真推薦が要求された時点に電子機器１１０に保存された全体の写真のうちでここ最近に保存された一部の写真（例えば、ここ１週間以内に保存された写真、またはここ最近に保存された１００枚の写真など）に対してリアルタイムでタグ付け作業を実行することも可能である。これにより、写真添付提供部３２０は、タグ付け作業がなされた写真のうち、チャットルームのメッセージ入力ウィンドウに入力されたメッセージに対応するキーワードがタグ付けされた写真を、写真添付機能の写真推薦リストとして提供してよい。写真添付提供部３２０は、タグ付けされたキーワードに基づき、電子機器１１０に保存された写真のうちからチャットルームのメッセージ入力ウィンドウに入力されたメッセージに対応する少なくとも１つの写真を選択し、写真推薦リストとして提供してよい。本明細書では、カスタムプロフィール機能の推薦対象として写真を代表的な例として説明しているが、これに限定されてはならず、静止映像はもちろん、動画やＧＩＦファイルなどが推薦対象に含まれてもよい。例えば、動画の場合は、代表イメージやサムネイルなどのような少なくとも一部のフレームから関連キーワードを抽出してタグ付けしてよく、動画にタグ付けされたキーワードに基づいて動画推薦リストを提供することも可能である。 As a necessary preliminary process for photo recommendation, the photo management unit 330 extracts keywords such as words and keywords related to the photo from the photo for each photo stored in the electronic device 110, and extracts the extracted keywords. You may tag it. The photo management unit 330 is an artificial intelligence application framework, for example, iOS CoreML's Vision framework (https://developer.apple.com/decommentation/vision/classification_images_with_with_vision_and_core_). By using / sheep-detection-api /) or the like, related keywords (names of things, similar words, etc.) may be extracted from the photograph and recorded. The photo management unit 330 can complete the tagging work in advance for the entire photo stored in the electronic device 110, or electronically when the photo attachment providing unit 320 requests a photo recommendation. For some of the most recently saved photos of the total photos stored on device 110 (eg, photos saved within the last week, or 100 photos recently saved) It is also possible to perform tagging work in real time. As a result, the photo attachment providing unit 320 selects the photos tagged with the keyword corresponding to the message input in the message input window of the chat room from the photos that have been tagged, in the photo recommendation list of the photo attachment function. May be provided as. The photo attachment providing unit 320 selects at least one photo corresponding to the message input in the message input window of the chat room from the photos stored in the electronic device 110 based on the tagged keyword, and recommends the photo. May be provided as a list. In this specification, a photograph is described as a typical example as a recommendation target of the custom profile function, but it should not be limited to this, and not only a still image but also a video or a GIF file is included in the recommendation target. You may. For example, in the case of a video, related keywords may be extracted and tagged from at least some frames such as representative images and thumbnails, and a video recommendation list should be provided based on the keywords tagged in the video. Is also possible.

段階４４０で、メッセージ送信部３４０は、チャットルームで作成されたメッセージの送信要求に写真添付機能によって特定された写真が含まれる場合、特定された写真を該当のメッセージとともに送信してよい。メッセージ送信部３４０は、チャットルームのメッセージ入力ウィンドウに入力されたメッセージに対する送信要求にしたがって該当のメッセージをサーバ１５０に送信するようになるが、このとき、メッセージ送信時に写真添付機能によって特定された写真、すなわち、カメラビューによって撮影された写真あるいは写真推薦リストから選択された写真をともに送信してよい。メッセージ送信部３４０は、メッセージの送信要求が入力された時点にカメラビューによって写真を自動撮影し、撮影された写真をメッセージとともに送信してもよく、あるいはメッセージの送信要求が入力された時点に写真推薦リストからユーザによって写真が選択されている場合には、選択された写真を該当のメッセージとともに送信してよい。このとき、メッセージ送信部３４０は、写真添付機能によって特定された写真とともにメッセージをサーバ１５０に送信してよく、これにより、サーバ１５０は、該当のメッセージを、カスタムプロフィールを含んだメッセージタイプとして分類して写真とともに記録および管理し、カスタムプロフィールを含んだメッセージタイプの場合は、チャットルームに含まれたユーザにメッセージと写真の両方を伝達してよい。 In step 440, if the message transmission request created in the chat room includes a photo specified by the photo attachment function, the message transmission unit 340 may send the specified photo together with the corresponding message. The message transmission unit 340 sends the corresponding message to the server 150 according to the transmission request for the message input in the message input window of the chat room. At this time, the photo specified by the photo attachment function at the time of sending the message That is, the photos taken by the camera view or the photos selected from the photo recommendation list may be sent together. The message transmitting unit 340 may automatically take a picture by the camera view at the time when the message sending request is input and send the taken picture together with the message, or the picture at the time when the message sending request is input. If a photo is selected by the user from the recommendation list, the selected photo may be sent with the corresponding message. At this time, the message transmission unit 340 may send a message to the server 150 together with the photo specified by the photo attachment function, whereby the server 150 classifies the message as a message type including a custom profile. For message types that are recorded and managed with photos and include custom profiles, both the message and the photo may be communicated to the users contained in the chat room.

段階４５０で、プロフィール反映部３５０は、チャットルームに該当のチャットルームでやり取りしたメッセージを表示する過程において、各メッセージに対応するプロフィール領域に、該当のメッセージとともに送信された写真を反映してよい。言い換えれば、プロフィール反映部３５０は、チャットルームでやり取りしたメッセージのうちでカスタムプロフィールを含んだメッセージタイプの場合は、メッセージごとに異なるプロフィール写真が反映されたプロフィール領域を表示してよい。 In step 450, the profile reflection unit 350 may reflect the photo transmitted together with the message in the profile area corresponding to each message in the process of displaying the message exchanged in the chat room in the chat room. In other words, the profile reflection unit 350 may display a profile area in which a different profile picture is reflected for each message in the case of a message type including a custom profile among the messages exchanged in the chat room.

したがって、本発明では、チャットルームに写真撮影のためのカメラビューや人工知能を利用した写真推薦による写真添付機能を提供し、これを利用することでメッセージごとにプロフィール領域をカスタマイズすることができる。 Therefore, in the present invention, the chat room is provided with a camera view for taking a picture and a photo attachment function by photo recommendation using artificial intelligence, and by using this, the profile area can be customized for each message.

図５〜９は、本発明の一実施形態における、写真添付機能が自動的にアクティブ化する過程を説明するための例示図である。 5 to 9 are illustrations for explaining the process of automatically activating the photo attachment function in one embodiment of the present invention.

写真添付機能が自動的にアクティブ化する過程の一例として、図５を参照すると、電子機器１１０のプロセッサ２１２は、チャットルーム５００のメッセージ入力ウィンドウにタグとして定義された特殊文字５０１とともにキーワード５０２が入力されれば、該当の特殊文字５０１を写真添付機能の呼び出しのための入力イベントとして認識して写真添付機能を自動アクティブ化してよく、このとき、写真添付機能として、簡単な写真撮影が可能なカメラビュー５１０と、キーワード５０２と関連する写真推薦リスト５２０とを自動で提供してよい。例えば、ユーザがチャットルーム５００のメッセージ入力ウィンドウにタグ「＃」とともにキーワード「ｐｈｏｎｅ」を入力した場合、電子機器１１０のプロセッサ２１２は、タグ「＃」が認識されることによってカメラビュー５１０を直ぐにアクティブ化すると同時に、電子機器１１０に保存された写真のうちでキーワード「ｐｈｏｎｅ」がタグ付けされた写真推薦リスト５２０をともに提供してよい。電子機器１１０のプロセッサ２１２は、キーワードとマッチングする写真推薦リスト５２０を提供することの他にも、オブジェクト認識技術に基づき、カメラビュー５１０によってキャプチャされたイメージからキーワードとマッチングするオブジェクトを認識してカメラフォーカスを自動で調節することも可能である。例えば、ユーザがチャットルーム５００のメッセージ入力ウィンドウにタグ「＃」とともにキーワード「ｐｈｏｎｅ」を入力した場合、カメラビュー５１０を直ぐにアクティブ化すると同時に、カメラビュー５１０によってキャプチャされたイメージから「ｐｈｏｎｅ」に対応するオブジェクトにフォーカスが合うようにしてよい。 As an example of the process of automatically activating the photo attachment function, referring to FIG. 5, the processor 212 of the electronic device 110 inputs the keyword 502 together with the special character 501 defined as a tag in the message input window of the chat room 500. If so, the corresponding special character 501 may be recognized as an input event for calling the photo attachment function and the photo attachment function may be automatically activated. At this time, the camera capable of taking a simple photo as the photo attachment function. A view 510 and a photo recommendation list 520 associated with the keyword 502 may be provided automatically. For example, when the user inputs the keyword "phone" together with the tag "#" in the message input window of the chat room 500, the processor 212 of the electronic device 110 immediately activates the camera view 510 by recognizing the tag "#". At the same time, a photo recommendation list 520 tagged with the keyword "window" among the photos stored in the electronic device 110 may be provided together. In addition to providing the photo recommendation list 520 that matches the keyword, the processor 212 of the electronic device 110 recognizes the object that matches the keyword from the image captured by the camera view 510 based on the object recognition technology, and the camera recognizes the object that matches the keyword. It is also possible to adjust the focus automatically. For example, when the user inputs the keyword "object" together with the tag "#" in the message input window of the chat room 500, the camera view 510 is immediately activated and at the same time, the image captured by the camera view 510 corresponds to "object". You may want the object to be in focus.

写真添付機能が自動的にアクティブ化する過程の他の例として、図６を参照すると、電子機器１１０のプロセッサ２１２は、チャットルーム６００が表示された状態で電子機器１１０に対してシェイクジェスチャー６０１が入力されれば、写真添付機能としてカメラビュー６１０を自動的にアクティブ化してよい。このとき、電子機器１１０のプロセッサ２１２は、シェイクジェスチャー６０１が認識されることにより、カメラビュー６１０とともに、メッセージ作成のためのキーボード領域６３０をアクティブ化することも可能である。また、電子機器１１０のプロセッサ２１２は、チャットルーム６００のメッセージ入力ウィンドウにキーワードの一部が入力された状態で電子機器１１０に対するシェイクジェスチャー６０１が入力されれば、写真添付機能として、該当のキーワードと関連する写真推薦リストをカメラビュー６１０とともにアクティブ化してもよい。 As another example of the process of automatically activating the photo attachment function, referring to FIG. 6, the processor 212 of the electronic device 110 makes a shake gesture 601 to the electronic device 110 while the chat room 600 is displayed. If input, the camera view 610 may be automatically activated as a photo attachment function. At this time, the processor 212 of the electronic device 110 can activate the keyboard area 630 for message creation together with the camera view 610 by recognizing the shake gesture 601. Further, if the shake gesture 601 for the electronic device 110 is input in a state where a part of the keyword is input in the message input window of the chat room 600, the processor 212 of the electronic device 110 can use the corresponding keyword as a photo attachment function. A related photo recommendation list may be activated with camera view 610.

写真添付機能が自動的にアクティブ化する過程のまた他の例として、図７を参照すると、電子機器１１０のプロセッサ２１２は、電子機器１１０の角度（または傾き）７０１を認識し、チャットルーム７００が表示された状態で電子機器１１０の角度７０１が定められた角度（例えば、７０度）以上となれば、写真添付機能としてカメラビュー７１０を自動的にアクティブ化してよい。このとき、電子機器１１０のプロセッサ２１２は、カメラビュー７１０とともに、メッセージ作成のためのキーボード領域７３０をアクティブ化することも可能である。また、電子機器１１０のプロセッサ２１２は、チャットルーム７００のメッセージ入力ウィンドウにキーワードの一部が入力された状態で電子機器１１０が定められた角度以上に傾けられれば、写真添付機能として、該当のキーワードと関連する写真推薦リストをカメラビュー７１０とともにアクティブ化してもよい。 As yet another example of the process by which the photo attachment function is automatically activated, referring to FIG. 7, the processor 212 of the electronic device 110 recognizes the angle (or tilt) 701 of the electronic device 110, and the chat room 700 recognizes the angle (or tilt) 701 of the electronic device 110. If the angle 701 of the electronic device 110 is equal to or greater than a predetermined angle (for example, 70 degrees) in the displayed state, the camera view 710 may be automatically activated as a photo attachment function. At this time, the processor 212 of the electronic device 110 can also activate the keyboard area 730 for message creation together with the camera view 710. Further, if the processor 212 of the electronic device 110 is tilted more than a predetermined angle while a part of the keyword is input in the message input window of the chat room 700, the corresponding keyword is used as a photo attachment function. The related photo recommendation list may be activated with the camera view 710.

また他の例として、写真添付機能として、カメラビューを呼び出すためのタグと写真推薦リストを呼び出すためのタグとを区分して適用することも可能である。図８を参照すると、電子機器１１０のプロセッサ２１２は、チャットルーム８００のメッセージ入力ウィンドウに第１タグ８０１−１として「＠」が入力される場合、写真添付機能としてカメラビュー８１０をアクティブ化してよく、チャットルーム８００のメッセージ入力ウィンドウに第２タグ８０１−２として「＃」が入力される場合、写真添付機能として写真推薦リスト８２０をアクティブ化してよい。写真推薦リスト８２０は、電子機器１１０に保存された写真のうち、第２タグ８０１−２「＃」とともに入力されたキーワード８０２「ｐｈｏｎｅ」がタグ付けされた写真リストで構成されてよい。 As another example, as a photo attachment function, it is possible to separately apply a tag for calling the camera view and a tag for calling the photo recommendation list. Referring to FIG. 8, the processor 212 of the electronic device 110 may activate the camera view 810 as a photo attachment function when "@" is input as the first tag 801-1 in the message input window of the chat room 800. , When "#" is input as the second tag 801-2 in the message input window of the chat room 800, the photo recommendation list 820 may be activated as a photo attachment function. The photo recommendation list 820 may be composed of a photo list tagged with the keyword 802 "phone" entered together with the second tag 801-2 "#" among the photos stored in the electronic device 110.

写真添付機能が自動的にアクティブ化する過程のさらに他の例として、図９を参照すると、電子機器１１０のプロセッサ２１２は、チャットルーム９００のメッセージ入力ウィンドウに入力されたキーワード９０２から感情情報が抽出される場合、写真添付機能として、カメラビュー９１０と、キーワード９０２と関連する写真推薦リスト９２０とを提供してよい。感情情報は、チャットルーム９００のメッセージ入力ウィンドウに作成されたメッセージ内容に含まれた単語や文章などから抽出されてよい。感情を示す用語、すなわち感情用語は事前に定められてよく、電子機器１１０のプロセッサ２１２は、チャットルーム９００のメッセージ入力ウィンドウに感情用語として分類されたキーワード９０２が入力される場合、これを感情情報が抽出されたと判断して写真添付機能を自動的にアクティブ化してよい。このとき、写真推薦リスト９２０は、電子機器１１０に保存された写真のうち、チャットルーム９００のメッセージ入力ウィンドウにキーワード９０２「ｐｅｒｆｅｃｔ」がタグ付けされた写真リストで構成されてよい。または、電子機器１１０のプロセッサ２１２は、カスタムプロフィールに対するユーザ履歴を学習したり累積したりしてよく、感情用語別にユーザ履歴に基づいて写真推薦リスト９２０を提供してよい。例えば、チャットルーム９００のメッセージ入力ウィンドウに感情用語に該当するキーワード９０２「ｐｅｒｆｅｃｔ」が入力された場合、「ｐｅｒｆｅｃｔ」に対して以前にユーザが最も多く添付した写真またはここ最近に添付した写真を自動で推薦してよい。 As yet another example of the process of automatically activating the photo attachment function, referring to FIG. 9, the processor 212 of the electronic device 110 extracts emotional information from the keyword 902 entered in the message input window of the chat room 900. If so, the camera view 910 and the photo recommendation list 920 associated with the keyword 902 may be provided as a photo attachment function. The emotional information may be extracted from words and sentences included in the message content created in the message input window of the chat room 900. The term indicating emotion, that is, the emotion term may be predetermined, and when the keyword 902 classified as the emotion term is input to the message input window of the chat room 900, the processor 212 of the electronic device 110 uses this as emotion information. The photo attachment function may be automatically activated by determining that the image has been extracted. At this time, the photo recommendation list 920 may be composed of a photo list in which the keyword 902 "perfect" is tagged in the message input window of the chat room 900 among the photos stored in the electronic device 110. Alternatively, the processor 212 of the electronic device 110 may learn or accumulate the user history for the custom profile and may provide the photo recommendation list 920 based on the user history for each emotional term. For example, when the keyword 902 "perfect" corresponding to the emotional term is entered in the message input window of the chat room 900, the photo most frequently attached by the user before or the photo recently attached to "perfect" is automatically selected. You may recommend it at.

電子機器１１０のプロセッサ２１２は、チャットルームに対して事前に定義された入力イベントが認識される場合、カメラビューと写真推薦リストのうちの少なくとも１つの写真添付機能を自動的にアクティブ化してよく、チャットルームのメッセージ入力ウィンドウに入力されたメッセージを送信するときに写真添付機能によって特定された写真をともに送信し、該当のメッセージのプロフィール領域に反映されるようにしてよい。図１０を参照すると、チャットルーム１０００にチャットルーム１０００でやり取りしたメッセージを表示するとき、メッセージ作成時に写真添付機能によって添付した写真を該当のメッセージのプロフィール領域１０１１、１０１２、１０２１に反映してよい。図１０は、電子機器１１０のユーザＡが他のユーザ「ＨＹ☆☆」、「ナヤナ」とメッセージをやり取りするチャットルーム１０００を示している。ユーザ「ＨＹ☆☆」がメッセージごとに異なる写真を添付して送信した場合、同じユーザが送信したメッセージであっても、各メッセージのプロフィール領域１０１１、１０１２には異なるプロフィール写真が反映されてよい。ユーザＡが送信したメッセージはチャットルーム１０００の右側に、「ＨＹ☆☆」と「ナヤナ」が送信したメッセージはチャットルーム１０００の左側に並ぶようになるが、このとき、ユーザＡが送信したメッセージにはプロフィール領域が表示されないが、ユーザＡがメッセージ送信時に写真添付機能によって写真を添付した場合には、該当のメッセージに対してプロフィール領域１０２１が表示されてよい。電子機器１１０のプロセッサ２１２は、チャットルームに対してカスタムプロフィール機能を適用することにより、チャットルーム１０００のメッセージごとに、該当のメッセージのプロフィール領域に反映しようとする写真をカスタマイズすることができる。 The processor 212 of the electronic device 110 may automatically activate the photo attachment function of at least one of the camera view and the photo recommendation list when a predefined input event is recognized for the chat room. When sending a message entered in the message input window of a chat room, the photo specified by the photo attachment function may be sent together so that it will be reflected in the profile area of the corresponding message. Referring to FIG. 10, when displaying the message exchanged in the chat room 1000 in the chat room 1000, the photo attached by the photo attachment function at the time of composing the message may be reflected in the profile areas 1011, 1012, 1021 of the corresponding message. FIG. 10 shows a chat room 1000 in which user A of the electronic device 110 exchanges messages with other users “HY ☆☆” and “Nayana”. When the user "HY ☆☆" attaches and sends a different picture for each message, different profile pictures may be reflected in the profile areas 1011 and 1012 of each message even if the messages are sent by the same user. The messages sent by user A will be lined up on the right side of chat room 1000, and the messages sent by "HY ☆☆" and "Nayana" will be lined up on the left side of chat room 1000. Although the profile area is not displayed, if the user A attaches a photo by the photo attachment function at the time of sending a message, the profile area 1021 may be displayed for the corresponding message. By applying the custom profile function to the chat room, the processor 212 of the electronic device 110 can customize the photo to be reflected in the profile area of the message for each message in the chat room 1000.

このように、本発明の実施形態によると、メッセンジャーやＳＮＳなどのチャットルームにおいて、写真撮影および／または写真推薦によってプロフィール写真領域をメッセージ別にカスタマイズすることができ、チャットルームでプロフィールカスタマイズのための写真添付にかかる過程と時間を最小化することにより、カスタムプロフィール機能の使用性を高めることができる。 As described above, according to the embodiment of the present invention, in a chat room such as messenger or SNS, the profile picture area can be customized for each message by taking a picture and / or recommending a picture, and the picture for profile customization in the chat room. By minimizing the process and time required for attachment, you can improve the usability of the custom profile function.

上述した装置は、ハードウェア構成要素、ソフトウェア構成要素、および／またはハードウェア構成要素とソフトウェア構成要素との組み合わせによって実現されてよい。例えば、実施形態で説明された装置および構成要素は、プロセッサ、コントローラ、ＡＬＵ（ａｒｉｔｈｍｅｔｉｃｌｏｇｉｃｕｎｉｔ）、デジタル信号プロセッサ、マイクロコンピュータ、ＦＰＧＡ（ｆｉｅｌｄｐｒｏｇｒａｍｍａｂｌｅｇａｔｅａｒｒａｙ）、ＰＬＵ（ｐｒｏｇｒａｍｍａｂｌｅｌｏｇｉｃｕｎｉｔ）、マイクロプロセッサ、または命令を実行して応答することができる様々な装置のように、１つ以上の汎用コンピュータまたは特殊目的コンピュータを利用して実現されてよい。処理装置は、オペレーティングシステム（ＯＳ）およびＯＳ上で実行される１つ以上のソフトウェアアプリケーションを実行してよい。また、処理装置は、ソフトウェアの実行に応答し、データにアクセスし、データを記録、操作、処理、および生成してもよい。理解の便宜のために、１つの処理装置が使用されるとして説明される場合もあるが、当業者は、処理装置が複数個の処理要素および／または複数種類の処理要素を含んでもよいことが理解できるであろう。例えば、処理装置は、複数個のプロセッサまたは１つのプロセッサおよび１つのコントローラを含んでよい。また、並列プロセッサのような、他の処理構成も可能である。 The devices described above may be implemented by hardware components, software components, and / or combinations of hardware components and software components. For example, the apparatus and components described in the embodiments include a processor, a controller, an ALU (arithmetic logic unit), a digital signal processor, a microcomputer, an FPGA (field program gate array), a PLU (programmable log unit), a microprocessor, and the like. Alternatively, it may be implemented using one or more general purpose computers or special purpose computers, such as various devices capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the OS. The processing device may also respond to the execution of the software, access the data, and record, manipulate, process, and generate the data. For convenience of understanding, one processor may be described as being used, but one of ordinary skill in the art may appreciate that the processor may include multiple processing elements and / or multiple types of processing elements. You can understand. For example, the processing device may include multiple processors or one processor and one controller. Other processing configurations, such as parallel processors, are also possible.

ソフトウェアは、コンピュータプログラム、コード、命令、またはこれらのうちの１つ以上の組み合わせを含んでもよく、思うままに動作するように処理装置を構成したり、独立的または集合的に処理装置に命令したりしてよい。ソフトウェアおよび／またはデータは、処理装置に基づいて解釈されたり、処理装置に命令またはデータを提供したりするために、いかなる種類の機械、コンポーネント、物理装置、コンピュータ記録媒体または装置に具現化されてよい。ソフトウェアは、ネットワークによって接続されたコンピュータシステム上に分散され、分散された状態で記録されても実行されてもよい。ソフトウェアおよびデータは、１つ以上のコンピュータ読み取り可能な記録媒体に記録されてよい。 The software may include computer programs, code, instructions, or a combination of one or more of these, configuring the processing equipment to operate at will, or instructing the processing equipment independently or collectively. You may do it. The software and / or data is embodied in any type of machine, component, physical device, computer recording medium or device to be interpreted based on the processing device or to provide instructions or data to the processing device. good. The software is distributed on a networked computer system and may be recorded or executed in a distributed state. The software and data may be recorded on one or more computer-readable recording media.

実施形態に係る方法は、多様なコンピュータ手段によって実行可能なプログラム命令の形態で実現されてコンピュータ読み取り可能な媒体に記録されてよい。ここで、媒体は、コンピュータ実行可能なプログラムを継続して記録するものであっても、実行またはダウンロードのために一時記録するものであってもよい。また、媒体は、単一または複数のハードウェアが結合した形態の多様な記録手段または格納手段であってよく、あるコンピュータシステムに直接接続する媒体に限定されることはなく、ネットワーク上に分散して存在するものであってもよい。媒体の例は、ハードディスク、フロッピー（登録商標）ディスク、および磁気テープのような磁気媒体、ＣＤ−ＲＯＭおよびＤＶＤのような光媒体、フロプティカルディスク（ｆｌｏｐｔｉｃａｌｄｉｓｋ）のような光磁気媒体、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどを含み、プログラム命令が記録されるように構成されたものであってよい。また、媒体の他の例として、アプリケーションを配布するアプリケーションストアやその他の多様なソフトウェアを供給または配布するサイト、サーバなどで管理する記録媒体または格納媒体が挙げられる。 The method according to the embodiment may be implemented in the form of program instructions that can be executed by various computer means and recorded on a computer-readable medium. Here, the medium may be a continuous recording of a computer-executable program or a temporary recording for execution or download. Further, the medium may be various recording means or storage means in the form of a combination of a single piece of hardware or a plurality of pieces of hardware, and is not limited to a medium directly connected to a certain computer system, but is distributed on a network. It may exist. Examples of media include hard disks, floppy (registered trademark) disks, magnetic media such as magnetic tapes, optical media such as CD-ROMs and DVDs, optical magnetic media such as floptic discs, and optical media. It may include a ROM, a RAM, a flash memory, and the like, and may be configured to record program instructions. Other examples of media include recording media or storage media managed by application stores that distribute applications, sites that supply or distribute various other software, servers, and the like.

以上のように、実施形態を、限定された実施形態および図面に基づいて説明したが、当業者であれば、上述した記載から多様な修正および変形が可能であろう。例えば、説明された技術が、説明された方法とは異なる順序で実行されたり、かつ／あるいは、説明されたシステム、構造、装置、回路などの構成要素が、説明された方法とは異なる形態で結合されたりまたは組み合わされたり、他の構成要素または均等物によって対置されたり置換されたとしても、適切な結果を達成することができる。 As described above, the embodiments have been described based on the limited embodiments and drawings, but those skilled in the art will be able to make various modifications and modifications from the above description. For example, the techniques described may be performed in a different order than the methods described, and / or components such as the systems, structures, devices, circuits described may be in a form different from the methods described. Appropriate results can be achieved even if they are combined or combined, or confronted or replaced by other components or equivalents.

したがって、異なる実施形態であっても、特許請求の範囲と均等なものであれば、添付される特許請求の範囲に属する。 Therefore, even if the embodiments are different, they belong to the attached claims as long as they are equal to the claims.

Claims

A program that causes at least one processor of an electronic device to execute a custom profile providing method, wherein the custom profile providing method is
When the at least one processor recognizes the input event for customizing the profile displayed in the chat room for the chat room, the stage of providing the photo attachment function to the chat room.
When the request for sending a message created in the chat room by the at least one processor includes a photo specified by the photo attachment function, the step of transmitting the specified photo together with the message.
A program comprising the step of displaying the transmitted photo in the profile area of the message corresponding to the message in the chat room by the at least one processor.

The stage to be provided is
Based on the input event recognized for the chat room, at least one photo attachment feature in the photo recommendation list that includes at least a portion of the camera view for photography and the photos stored in the electronic device. The program according to claim 1, comprising the step of determining the above and providing the determined at least one photo attachment function to the chat room.

The stage to be provided is
The program according to claim 2, comprising a step of automatically activating the photo attachment function in the chat room when a special character defined as a tag is input in the message input window of the chat room.

The tag includes a first tag for calling the camera view and a second tag for calling the photo recommendation list among the photo attachment functions.
The program according to claim 3.

The stage to be provided is
A claim including a step of automatically activating the photo attachment function in the chat room when a specific gesture is input to the electronic device while the chat room is displayed on the screen of the electronic device. The program according to any one of items 1 to 4.

The stage to be provided is
If the angle of the electronic device with respect to the ground is equal to or greater than a predetermined angle while the chat room is displayed on the screen of the electronic device, the step of automatically activating the photo attachment function in the chat room is performed. The program according to any one of claims 1 to 5, which includes.

The stage to be provided is
Any one of claims 1 to 6, including a step of automatically activating the photo attachment function in the chat room when emotional information is extracted from the message content being input in the message input window of the chat room. The program described in the section.

The custom profile providing method is
It further comprises the step of extracting and tagging each of the photographs stored in the electronic device by the at least one processor with keywords related to the photographs.
The stage to be provided is
Based on the tagged keyword, at least one photo corresponding to the message entered in the message input window of the chat room is selected from the photos stored in the electronic device and provided as the photo recommendation list. The program of claim 2, comprising a step.

The transmission stage is
The program according to claim 2, further comprising a step of transmitting a photograph automatically taken by the camera view to a server together with the message when a request for transmitting the message is input.

The transmission stage is
The program according to claim 2, wherein if a photo is selected from the photo recommendation list at the time the request for sending the message is input, the selected photo is transmitted to the server together with the message.

The message is categorized on the server as a message type containing a custom profile and managed with the photo.
The program according to claim 9 or 10.

It is a custom profile providing system realized for electronic devices.
Includes memory and at least one processor connected to said memory and configured to execute computer-readable instructions contained in said memory.
The at least one processor
If the input event for customizing the profile displayed in the chat room is recognized for the chat room, the photo attachment providing unit that provides the photo attachment function to the chat room,
When the request for sending a message created in the chat room includes a photo specified by the photo attachment function, a message transmitter that sends the specified photo together with the message,
A custom profile providing system that includes a profile reflection unit that displays the transmitted photo in the profile area of the message corresponding to the message in the chat room.

The photo attachment providing section
Based on the input event recognized for the chat room, at least one photo attachment feature in the photo recommendation list that includes at least a portion of the camera view for photography and the photos stored in the electronic device. To provide the chat room with at least one determined photo attachment function.
The custom profile providing system according to claim 12.

The photo attachment providing section
If a special character defined as a tag is entered in the message input window of the chat room, the photo attachment function is automatically activated in the chat room.
The custom profile providing system according to claim 13.

The tag includes a first tag for calling the camera view and a second tag for calling the photo recommendation list among the photo attachment functions.
The custom profile providing system according to claim 14.

The photo attachment providing section
If a specific gesture is input to the electronic device while the chat room is displayed on the screen of the electronic device, the photo attachment function is automatically activated in the chat room.
The custom profile providing system according to any one of claims 12 to 15.

The photo attachment providing section
If the angle of the electronic device with respect to the ground is equal to or greater than a predetermined angle while the chat room is displayed on the screen of the electronic device, the photo attachment function is automatically activated in the chat room.
The custom profile providing system according to any one of claims 12 to 16.

The photo attachment providing section
If emotional information is extracted from the message content being input in the message input window of the chat room, the photo attachment function is automatically activated in the chat room.
The custom profile providing system according to any one of claims 12 to 17.

The at least one processor
It further includes a photo management unit that extracts and tags keywords related to the photo for each photo stored in the electronic device.
The photo attachment providing section
Based on the tagged keyword, at least one photo corresponding to the message entered in the message input window of the chat room is selected from the photos stored in the electronic device and provided as the photo recommendation list. ,
The custom profile providing system according to claim 13.

The message transmitter
The photograph automatically taken by the camera view at the time when the transmission request of the message is input is transmitted to the server together with the message.
The custom profile providing system according to claim 13.

The message transmitter
If a photo is selected from the photo recommendation list at the time when the request for sending the message is input, the selected photo is sent to the server together with the message.
The custom profile providing system according to claim 13.