JP2023028580A - data processing system - Google Patents
data processing system Download PDFInfo
- Publication number
- JP2023028580A JP2023028580A JP2021134375A JP2021134375A JP2023028580A JP 2023028580 A JP2023028580 A JP 2023028580A JP 2021134375 A JP2021134375 A JP 2021134375A JP 2021134375 A JP2021134375 A JP 2021134375A JP 2023028580 A JP2023028580 A JP 2023028580A
- Authority
- JP
- Japan
- Prior art keywords
- data
- data processing
- processing
- processing system
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
本発明は、ユーザが、所定のデータ処理を行う際に、データ処理時間を視覚的に表示する、データ処理システムに関する。 The present invention relates to a data processing system that visually displays data processing time when a user performs predetermined data processing.
従来、日常的に分散管理される複数のデータ(例えば、店舗・商品データのようなマスタデータと、店舗別の売上データ等の個別データ)を、売上分析等の所定の目的のために統合する際に、予めデータ間の重複排除や名寄せ等のデータ修正(例えば、クレンジング処理)が実施される。 Conventionally, multiple data that are distributed and managed on a daily basis (for example, master data such as store and product data and individual data such as sales data by store) are integrated for a predetermined purpose such as sales analysis. At that time, data correction (for example, cleansing processing) such as elimination of duplication between data and name identification is performed in advance.
クレンジング処理は、バッチ処理によって定期的に実行される行われるケースが多いが、ユーザ要求に応じて、リアルタイムにクレンジング処理を行い、データ統合を実行する技術が開示されている(特許文献1)。 Cleansing processing is often performed periodically by batch processing, but a technique for performing cleansing processing in real time and executing data integration in response to user requests has been disclosed (Patent Document 1).
しかしながら、特許文献1は、ユーザインターフェースを通じて、ユーザが処理対象となるテーブルを選択し、所定のクレンジング処理を実行し、実行結果をプレビュー表示させる、といった技術を開示するものの、ユーザに対し、より柔軟にデータの活用を促すための施策が開示されていない。
However,
そこで、本発明では、データ処理に際してよりユーザビリティを向上させるための技術を提供することを目的とする。 Accordingly, it is an object of the present invention to provide a technique for improving usability in data processing.
本発明の一態様における、データ処理を実行する処理システムであって、データ処理対象とするデータの選択を受け付け、前記データを処理する、データ処理の要求を受け付ける指示受付部と、前記データ処理を実行し、前記データ及び前記データ処理の内容を記憶するデータ処理部と、前記記憶されたデータ処理の内容を、前記データの情報とともに表示させる画像生成部と、を有する。 According to one aspect of the present invention, there is provided a processing system that executes data processing, comprising: an instruction receiving unit that receives a selection of data to be processed, processes the data, and receives a request for data processing; a data processing unit that executes and stores the data and the content of the data processing; and an image generation unit that displays the stored content of the data processing together with the information of the data.
本発明によれば、データ処理に際してよりユーザビリティを向上させることができる。 According to the present invention, usability can be further improved in data processing.
以下、本発明の実施形態について図面を参照して説明する。なお、以下に説明する実施形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また、実施形態に示される構成要素のすべてが、本発明の必須の構成要素であるとは限らない。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described with reference to the drawings. It should be noted that the embodiments described below do not unduly limit the scope of the invention described in the claims. Moreover, not all the constituent elements shown in the embodiments are essential constituent elements of the present invention.
(実施形態1)
<構成>
図1は、本発明の実施形態1に係るデータ処理システム1を示すブロック構成図である。このデータ処理システム1は、例えば、所定の目的(例えば、マーケティング分析)のために、分散管理されたデータに対してデータ加工・修正(例えば、クレンジング処理)を施し、データ結合を実行し、データ活用として、マーケティングレポートとして出力するためのシステムである。なお、目的として、マーケティング分析とすることや、出力として、マーケティングレポートとすることは一例であって、これに限定されず、他の目的のためのレポートであっても良い。また、分散管理されたデータとしては、少なくとも2つ以上のデータが別個に管理されたものであれば、分散管理されるデータの個数は少数・多数問わず、限定されない。
(Embodiment 1)
<Configuration>
FIG. 1 is a block configuration diagram showing a
データ処理システム1は、サーバ装置(データ処理装置)100と、端末装置200と、ネットワークNWとを有している。サーバ装置100と、端末装置200とは、ネットワークNWを介して接続される。ネットワークNWは、インターネット、イントラネット、無線LAN(Local Area Network)やWAN(Wide Area Network)等により構成される。
The
サーバ装置100は、データの処理を行う装置であり、例えば、ワークステーションやパーソナルコンピュータのような汎用コンピュータとしてもよいし、或いはクラウド・コンピューティングによって論理的に実現されてもよい。
The
端末装置200は、データ処理システム1を利用するユーザが所持する、例えば、パーソナルコンピュータやタブレット端末等の情報処理装置であるが、スマートフォンや携帯電話、PDA等により構成しても良い。
The
本実施形態では、データ処理システム1は、サーバ装置100と端末装置200とを備え、端末装置200を利用してサーバ装置100に対する操作を行う構成として説明するが、サーバ装置100がスタンドアローンで構成され、サーバ装置100自身にユーザが操作を行う機能を備えても良い。
In this embodiment, the
図2は、図1のサーバ装置100を示す機能ブロック構成図である。サーバ装置100は、通信部110と、記憶部120と、制御部130とを備える。
FIG. 2 is a functional block configuration diagram showing the
通信部110は、ネットワークNWを介して端末装置200及びWebサーバ300と通信を行うための通信インタフェースであり、例えばTCP/IP(Transmission Control Protocol/Internet Protocol)等の通信規約により通信が行われる。
The
記憶部120は、各種制御処理や制御部130内の各機能を実行するためのプログラム、入力データ等を記憶するものであり、RAM(Random Access Memory)、ROM(Read Only Memory)等から構成される。また、記憶部120は、データ処理を行う対象となるデータを格納する、処理対象データ格納部121、ユーザインターフェースに表示するためのアイコンデータを格納する、アイコンデータ格納部122、及び個々のデータ処理を関連付けて、かつ、順序付けて管理する、処理フロー格納部123を有する。さらに、記憶部120は、端末装置200、Webサーバ300と通信を行ったデータを一時的に記憶する。なお、各処理に用いられるデータを格納したデータベース(図示せず)が記憶部120外に構築されていてもよい。
The
制御部130は、記憶部120に記憶されているプログラムを実行することにより、サーバ装置100の全体の動作を制御するものであり、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)等から構成される。制御部130の機能として、ユーザの端末装置120からの指示受付部131と、データ処理部132と、画像生成部133とを有する。この指示受付部131、データ処理部132、及び画像生成部133は、記憶部120に記憶されているプログラムにより起動されてコンピュータ(電子計算機)であるサーバ装置100により実行される。
The
指示受付部131は、サーバ100が提供し、端末装置200において表示されるウェブ画面等のユーザインターフェースを介して、ユーザが(特定のアイコンを押下する等して)所定の要求を行ったとき、端末装置200から通信部110を介して指示を受付ける。
When the user makes a predetermined request (by pressing a specific icon, etc.) via a user interface such as a web screen provided by the
データ処理部132は、ユーザの要求が、データ処理に関するもの(例えば、データの取込、加工・結合、抽出、活用等)であったときに、対応するデータ処理を実行する。
The
画像生成部133は、端末装置200に表示される、ユーザインターフェースを構成するための画像情報を生成する。特に、記憶部120に格納されたアイコンデータに基づいて、各種アイコンをユーザインターフェース上の所定の領域に配置し、必要に応じてこれらのアイコンを関連付けて表示を行うために画像を生成する。画像生成部133に関連する処理は、GPU(Graphics Processing Unit)によって実行することもできる。
The
図3は、図1の端末装置200を示す機能ブロック構成図である。端末装置200は、通信部210と、表示操作部220と、記憶部230と、制御部240とを備える。
FIG. 3 is a functional block configuration diagram showing the
通信部210は、ネットワークNWを介してサーバ装置100と通信を行うための通信インタフェースであり、例えばTCP/IP等の通信規約により通信が行われる。
The
表示操作部220は、ユーザが指示を入力し、制御部240からの入力データに応じてテキスト、画像等を表示するために用いられるユーザインターフェースであり、端末装置200がパーソナルコンピュータで構成されている場合はディスプレイとキーボードやマウスにより構成され、端末装置200がタブレット端末で構成されている場合はタッチパネル等から構成される。この表示操作部220は、記憶部230に記憶されている制御プログラムにより起動されてコンピュータ(電子計算機)である端末装置200により実行される。
The
記憶部230は、各種制御処理や制御部240内の各機能を実行するためのプログラム、入力データ等を記憶するものであり、RAMやROM等から構成される。また、記憶部230は、サーバ装置100との通信内容を一時的に記憶している。
The
制御部240は、記憶部230に記憶されているプログラムを実行することにより、端末装置200の全体の動作を制御するものであり、CPUやGPU等から構成される。
The
なお、サーバ装置100に表示操作部の機能を備える構成としても良く、この場合、端末装置200を備えない構成としても良い。
Note that the
図4は、サーバ100の記憶部120に格納される処理対象データの内容を説明する図である。
FIG. 4 is a diagram for explaining the contents of processing target data stored in the
処理対象データは、例えば、csvファイルとして格納され、図4に示すように、例えば、顧客データが項目別に管理されている。ここで、顧客に関連した項目として、ID、姓名、性別、生年月日、最終購入日時、UNIX時間、通算購入金額、通算購入回数、年間平均購入回数等が挙げられる。処理対象データとして、処理データ格納部121は、顧客別にcsvファイルを複数格納することができる。
The data to be processed is stored as, for example, a csv file, and as shown in FIG. 4, for example, customer data is managed item by item. Items related to the customer include ID, first and last name, gender, date of birth, last purchase date and time, UNIX time, total purchase amount, total number of purchases, annual average number of purchases, and the like. As data to be processed, the processed
図5は、サーバ100の記憶部120に格納される処理フローの内容を説明する図である。
FIG. 5 is a diagram for explaining the contents of the processing flow stored in the
処理フローとして、例えば、データを取込み、抽出したデータを加工・修正(例えば、クレンジング処理)を施し、データ結合を実行し、加工等したデータを抽出し、データを分析する等して活用する(例えば、ページフロー等)等の複数のデータ処理からなる流れが挙げられる。個々のデータ処理において生成されたデータをcsvファイル形式等で格納することもできる。 As a processing flow, for example, data is imported, the extracted data is processed and corrected (for example, cleansing), data is combined, the processed data is extracted, and the data is analyzed and utilized ( For example, a flow consisting of a plurality of data processing such as a page flow, etc., can be mentioned. Data generated in individual data processing can also be stored in a csv file format or the like.
図6は、本発明の第一実施形態に係る、端末装置200において表示されるユーザインターフェースの一例である。
FIG. 6 is an example of a user interface displayed on the
ユーザインターフェース600は、図6(a)に示すように、複数のデータ処理からなる処理フローを、図の左手から右手に時系列に示す領域601と、ユーザが所定のデータ処理を行うよう、サーバ装置100に対して指示するための一または複数の指示アイコンを配置するための領域602とを有する。
As shown in FIG. 6(a), the
領域601においては、例えば、図6(a)に示すように、データ処理として、データの「取込」、データの「加工・結合」、データの「抽出」、データの「活用」が挙げられ、これらのデータ処理が時系列に処理されることが視認できるよう、表示されている。また、図6(a)に示すように、領域602においては、データ処理の各段階に沿って、データ処理対象となるデータを配置するためのアイコン603、また、次のデータ処理を指示するためのアイコンであって、複数の異なるデータ処理アイコンを接続するためのアイコン604が配置されている。アイコン603の例示として、処理対象となるデータ(本例では、「顧客データA」)、処理ステータス、及びデータ容量が含まれる。
In the
このように、ユーザは、指示アイコンを介して所定のデータ処理を要求することができ、データアイコンを介してデータ処理操作及びデータ処理後のデータを視覚的に関連付けて理解することができるため、本実施形態により、操作性の高いデータ処理システム及び方法を提供することができる。 In this way, the user can request predetermined data processing via the instruction icon, and can visually associate and understand the data processing operation and the data after data processing via the data icon. This embodiment can provide a data processing system and method with high operability.
<処理の流れ>
図8を参照しながら、本実施形態のデータ処理システム1が実行するデータ処理方法の処理の流れについて説明する。図8は、本発明の第一実施形態に係る、データ処理方法を示すフローチャートの一例である。
<Process flow>
The flow of processing of the data processing method executed by the
ここで、このデータ処理システム1を利用するために、ユーザは端末装置200のインターネットブラウザ等を利用してサーバ装置100にアクセスし、例えばIDとパスワードを入力する等の所定の認証を受けてログインすることで、利用可能となる。この認証後、ウェブ画面等を介して図6に示すようなユーザインターフェースが提供され、図8に示すステップS101へ進む。
Here, in order to use the
まず、ステップS101の処理として、サーバ装置100は、データ処理対象候補となるデータの選択要求を受け付ける。例えば、ユーザが端末装置200を操作して、処理対象データを選択することで、サーバ装置100の制御部130の指示受付部131は、端末装置200から通信部110を介して、処理対象データ選択要求を受信する。ここで、ユーザは端末装置200を操作して、処理対象候補となる特定のデータ(例えば、「data_type.csv」というファイル名のcsvファイル)を選択する。
First, as the process of step S101, the
ステップS102の処理として、サーバ装置100は、データ処理要求を受け付ける。例えば、サーバ装置100の制御部130のデータ処理部132は、ユーザが選択した、処理対象データについて、「活用」処理(例えば、ページフロー分析処理)を行う要求を受け付ける。これにより、例えば、サーバ装置100の制御部130の画面生成部133は、アイコンデータ格納部122に格納されたアイコン画像データ及び選択されたデータを基に、図6のユーザインターフェースの例に示す、アイコン606を生成し、領域602に配置するよう処理を実行する。例えば、領域601に示されるデータ処理のうち、「活用」処理の直下に、「顧客データA」について活用処理を行う旨のアイコン606が配置される。また、サーバ装置100は、データ処理の内容を、処理したデータとともに記憶部120の処理フロー格納部123に格納する。
As the process of step S102, the
ステップS103の処理として、サーバ装置100は、ユーザのアイコン選択要求に応じて、上記格納したデータ処理内容を参照し、データ処理の内容を表示させる処理を行う。例えば、ユーザが、図6(b)の、前ステップで実行したページフロー分析処理を示すアイコン606を選択すると、サーバ装置100の制御部130の画像生成部133は、図7(a)に示すように、同データ処理内容を示す情報を表示させる処理を行う。データ処理内容として、基本情報として、データ処理を行ったアプリケーション名、処理ステータス(例えば、「処理前」、「処理中」、「処理完了」、データ名称、及び、その他の情報として、データの処理履歴、本データ処理結果の利用履歴/分析に関する情報等を表示させることができる。
As the processing of step S103, the
続いて、ステップS104の処理として、サーバ装置100は、前ステップの、データ処理内容を表示させる処理ととともに、データ処理で用いられたデータを示す情報を表示させる処理を行う。例えば、図7(a)に示すように、サーバ装置100の制御部130の画面生成部133は、ページフロー分析処理で用いられたデータを示す情報(本例では、「顧客データB」)を表示させる。
Subsequently, as the process of step S104, the
このように、データ処理内容を表示するとともに、そのデータ処理に用いられたデータの情報を表示させることで、ユーザは、データ処理に影響するデータに関する情報を参照することができ、データがデータ処理結果にどのように影響したかを分析することができる。ここで、データ処理内容とともに、データ処理内容及びデータの他のデータ処理(データ活用先)(図7(a)の例においては、「優良顧客用サマーセールの施策/分析」等)を参照することができるので、特定のデータ及びデータ処理のみならず、所定のデータ処理に影響する特定データ、特定のデータが活用可能な所定のデータを参照することができるので、データの柔軟な活用を検討することができる。 In this way, by displaying the details of data processing as well as the information about the data used in the data processing, the user can refer to the information about the data that affects the data processing. Analyze how it affects the results. Here, along with the data processing content, the data processing content and other data processing of the data (data utilization destination) (in the example of FIG. 7A, "measures/analysis of summer sale for high-value customers", etc.) are referred to. Therefore, it is possible to refer to not only specific data and data processing, but also specific data that affects predetermined data processing, and predetermined data that can be used by specific data, so flexible use of data can be considered. can do.
また、変形例として、ユーザは、図7(a)(b)に示すように、図7(a)のデータ処理内容表示画面において、「詳細」を選択することで、データの詳細を参照することができる。データ処理に用いられたデータの詳細として、ユーザは、図7(b)に示すように、データの各項目及びその入力内容を参照することができる。このように、ユーザは、データ分析結果に影響するデータの詳細をさらに参照し、分析を行うことができる。 As a modification, the user can refer to the details of the data by selecting "details" on the data processing content display screen of FIG. 7(a), as shown in FIGS. be able to. As details of the data used for the data processing, the user can refer to each item of data and its input content, as shown in FIG. 7(b). In this way, the user can further see and analyze the details of the data that affect the results of the data analysis.
以上、開示に係る実施形態について説明したが、これらはその他の様々な形態で実施することが可能であり、種々の省略、置換および変更を行なって実施することが出来る。これらの実施形態および変形例ならびに省略、置換および変更を行なったものは、特許請求の範囲の技術的範囲とその均等の範囲に含まれる。 Although the disclosed embodiments have been described above, they can be implemented in various other forms, and can be implemented with various omissions, substitutions, and modifications. These embodiments, modifications, omissions, substitutions and modifications are included within the technical scope of the claims and their equivalents.
1 データ処理システム 100 サーバ装置、110 通信部、120 記憶部、130 制御部、200 端末装置、NW ネットワーク
1
Claims (5)
データ処理対象とするデータの選択を受け付け、前記データを処理する、データ処理の要求を受け付ける指示受付部と、
前記データ処理を実行し、前記データ及び前記データ処理の内容を記憶するデータ処理部と、
前記記憶されたデータ処理の内容を、前記データの情報とともに表示させる画像生成部と、を有する処理システム。 A processing system for performing data processing, comprising:
an instruction receiving unit that receives a selection of data to be processed, processes the data, and receives a data processing request;
a data processing unit that executes the data processing and stores the data and the content of the data processing;
a processing system comprising: an image generator for displaying the contents of the stored data processing together with the information of the data.
2. The processing system according to claim 1, wherein said image generator further displays details of said data in response to a user's request.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021134375A JP2023028580A (en) | 2021-08-19 | 2021-08-19 | data processing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021134375A JP2023028580A (en) | 2021-08-19 | 2021-08-19 | data processing system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023028580A true JP2023028580A (en) | 2023-03-03 |
Family
ID=85331088
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021134375A Pending JP2023028580A (en) | 2021-08-19 | 2021-08-19 | data processing system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2023028580A (en) |
-
2021
- 2021-08-19 JP JP2021134375A patent/JP2023028580A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10812627B2 (en) | Frontend process mining | |
CN111325353A (en) | Method, device, equipment and storage medium for calculating contribution of training data set | |
US8660833B2 (en) | Method, computer program product and apparatus for providing an interactive network simulator | |
CN107463563B (en) | Information service processing method and device of browser | |
CN107273979B (en) | Method and system for performing machine learning prediction based on service level | |
CN109032598B (en) | Dynamic generation method and device of transaction process | |
CN110737645A (en) | data migration method between different systems, data migration system and related equipment | |
CN112965711A (en) | Job test method and apparatus, electronic device, and storage medium | |
JP6121575B1 (en) | Information generating apparatus and information generating method | |
WO2014182582A1 (en) | Transforming visualized data through visual analytics based on interactivity | |
JP2023028580A (en) | data processing system | |
JP2023028579A (en) | data processing system | |
JP2012203606A (en) | Information providing device, information providing method, information providing system, and program | |
JP6087459B1 (en) | Sales analysis apparatus, sales analysis method, and sales analysis program | |
JP2023084805A (en) | Data complementary system, data complementary device, complementary processing selection method, and program | |
CN110781378B (en) | Data graphical processing method and device, computer equipment and storage medium | |
JP6422346B2 (en) | Program generation apparatus and program generation method | |
CN114266233A (en) | Form generation method, device, equipment and medium | |
CN113326237A (en) | Log data processing method and device, terminal device and storage medium | |
WO2020070906A1 (en) | Workshop assistance system and workshop assistance method | |
JP6653604B2 (en) | Information processing apparatus and information processing program | |
JP2014052968A (en) | Driver distribution server and driver distribution program | |
JP7116671B2 (en) | System development support device and system development support method | |
JP2022182743A (en) | Data display method and data display system | |
JP7371669B2 (en) | Information processing device, information processing method and program |