CN111935231A - 信息处理方法和装置 - Google Patents
信息处理方法和装置 Download PDFInfo
- Publication number
- CN111935231A CN111935231A CN202010667648.XA CN202010667648A CN111935231A CN 111935231 A CN111935231 A CN 111935231A CN 202010667648 A CN202010667648 A CN 202010667648A CN 111935231 A CN111935231 A CN 111935231A
- Authority
- CN
- China
- Prior art keywords
- data
- predetermined operation
- server
- terminal
- operation instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 18
- 238000003672 processing method Methods 0.000 title claims abstract description 10
- 238000012545 processing Methods 0.000 claims abstract description 38
- 238000007781 pre-processing Methods 0.000 claims abstract description 11
- 238000000034 method Methods 0.000 claims description 21
- 238000001914 filtration Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 238000012546 transfer Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
- H04L67/5651—Reducing the amount or size of exchanged application data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/52—Network services specially adapted for the location of the user terminal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/55—Push-based network services
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提供了信息处理方法和装置。一种信息处理方法包括:接收针对多种数据类型的预定操作指令,所述预定操作指令包括针对该多种数据类型中的每一种数据类型的预定操作;采集数据并且确定所采集数据的数据类型;根据所述预定操作指令确定针对该数据类型的预定操作;根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据;以及向所述服务器传送所述中间数据以进行后续处理。
Description
技术领域
本公开一般涉及互联网领域,尤其涉及互联网领域的分布式信息处理。
背景技术
随着5G网络的到来,各种智能服务不断出现。智能终端可通过无线网络将数据传送给服务器进行处理。但是大量数据的上传会导致占用过量的网络带宽,并且使得服务器端的处理量超过负荷。另外,用户数据的传输对于用户隐私也造成一定风险。而将操作处理都放在用户终端本地,会受到终端本地计算能力的限制,较难提升计算的准确度和效率,增加终端的成本。
因此期望能解决以上问题的改进的数据处理方案。
发明内容
为解决上述技术问题,本发明提供了一种信息处理方法,包括:
接收针对多种数据类型的预定操作指令,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
采集数据并且确定所采集数据的数据类型;
根据所述预定操作指令确定针对该数据类型的预定操作;
根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据;以及
向所述服务器传送所述中间数据以进行后续处理。
可任选地,所述数据类型包括终端的地理位置;并且
所述预定操作指令包括确定所采集地理位置所在的地理区域。
可任选地,所述数据类型包括用户在一时段内对多个网络资源的访问日志;并且
所述预定操作指令包括根据所采集数据确定用户访问次数或访问时长排名靠前的N个网络资源。
可任选地,所述数据类型包括用户在一时段内对多个网络资源的点击数目;并且
所述预定操作指令包括根据所采集数据确定点击数目排名前靠前的N个网络资源。
可任选地,所述预定操作包括确定所采集数据所在的范围,并且所述中间数据是所采集数据所在的范围、或者所采集数据是否在特定范围内的标志。
可任选地,所述预定操作指令包括针对所采集数据的过滤操作。
可任选地,所述中间数据的数据量小于所采集数据的数据量。
可任选地,所述服务器处理来自多个终端的中间数据以获得全局数据。
本公开的另一方面提供了一种信息处理装置,包括:
用于接收针对多种数据类型的预定操作指令的模块,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
用于采集数据并且确定所采集数据的数据类型的模块;
用于根据所述预定操作指令确定针对该数据类型的预定操作的模块;
用于根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据的模块;以及
用于向所述服务器传送所述中间数据以进行后续处理的模块。
可任选地,所述数据类型包括终端的地理位置;并且
所述预定操作指令包括确定所采集地理位置所在的地理区域。
可任选地,所述数据类型包括用户在一时段内对多个网络资源的访问日志;并且
所述预定操作指令包括根据所采集数据确定用户访问次数或访问时长排名靠前的N个网络资源。
可任选地,所述数据类型包括用户在一时段内对多个网络资源的点击数目;并且
所述预定操作指令包括根据所采集数据确定点击数目排名前靠前的N个网络资源。
可任选地,所述预定操作包括确定所采集数据所在的范围,并且所述中间数据是所采集数据所在的范围、或者所采集数据是否在特定范围内的标志。
可任选地,所述预定操作指令包括针对所采集数据的过滤操作。
可任选地,所述中间数据的数据量小于所采集数据的数据量。
可任选地,所述服务器处理来自多个终端的中间数据以获得全局数据。
本公开的又一方面提供了一种信息处理装置,包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:
接收针对多种数据类型的预定操作指令,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
采集数据并且确定所采集数据的数据类型;
根据所述预定操作指令确定针对该数据类型的预定操作;
根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据;以及
向所述服务器传送所述中间数据以进行后续处理。
本公开提出的技术方案由服务器将任务分摊给终端,将能由终端执行、而不依赖于服务器的子操作交由终端执行,减小了服务器的处理负荷。终端对所采集的数据进行处理再传送给服务器,降低了用户数据隐私泄漏的风险,同时减小了传送的数据量,节省了网络带宽。
附图说明
图1是根据本公开的各个方面的用于数据处理的系统的示图。
图2是根据本公开的一方面的区域划分的示图。
图3是根据本公开的各方面的信息处理方法的示图。
图4是根据本公开的各方面的信息处理方法的流程图。
图5是根据本公开的用于信息处理的装置的示图。
具体实施方式
为让本发明的上述目的、特征和优点能更明显易懂,以下结合附图对本发明的具体实施方式作详细说明。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是本发明还可以采用其它不同于在此描述的其它方式来实施,因此本发明不受下面公开的具体实施例的限制。
图1是根据本公开的各个方面的用于数据处理的系统的示图。
如图1所示,用于数据处理的系统100可包括多个终端101 1-N和服务器102。多个终端101-1-N和服务器102之间可以通过有线或无线连接进行通信。
终端101可以是具有网络连接功能的装置,例如,智能手机、平板设备等。终端101上可以运行应用程序。
终端101还可以包括多个传感器,例如,GPS传感器、温度传感器、湿度传感器、气压传感器、陀螺仪、加速度传感器、计步传感器等。
服务器102可以是一个服务器,也可以是包括多个服务器的服务器群集。服务器102可以为多个终端101 1-N提供各种业务服务。
服务器102可以与各个终端101进行信息交换。各个终端101可以通过服务器102进行各种操作,包括交互性操作。例如,这些操作可包括发送消息、邮件、语音通话、使用app聊天、账户之间的转账、账户代付等等。
服务器102可以向终端101推送内容(例如,网页、广告、聊天消息等),也可以从终端101接收信息(例如,用户输入信息、传感器数据、中间数据等)。
在现有技术中,一方面,各个终端可通过无线网络(例如,5G)将采集到的数据(例如,传感器数据、用户操作数据等)传送给服务器进行处理。但是大量数据的上传会导致占用过量网络带宽,并且服务器端的计算量会超过负荷。另外,用户数据的传输对于用户隐私也造成一定风险。另一方面,将操作处理都放在用户终端本地,会受到终端本地计算能力的限制,较难提升计算的准确度和效率,增加终端的成本。
本申请提出了一种改进的方法,由服务器向终端下发预定操作指令,指令终端根据待处理的数据类型执行相应的预定操作。终端可以采集原始数据,并且基于所采集原始数据的类型,根据服务器针对该类型的指示来执行预定操作,从而生成中间数据;随后将中间数据传送回服务器以供进一步处理。
与原始数据相比,中间数据的数据量更小,由此可以节省网络带宽。同时,预定操作对用户相关的原始数据进行了处理,在传输过程中防止了用户隐私的泄露,提升了用户体验。
服务器可以对某一任务进行分解得到多个子操作,并且确定能由终端执行并且不依赖于服务器的一个或多个子操作。具体而言,服务器可确定多个子操作中对终端采集的数据进行的子操作,作为由终端执行的预定操作。
附加地,服务器还可确定经过子操作得到的中间数据的数据量是否小于终端所采集的数据的数据量。若是,则将该子操作作为由终端执行的预定操作。由此终端向服务器传送的数据量可小于原始采集的数据量,降低了网络负担。
进一步,服务器可预先获知终端的处理能力,根据终端的处理能力来确定要由终端执行的预定操作。例如,预定操作的处理量需要小于终端的处理能力,例如,小于终端处理能力的一定百分比,以使得不会影响终端的正常操作。
终端采集的数据可以包括使用终端的传感器(例如,GPS传感器、温度传感器、湿度传感器、气压传感器、陀螺仪、加速度传感器、计步传感器)采集的数据。
在一方面,该传感器可以是位置传感器。在一个实现中,服务器在某个业务中需要使用终端的位置信息进行操作。例如,服务器在进行业务推送中,可向位于不同区域的终端推送不同的信息。例如,在某商圈,可以向该商圈中的终端推送该商圈相关的广告;在景区中,可以向该景区中的终端推送注意安全的广播信息;在人群聚集的地方,例如火车站,可以向终端推送请佩戴口罩的广播信息。在这种情况下,服务器需要知道终端的位置信息来确定要推送的内容。
在现有技术中,终端可以使用GPS确定自己的位置(例如,经度和纬度信息),然后将位置信息传送给服务器以供进一步处理。例如,服务器可确定终端所在区域,并根据其所在区域推送业务(例如,广告)。
但直接传送终端的位置信息(例如,经度和纬度信息)会使用较大量的数据,消耗网络带宽,并且用户的位置可能会被第三方知晓,有泄露用户隐私的风险。
在本公开的一个实施例中,可以将地理区域划分为多个子区域。不同的子区域可以与不同的业务推送相关。
如图2所示,地理区域可被划分为多个子区域A1、A2、……Ai……。请注意,虽然图2中的子区域被示为矩形,但任何其它形状的子区域也在本公开的构想中,并且子区域的数目也可根据实际应用来设置为不同的值。
服务器向用户发送指令,指示用户返回其所在位置的子区域信息。
服务器可向终端发送该多个子区域的划分信息,例如,每个子区域的中心点以及半径、每个子区域的多个边缘点等等。服务器还可以向终端发送每个子区域的标识信息ID。
终端在使用本地定位功能(例如,GPS)确定自己的具体位置之后,可以确定该位置处于哪个子区域中,并且确定该子区域的ID,向服务器发送该子区域的ID。
与传送具体的经纬度信息相比,仅传送子区域ID可以节省网络资源,并且用户不用担心自己的位置隐私信息被泄露,提升了用户的体验。
在另一示例中,服务器在某一任务中需要知晓终端是否在某一区域中,由此将确定终端是否在某一区域中的操作作为由终端执行的子操作。服务器可以指令终端返回其是否在某一区域中的标志。终端通过GPS确定其位置,确定该位置是否在该区域中,并且返回标识是否在该区域中的标志(例如,布尔值)。例如,如果在该区域中,则返回“1”,如果不在该区域中,则返回“0”。
与传送完整的地理位置相比,布尔值的传送大大节省了带宽。服务器可根据终端是否在该区域中来确定是否向终端推送与该区域相关的信息。
在另一方面,该传感器也可以是温度传感器。服务器在某一任务中需要知晓终端在特定范围内的温度数据进行后续处理,例如,统计一定温度范围内的温度分布。由此服务器可将温度过滤操作作为由终端执行的子操作,即过滤掉温度传感器感测到的在该特定范围之外的温度。
在一个示例中,服务器仅需要30-40℃之间的温度数据。服务器可以向终端发送针对温度数据类型过滤掉30-40℃范围之外的数据的指令,由此终端对温度数据进行过滤,仅向服务器发送30-40℃之间的温度数据。
与将采集到的温度数据全部发送给服务器相比,由终端先对温度数据进行过滤,过滤掉无用数据,减小了要传送的数据量,节省了网络资源,同时也分担了服务器的计算负担。
以上以温度数据解说了终端对数据的过滤操作,但是其它可被过滤的数据类型也在本公开的范围内。
终端采集的数据还可以包括用户的操作数据。
在一个示例中,服务器需要统计终端的操作数据,从中提取特征,以确定要向用户推送的业务。如果终端将用户的操作数据全部发送给服务器,会大大占用网络传输带宽。
本公开的技术方案可以包括终端对用户的操作数据进行预处理,将经预处理得到的中间数据传送给服务器以生成最终数据。
在一个示例中,服务器需要统计某一终端的网页访问数据。如果终端每访问一次网页就向服务器发送报告,或者终端将对每个网页的访问数据都发送给服务器,操作过于频繁,会加重网络资源和计算资源的负担。
在本公开的一方面,服务器可以指令终端对网页访问数据进行预处理。例如,服务器需要终端在某一时间段(例如,一天、一周等)访问次数排名前N的网页的数据。服务器可以在发送给终端的针对网页访问数据类型的预定操作指令中包括时间段长度(例如,一天、一周等)、数值N等。
终端可以根据该预定操作指令每隔某一时间段(预定操作指令中指定的时间段长度)统计终端在该时间段内对多个网页的访问次数,并将对多个网页的访问次数进行排名,确定用户访问次数排名靠前的N个网页。终端可以将该N个网页的标识发送给服务器。附加地,终端可以将该N个网页的标识连同各自的访问次数一起发送给服务器。
服务器还可能需要终端在某一时间段(例如,一天、一周等)点击次数排名前N的网络资源的数据。服务器可以在发送给终端的针对网络资源点击数目数据类型的预定操作指令中包括时间段长度(例如,一天、一周等)、点击数目N等。
终端可以根据该预定操作指令每隔某一时间段(预定操作指令中指定的时间段长度)统计终端在该时间段内对多个网络资源的点击数目,并将对该多个网络资源的点击数目进行排名,确定用户点击数目排名靠前的N个网页。终端可以将该N个网络资源的标识发送给服务器。附加地,终端可以将该N个网络资源的标识连同各自的访问次数一起发送给服务器。
例如,用户可以使用手机上的应用点外卖。终端侧可以统计用户通过终端对多个店家链接的点击数目,并且确定用户点击数目排名靠前的N个店家链接,将这N个店家链接的标识发送给服务器。服务器可以根据接收到的店家链接标识进行后续处理,例如,统计用户偏好以进行后续信息推送。
在另一示例中,服务器需要统计某一终端在多个应用上停留的时间(使用应用的时间)。终端可以将在多个应用上停留的时间的数值返回给服务器,但这样会浪费网络资源,同时使得服务器的计算负担很大。
在一个示例中,服务器可将需要进行的操作进行分解,其中一个子操作是确定终端在应用上停留的时间范围。例如,小于5分钟、大于5分钟且小于半个小时、大于半个小时且小于一个小时、大于一个小时等等。
服务器确定该子操作可由终端执行,因此服务器可向终端发送预定操作指令,指示终端确定并返回在应用上停留的时间范围。终端可以在采集到其在应用上停留的时间之后,进一步确定停留时间所处范围,并将该范围发送给服务器。这样减小了服务器的计算负担。例如,用户可以使用终端玩网络游戏。终端侧可以统计用户通过终端对每个网络游戏的使用时长,并且确定用户对每个网络游戏的使用时长所处的时间范围(例如,小于1小时、大于1小时小于2小时,等等),将这些时间范围发送给服务器。服务器可以根据接收到的多个游戏的使用时长范围进行后续处理。
在另一个示例中,服务器可以服务器可将需要进行的操作进行分解,其中一个子操作是确定在一时间段内用户访问时长排名靠前的N个网页。终端可以根据服务器的指令来用户访问时长排名靠前的N个网页,并将该N个网页的标识发送给服务器。附加地,终端可以将该N个网页的标识连同各自的访问次数一起发送给服务器。
例如,用户可以使用终端浏览网页。终端侧可以统计用户通过终端对多个网页的访问时长,并且确定用户访问时长排名靠前的多个网页,将这多个网页的标识发送给服务器。服务器可以根据接收到的多个网页的标识进行后续处理,例如,统计用户偏好以进行后续信息推送。
在另一示例中,用户可以使用终端玩网络游戏。终端侧可以统计用户通过终端对多个网络游戏的访问时长,并且确定用户访问时长排名靠前的多个游戏,将这多个游戏的标识发送给服务器。服务器可以根据接收到的多个游戏的标识进行后续处理,例如,统计用户偏好以进行后续游戏推送。
图3是根据本公开的各方面的信息处理方法的示图。
如图3所示,在步骤302,服务器302可以针对每种数据类型确定需要终端执行的预定操作,从而生成预定操作集。
服务器302可将与终端采集的每种数据类型相关的任务进行分解,确定可由终端执行的预定操作。
例如,服务器302可以将针对每种数据类型的操作分解为多个子操作,确定该多个子操作中能由终端执行的一个或多个子操作,作为终端的预定操作。附加地,服务器还可确定经过子操作得到的中间数据的数据量是否小于终端所采集的数据的数据量。若是,则将该子操作作为由终端执行的预定操作。进一步,服务器可预先获知终端的处理能力,根据终端的处理能力来确定要由终端执行的预定操作。例如,预定操作的处理量需要小于终端的处理能力,例如,小于终端处理能力的一定百分比,以使得不会影响终端的正常操作。
服务器302可通过谓词下推来确定可由终端执行的预定操作。
该预定操作是针对终端采集的数据进行的操作。该预定操作可以是过滤操作(例如,过滤掉不需要的数据)、确定数据所在范围、确定数据是否在特定范围内、对终端采集的多个数据进行排名等等。
以上列举了预定操作的数个示例,但本公开的范围并不限于此,服务器针对某一数据类型确定的可由终端执行的预定操作都在本公开的范围内。
服务器可从针对每种数据类型的预定操作生成预定操作指令。预定操作指令包括针对多种数据类型中的每一种数据类型的预定操作。
在步骤304,服务器可以将预定操作指令发送给终端。
服务器可以通过无线网络(例如,5G网络)将在步骤302生成的预定操作集发送给终端。终端可将接收到的预定操作指令进行存储,以供后续处理数据的时候使用,例如根据所采集数据的类型来确定要执行的预定操作。
在步骤306,终端可以采集数据。
在一方面,终端可以使用传感器(例如,GPS传感器、温度传感器、湿度传感器、气压传感器、陀螺仪、加速度传感器、计步传感器等)来采集数据。
在另一方面,终端可以采集用户的操作数据,例如,用户对网页、应用的访问次数、停留时间、点击率、支付信息(例如,支付次数、支付金额等)等。
在步骤308,终端可以对所采集的数据进行预处理以生成中间数据。
具体而言,终端可以确定所采集的数据的数据类型,根据(例如,从服务器)接收到的预定操作指令确定针对该数据类型的预定操作,并且根据该预定操作对数据执行预处理以生成中间数据。
该处理可以是针对所采集数据的过滤操作。
例如,该数据类型可以是温度传感器感测到的温度数据。服务器可以指令终端过滤掉特定范围之外的温度数据。例如,服务器仅需要30-40℃之间的温度数据。服务器可以向终端发送针对温度数据类型过滤掉30-40℃范围之外的数据,由此终端对温度数据进行过滤,仅向服务器发送30-40℃之间的温度数据。
例如,该数据类型还可以是用户的支付数据。服务器可以指令终端过滤掉特定范围之外的金额数据。例如,服务器仅需要10-100元之内的支付数据,服务器可以向终端发送针对支付金额过滤掉10-100元之外的支付数据,仅向服务器发送10-100元之内的支付数据。
所采集的数据可以是使用终端的传感器采集的,并且预定操作可包括确定所采集数据所在的范围。
例如,该数据类型可以是地理位置数据,服务器指令终端确定地理位置是否在预定地理区域内。
例如,服务器可将地理区域划分为多个子区域(例如,如图2所示),指令终端报告其所在的子区域。例如,服务器可向终端发送该多个子区域的划分信息,例如,每个子区域的中心点以及半径、每个子区域的多个边缘点等等。服务器还可以向终端发送每个子区域的标识信息ID。
终端在使用本地定位功能(例如,GPS)确定自己的具体位置之后,可以确定该位置处于哪个子区域中,并且确定该子区域的ID,向服务器发送该子区域的ID。
服务器还可以指令终端报告其是否在特定区域中。终端可以在确定自己的具体位置之后确定该位置是否在该特定区域中,并且向服务器返回标识位置是否在该特定区域中的标志。
该数据类型还可以包括用户在终端上的操作数据。
例如,服务器需要根据用户访问次数较多的网络资源信息来进行后续操作。例如,用于提取用户特征。
服务器可指令终端采集用户在一时段内对多个网络资源的访问日志;并且指示终端根据所采集的访问日志确定用户访问次数排名靠前的N个网络资源。
例如,服务器还可能需要根据用户访问时长较长的网络资源信息来进行后续操作。服务器可以在预定操作指令中指示终端根据所采集的访问日志确定用户访问时长排名靠前的N个网络资源。
例如,服务器也可能需要根据用户点击次数较多的网络资源信息来进行后续操作。服务器可以指令终端采集用户在一时段内对多个网络资源的点击数目并且在预定操作指令中指示用户根据所采集数据确定点击数目排名前靠前的N个网络资源。
在步骤310,终端向服务器发送所生成的中间数据。
终端可通过无线网络(例如,5G网络)向服务器发送所生成的中间数据。
在步骤312,服务器根据接收到的中间数据来生成最终数据结果。
服务器可以在中间数据的基础上执行后续操作以生成最终数据结果。
服务器还可以接收并处理来自多个终端的中间数据以获得全局数据。
图4是根据本公开的各方面的信息处理方法的流程图。图4的方法可由终端执行。
在步骤402,接收针对多种数据类型的预定操作指令,该预定操作指令包括针对多种数据类型中的每一种数据类型的预定操作。
服务器可以将针对每种数据类型的操作分解为多个子操作,确定该多个子操作中能由终端执行的一个或多个子操作,作为终端的预定操作。该预定操作是针对终端采集的数据进行的操作。
服务器可从针对多种数据类型的多个预定操作生成预定操作指令。
在步骤404,采集数据并且确定所采集数据的数据类型。
数据类型可包括传感器采集的数据类型,包括地理位置数据、温度数据、湿度数据、气压数据、角运动数据、加速度数据、计步器数据等等。
数据类型还可以包括用户对终端的操作数据类型,包括用户对网络资源的访问数据、点击数据,用户在终端上的支付行为等。
在步骤406,根据该预定操作指令确定针对该数据类型的预定操作。
在步骤408,根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据。
预定操作指令包括针对所采集数据的过滤操作。例如,可以针对数值数据过滤掉后续操作不需要的无用数据。
如果所采集数据是使用终端的传感器采集的数据类型,则预定操作可包括确定所采集数据所在的范围,由此中间数据是所采集数据所在的范围。另一方面,预定操作可以是确定所采集数据是否在特定范围内,由此中间数据是所采集数据是否在特定范围内的标志。
如果数据类型是地理位置数据,则预定操作可包括确定所采集的地理位置数据所在的地理区域,或者所采集的地理位置数据是否在预定地理区域内。
如果数据类型是用户对网络资源的访问日志,则预定操作可包括根据用户在一时段内对多个网络资源的访问日志,确定用户访问次数或访问时长排名靠前的N个网络资源。
如果数据类型是用户对网络资源的点击数目,则预定操作可包括根据用户在一时段内对多个网络资源的点击数目,确定点击数目排名前靠前的N个网络资源。
在步骤410,向服务器传送中间数据以进行后续处理。
终端可通过有线或无线网络向服务器传送所生成的中间数据。服务器可以对中间数据执行其它子操作以生成最终数据。
服务器还可以接收并处理来自多个终端的中间数据以获得全局数据。
图5是根据本公开的用于信息处理的装置的示图。
如图5所示,用于信息处理的装置500可包括接收模块502、数据采集模块504、预处理模块506以及传送模块508。
接收模块502可以从服务器接收针对多种数据类型的预定操作指令,该预定操作指令包括针对该多种数据类型中的每一种数据类型的预定操作。
采集模块504可以采集数据并且确定所采集数据的数据类型。
采集模块504可以使用传感器来采集数据,例如,地理位置数据、温度数据、湿度数据、气压数据、角运动数据、加速度数据、计步器数据等等。
采集模块504也可以采集用户对终端的操作数据,例如,用户对网络资源的访问数据、点击数据,用户在终端上的支付行为等。
采集模块504还可以确定所采集数据的数据类型。
预处理模块506可以根据预定操作指令中针对该数据类型的预定操作,对所采的数据进行预处理以生成中间数据。
传送模块508可向服务器传送中间数据以进行后续处理。
本文结合附图阐述的说明描述了示例配置而不代表可被实现或者落在权利要求的范围内的所有示例。本文所使用的术语“示例性”意指“用作示例、实例或解说”,而并不意指“优于”或“胜过其他示例”。本详细描述包括具体细节以提供对所描述的技术的理解。然而,可以在没有这些具体细节的情况下实践这些技术。在一些实例中,众所周知的结构和设备以框图形式示出以避免模糊所描述的示例的概念。
在附图中,类似组件或特征可具有相同的附图标记。此外,相同类型的各个组件可通过在附图标记后跟随短划线以及在类似组件之间进行区分的第二标记来加以区分。如果在说明书中仅使用第一附图标记,则该描述可应用于具有相同的第一附图标记的类似组件中的任何一个组件而不论第二附图标记如何。
结合本文中的公开描述的各种解说性框以及模块可以用设计成执行本文中描述的功能的通用处理器、DSP、ASIC、FPGA或其他可编程逻辑器件、分立的门或晶体管逻辑、分立的硬件组件、或其任何组合来实现或执行。通用处理器可以是微处理器,但在替换方案中,处理器可以是任何常规的处理器、控制器、微控制器、或状态机。处理器还可被实现为计算设备的组合(例如,DSP与微处理器的组合、多个微处理器、与DSP核心协同的一个或多个微处理器,或者任何其他此类配置)。
本文中所描述的功能可以在硬件、由处理器执行的软件、固件、或其任何组合中实现。如果在由处理器执行的软件中实现,则各功能可以作为一条或多条指令或代码存储在计算机可读介质上或藉其进行传送。其他示例和实现落在本公开及所附权利要求的范围内。例如,由于软件的本质,以上描述的功能可使用由处理器执行的软件、硬件、固件、硬连线或其任何组合来实现。实现功能的特征也可物理地位于各种位置,包括被分布以使得功能的各部分在不同的物理位置处实现。另外,如本文(包括权利要求中)所使用的,在项目列举(例如,以附有诸如“中的至少一个”或“中的一个或多个”之类的措辞的项目列举)中使用的“或”指示包含性列举,以使得例如A、B或C中的至少一个的列举意指A或B或C或AB或AC或BC或ABC(即,A和B和C)。同样,如本文所使用的,短语“基于”不应被解读为引述封闭条件。例如,被描述为“基于条件A”的示例性步骤可基于条件A和条件B两者而不脱离本公开的范围。换言之,如本文所使用的,短语“基于”应当以与短语“至少部分地基于”相同的方式来解读。
计算机可读介质包括非瞬态计算机存储介质和通信介质两者,其包括促成计算机程序从一地向另一地转移的任何介质。非瞬态存储介质可以是能被通用或专用计算机访问的任何可用介质。作为示例而非限定,非瞬态计算机可读介质可包括RAM、ROM、电可擦除可编程只读存储器(EEPROM)、压缩盘(CD)ROM或其他光盘存储、磁盘存储或其他磁存储设备、或能被用来携带或存储指令或数据结构形式的期望程序代码手段且能被通用或专用计算机、或者通用或专用处理器访问的任何其他非瞬态介质。任何连接也被正当地称为计算机可读介质。例如,如果软件是使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)、或诸如红外、无线电、以及微波之类的无线技术从web网站、服务器、或其它远程源传送而来的,则该同轴电缆、光纤电缆、双绞线、数字订户线(DSL)、或诸如红外、无线电、以及微波之类的无线技术就被包括在介质的定义之中。如本文所使用的盘(disk)和碟(disc)包括CD、激光碟、光碟、数字通用碟(DVD)、软盘和蓝光碟,其中盘常常磁性地再现数据而碟用激光来光学地再现数据。以上介质的组合也被包括在计算机可读介质的范围内。
提供本文的描述是为了使得本领域技术人员能够制作或使用本公开。对本公开的各种修改对于本领域技术人员将是显而易见的,并且本文中定义的普适原理可被应用于其他变形而不会脱离本公开的范围。由此,本公开并非被限定于本文所描述的示例和设计,而是应被授予与本文所公开的原理和新颖特征相一致的最广范围。
Claims (17)
1.一种信息处理方法,包括:
接收针对多种数据类型的预定操作指令,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
采集数据并且确定所采集数据的数据类型;
根据所述预定操作指令确定针对该数据类型的预定操作;
根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据;以及
向所述服务器传送所述中间数据以进行后续处理。
2.如权利要求1所述的方法,所述数据类型包括终端的地理位置;并且
所述预定操作指令包括确定所采集地理位置所在的地理区域。
3.如权利要求1所述的方法,所述数据类型包括用户在一时段内对多个网络资源的访问日志;并且
所述预定操作指令包括根据所采集数据确定用户访问次数或访问时长排名靠前的N个网络资源。
4.如权利要求1所述的方法,所述数据类型包括用户在一时段内对多个网络资源的点击数目;并且
所述预定操作指令包括根据所采集数据确定点击数目排名前靠前的N个网络资源。
5.如权利要求4所述的方法,所述预定操作包括确定所采集数据所在的范围,并且所述中间数据是所采集数据所在的范围、或者所采集数据是否在特定范围内的标志。
6.如权利要求1所述的方法,所述预定操作指令包括针对所采集数据的过滤操作。
7.如权利要求1所述的方法,所述中间数据的数据量小于所采集数据的数据量。
8.如权利要求1所述的方法,所述服务器处理来自多个终端的中间数据以获得全局数据。
9.一种信息处理装置,包括:
用于接收针对多种数据类型的预定操作指令的模块,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
用于采集数据并且确定所采集数据的数据类型的模块;
用于根据所述预定操作指令确定针对该数据类型的预定操作的模块;
用于根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据的模块;以及
用于向所述服务器传送所述中间数据以进行后续处理的模块。
10.如权利要求9所述的装置,所述数据类型包括终端的地理位置;并且
所述预定操作指令包括确定所采集地理位置所在的地理区域。
11.如权利要求9所述的装置,所述数据类型包括用户在一时段内对多个网络资源的访问日志;并且
所述预定操作指令包括根据所采集数据确定用户访问次数或访问时长排名靠前的N个网络资源。
12.如权利要求9所述的装置,所述数据类型包括用户在一时段内对多个网络资源的点击数目;并且
所述预定操作指令包括根据所采集数据确定点击数目排名前靠前的N个网络资源。
13.如权利要求9所述的装置,所述预定操作包括确定所采集数据所在的范围,并且所述中间数据是所采集数据所在的范围、或者所采集数据是否在特定范围内的标志。
14.如权利要求9所述的装置,所述预定操作指令包括针对所采集数据的过滤操作。
15.如权利要求9所述的装置,所述中间数据的数据量小于所采集数据的数据量。
16.如权利要求9所述的方法,所述服务器处理来自多个终端的中间数据以获得全局数据。
17.一种信息处理装置,包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:
接收针对多种数据类型的预定操作指令,所述预定操作指令包括针对所述多种数据类型中的每一种数据类型的预定操作;
采集数据并且确定所采集数据的数据类型;
根据所述预定操作指令确定针对该数据类型的预定操作;
根据针对该数据类型的预定操作对所采集的数据进行预处理以生成中间数据;以及
向所述服务器传送所述中间数据以进行后续处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010667648.XA CN111935231A (zh) | 2020-07-13 | 2020-07-13 | 信息处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010667648.XA CN111935231A (zh) | 2020-07-13 | 2020-07-13 | 信息处理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111935231A true CN111935231A (zh) | 2020-11-13 |
Family
ID=73312336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010667648.XA Pending CN111935231A (zh) | 2020-07-13 | 2020-07-13 | 信息处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111935231A (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005276209A (ja) * | 2004-03-25 | 2005-10-06 | Hitachi Ltd | データ感知収集システム及び方法 |
CN102024093A (zh) * | 2009-09-16 | 2011-04-20 | 鸿富锦精密工业(深圳)有限公司 | 健康信息采集系统及方法 |
CN106097161A (zh) * | 2016-08-15 | 2016-11-09 | 成都九鼎瑞信科技股份有限公司 | 水务管理系统及其数据处理方法 |
CN106375369A (zh) * | 2016-08-18 | 2017-02-01 | 南京邮电大学 | 基于用户行为分析的移动Web业务推荐方法及协同推荐系统 |
CN107426200A (zh) * | 2017-07-13 | 2017-12-01 | 广州市百果园网络科技有限公司 | 一种多媒体数据处理方法和装置 |
CN107480134A (zh) * | 2017-07-28 | 2017-12-15 | 国信优易数据有限公司 | 一种数据处理方法和系统 |
CN108334651A (zh) * | 2018-02-08 | 2018-07-27 | 北京小米移动软件有限公司 | 收集用户端数据实现预设需求的方法、装置及存储介质 |
CN108632333A (zh) * | 2017-09-18 | 2018-10-09 | 淄博职业学院 | 建筑施工现场数据实时采集、存储、上传系统及使用方法 |
WO2019128552A1 (zh) * | 2017-12-29 | 2019-07-04 | Oppo广东移动通信有限公司 | 信息推送方法、装置、终端及存储介质 |
CN110262856A (zh) * | 2019-06-14 | 2019-09-20 | 深圳乐信软件技术有限公司 | 一种应用程序数据采集方法、装置、终端及存储介质 |
CN111261149A (zh) * | 2018-11-30 | 2020-06-09 | 海马新能源汽车有限公司 | 语音信息识别方法和装置 |
-
2020
- 2020-07-13 CN CN202010667648.XA patent/CN111935231A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005276209A (ja) * | 2004-03-25 | 2005-10-06 | Hitachi Ltd | データ感知収集システム及び方法 |
CN102024093A (zh) * | 2009-09-16 | 2011-04-20 | 鸿富锦精密工业(深圳)有限公司 | 健康信息采集系统及方法 |
CN106097161A (zh) * | 2016-08-15 | 2016-11-09 | 成都九鼎瑞信科技股份有限公司 | 水务管理系统及其数据处理方法 |
CN106375369A (zh) * | 2016-08-18 | 2017-02-01 | 南京邮电大学 | 基于用户行为分析的移动Web业务推荐方法及协同推荐系统 |
CN107426200A (zh) * | 2017-07-13 | 2017-12-01 | 广州市百果园网络科技有限公司 | 一种多媒体数据处理方法和装置 |
CN107480134A (zh) * | 2017-07-28 | 2017-12-15 | 国信优易数据有限公司 | 一种数据处理方法和系统 |
CN108632333A (zh) * | 2017-09-18 | 2018-10-09 | 淄博职业学院 | 建筑施工现场数据实时采集、存储、上传系统及使用方法 |
WO2019128552A1 (zh) * | 2017-12-29 | 2019-07-04 | Oppo广东移动通信有限公司 | 信息推送方法、装置、终端及存储介质 |
CN108334651A (zh) * | 2018-02-08 | 2018-07-27 | 北京小米移动软件有限公司 | 收集用户端数据实现预设需求的方法、装置及存储介质 |
CN111261149A (zh) * | 2018-11-30 | 2020-06-09 | 海马新能源汽车有限公司 | 语音信息识别方法和装置 |
CN110262856A (zh) * | 2019-06-14 | 2019-09-20 | 深圳乐信软件技术有限公司 | 一种应用程序数据采集方法、装置、终端及存储介质 |
Non-Patent Citations (1)
Title |
---|
陈俊良等: "《计算机网络系统集成与方案实例》", 中国传媒大学出版社, pages: 11 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107169094B (zh) | 信息聚合方法及装置 | |
US9854450B2 (en) | Enhanced data collection, processing, and analysis facilities | |
CN107483522B (zh) | 业务访问的方法和装置 | |
CN111010426A (zh) | 一种消息推送方法及装置 | |
CN110677492B (zh) | 一种访问请求处理方法、装置、电子设备及存储介质 | |
CN104217346A (zh) | 一种精准广告设备与精准广告方法 | |
EP2245803B1 (en) | Operator cloud for mobile internet services | |
CN106055630A (zh) | 日志存储的方法及装置 | |
CN106708820B (zh) | 一种信息显示方法及装置 | |
CN113347269A (zh) | 一种工业系统的数据更新方法、电子设备和存储介质 | |
CN111339183A (zh) | 数据处理方法、边缘节点、数据中心及存储介质 | |
CN103136288A (zh) | 一种移动终端的多维信息系统 | |
US9301126B2 (en) | Determining multiple users of a network enabled device | |
KR101905012B1 (ko) | 복수 소셜 네트워크 서비스의 통합 관리를 위한 sns 매니지드 시스템 | |
CN109815351B (zh) | 信息查询方法及相关产品 | |
CN112396511A (zh) | 分布式风控变量数据处理方法、装置及系统 | |
CN111935231A (zh) | 信息处理方法和装置 | |
CN111400520A (zh) | 人脸识别库的构建方法、人脸支付方法、装置和系统 | |
CN110928755A (zh) | 一种用户行为数据处理方法及装置 | |
CN113836428A (zh) | 业务推送方法、装置、计算机设备和存储介质 | |
CN104317558A (zh) | 用于提供通过其使用服务的对象的系统和方法 | |
CN110363515B (zh) | 权益卡账户信息查询方法、系统、服务器及可读存储介质 | |
CN112118276B (zh) | 媒体资源的推送方法及装置 | |
CN113572802A (zh) | 对象流量的控制方法、装置及介质 | |
CN109246686B (zh) | 基于云端技术的多卡用户通讯录更新方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |