CN110231987A - 一种数据处理方法及相关装置 - Google Patents
一种数据处理方法及相关装置 Download PDFInfo
- Publication number
- CN110231987A CN110231987A CN201910543895.6A CN201910543895A CN110231987A CN 110231987 A CN110231987 A CN 110231987A CN 201910543895 A CN201910543895 A CN 201910543895A CN 110231987 A CN110231987 A CN 110231987A
- Authority
- CN
- China
- Prior art keywords
- mobile terminal
- computing
- computing power
- task
- allocating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000000034 method Methods 0.000 claims abstract description 47
- 238000012545 processing Methods 0.000 claims abstract description 31
- 238000012360 testing method Methods 0.000 claims description 70
- 238000004590 computer program Methods 0.000 claims description 34
- 238000004364 calculation method Methods 0.000 claims description 32
- 238000013507 mapping Methods 0.000 claims description 23
- 230000001960 triggered effect Effects 0.000 claims description 5
- 230000006855 networking Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 16
- 230000006870 function Effects 0.000 description 10
- 230000002159 abnormal effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Prevention of errors by analysis, debugging or testing of software
- G06F11/3668—Testing of software
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Prevention of errors by analysis, debugging or testing of software
- G06F11/3668—Testing of software
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/5044—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering hardware capabilities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5017—Task decomposition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明实施例提供了一种数据处理方法及装置，用于利用在线的移动终端处理多种计算任务，并根据任务的第一算力及移动终端的第二算力，来分配计算任务，从而实现利用在线资源对数据的快速处理。本发明实施例方法包括：获取计算任务，评估所述计算任务所需的第一算力；获取在线移动终端的第二算力；根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
Description
技术领域
本发明涉及数据处理技术领域，尤其涉及一种数据处理方法及相关装置。
背景技术
随着网络的快速发展，越来越多的终端可以接入网络，以实现万物互联，并使得人们的生活更加智能化。
在万物互联，实现智能化生活的过程中，存在巨量的数据需要处理，而在处理巨量数据时，一般都是采购专用的服务器用于数据处理，而这种专用的服务器不仅造价昂贵，而且还存在一定的售后问题，故如何利用在线资源，实现对数据的快速处理，是亟待解决的一个问题。
发明内容
本发明实施例提供了一种数据处理方法及装置，用于利用在线的移动终端处理多种计算任务，并根据任务的第一算力及移动终端的第二算力，来分配计算任务，从而实现利用在线资源对数据的快速处理。
本申请实施例第一方面提供了一种数据装置方法，包括：
获取计算任务，评估所述计算任务所需的第一算力；
获取在线移动终端的第二算力；
根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
优选的，所述获取在线移动终端的第二算力，包括：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系；或利用预先设定的计算公式计算所述移动终端的第二算力。
优选的，所述获取在线移动终端的第二算力，包括：
向所述移动终端下发第一测试任务；
根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
优选的，所述向所述移动终端下发第一测试任务，包括：
周期性地向所述移动终端下发第一测试任务；
所述根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力，包括：
接收所述移动终端每次对第一测试任务的完成结果；
根据对所述第一测试任务的多次完成结果，获取所述移动终端的第二算力。
优选的，所述方法还包括：
根据所述第一测试任务的完成结果，评估所述移动终端算力的稳定性；
根据所述稳定性，将所述移动终端划分为不同的级别；
所述根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端，包括：
根据所述第一算力、所述第二算力，及所述移动终端的稳定性级别将所述计算任务分配至至少一个所述移动终端。
优选的，所述方法还包括：
当所述稳定性的级别不符合预设标准时，则在向所述移动终端分配计算任务之前，所述方法还包括：
向所述移动终端下发第二测试任务；
接收所述移动终端对所述第二测试任务的完成结果；
当所述第二测试任务的完成结果符合预设标准时，则触发向所述移动终端分配计算任务的步骤。
优选的，在所述评估所述计算任务所需的第一算力之后，所述方法还包括：
若所述第一算力大于第一阈值时，则将所述计算任务拆分为多个子任务；
所述将所述计算任务分配至至少一个所述移动终端，包括：
将所述多个子任务分配至至少一个所述移动终端。
优选的，所述方法还包括：
接收所述移动终端对所述计算任务的完成结果；
验证所述完成结果是否正确；
若是，则根据所述完成结果向所述移动终端发送任务奖励。
本申请实施例第二方面提供了一种数据处理装置，包括：
第一获取单元，用于获取计算任务，并评估所述计算任务所需的第一算力；
第二获取单元，用于获取在线移动终端的第二算力；
分配单元，用于根据所述第一算力、所述第二算力，将所述计算任务分配至至少所述一个移动终端。
本申请实施例还提供了一种计算机装置，包括处理器，该处理器在执行存储于存储器上的计算机程序时，用于实现本申请实施例第一方面提供的数据处理方法。
优选的，该计算机装置为CDN组网节点。
本申请实施例还提供了一种可读计算机存储介质，其上存储由计算机程序，该计算机程序被处理器执行时，用于实现本申请实施例第一方面提供的数据处理方法。
从以上技术方案可以看出，本发明实施例具有以下优点：
本申请实施例中，在获取到计算任务后，对该计算任务的所需的第一算力进行评估，获取在线移动终端可提供的第二算力，根据第一算力和第二算力，将计算任务分配至至少一个移动终端。因为本实施例中，在获取到计算任务后，能够利用在线移动终端的闲置算力，将该计算任务分配至至少一个移动终端进行运算，不仅利用了在线移动终端的闲置算力，还实现了对计算任务的快速处理。
附图说明
图1为本申请实施例中数据处理方法的一个实施例示意图；
图2为本申请实施例中图1实施例步骤102的一个细化步骤；
图3为本申请实施例中图1实施例步骤102的另一个细化步骤；
图4为本申请实施例中数据处理方法的另一个实施例示意图；
图5为本申请实施例中数据处理方法的另一个实施例示意图；
图6为本申请实施例中数据处理装置的一个实施例示意图。
具体实施方式
本发明实施例提供了一种数据处理方法及装置，用于利用在线的移动终端处理多种计算任务，并根据任务的第一算力及移动终端的第二算力，来分配计算任务，从而实现利用在线资源对数据的快速处理。
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
针对现有技术中，需要采购专用服务器来处理数据的问题，本申请实施例提出了一种数据处理方法，用于利用在线移动终端来对数据进行处理，不仅节省了专用服务器的开销，也实现了对数据的的快速处理。
为方便理解，下面对本申请实施例中的数据处理方法进行描述，具体请参阅图1，本申请实施例中数据处理方法的一个实施例，包括：
101、获取计算任务，评估所述计算任务所需的第一算力；
本申请实施例的数据处理方法应用于数据处理装置(如服务器)，当服务器接受到用户上传的计算任务时，评估该计算任务所需的第一算力，以用于根据第一算力的大小，来分配该计算任务。
具体的，服务器对该计算任务算力的评估可以是根据历史经验，也可以是选取该计算任务的一定比例(如千分之一)来执行运算，然后根据该比例所需要的算力，来评估完成整个计算任务所需的算力。
102、获取在线移动终端的第二算力；
区别于现有技术中，必须将计算任务分配至专用服务器，以保证计算任务完成度的方式，本实施例中，可以利用移动终端的闲置算力，对该计算任务进行计算，以达到利用闲置资源完成计算任务的目的。
而服务器将计算任务分配至在线移动终端时，不仅需要评估该计算任务所需的第一算力，还需要评估在线移动终端可提供的第二算力，以根据第一算力和第二算力来分配计算任务，如服务器评估整个计算任务大概需要1个小时完成时，若选取的在线移动终端的算力很小时，则可能导致该计算任务延期，从而影响该计算任务的完成度。
故服务器在分配计算任务时，不仅会评估计算任务所需要的第一算力，还需要评估在线移动终端可提供的的第二算力，以执行步骤103。
具体的，服务器评估在线移动终端第二算力的方式，可以以不同的方式来执行，而具体的执行过程将在下面的实施例中进行描述，此处不再赘述。
103、根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
服务器获取到计算任务所需的第一算力，在线移动终端可提供的第二算力后，即可根据第一算力、第二算力的大小，将该计算任务分配至至少一个移动终端。
本申请实施例中，在获取到计算任务后，对该计算任务的所需的第一算力进行评估，获取在线移动终端可提供的第二算力，根据第一算力和第二算力，将计算任务分配至至少一个移动终端。因为本实施例中，在获取到计算任务后，能够利用在线移动终端的闲置算力，将该计算任务分配至至少一个移动终端进行运算，不仅利用了在线移动终端的闲置算力，还实现了对计算任务的快速处理。
基于图1所述的实施例，下面对步骤102中评估在线移动终端的第二算力的一种方式进行描述，请参阅图2，图2为图1实施例中步骤102的细化步骤：
201、获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
服务器在评估移动终端的第二算力时，可以是获取移动终端的配置参数，并根据移动终端的配置参数，查询算力映射表，以将移动终端的配置参数，折算为第二算力。
具体的，移动终端的配置参数包括：该移动终端的在线网络带宽、该移动终端的CPU芯片及存储空间，因为在执行计算任务时，主要是靠CPU的处理能力和存储空间的存储能力，而网络带宽直接会影响移动终端与服务器之间的数据传输，故网络带宽也是影响数据处理能力的一个因素。
得到移动终端的配置参数后，执行步骤202，以得到与该移动终端的配置参数对应的第二算力。
202、查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系，或利用预先设定的计算公式计算所述移动终端的第二算力。
得到移动终端的配置参数后，可以通过查新预先设置的第一映射表，以根据映射表，获取与该移动终端配置参数对应的第二算力。
具体的，第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系。
当然也可以预先设定一计算公式，将配置参数代入计算公式后计算出第二算力。
本实施例中，对获取在线移动终端第二算力的一种方式进行了描述，提升了本申请实施例的可实施性。
基于图1所述的实施例，下面继续对步骤102中评估在线移动终端的第二算力的另一种方式进行描述，请参阅图3，图3为图1实施例中步骤102的另一细化步骤：
301、向所述移动终端下发第一测试任务；
作为获取第二算力的另一种方式，则是向该移动终端下发第一测试任务，并根据该移动终端对第一测试任务的完成结果，来评估移动终端的第二算力。
进一步的，为了提高第二算力的准确率，服务器还可以是周期性的向移动终端下发第一测试任务，如一天中，每隔4个小时向移动终端下发第一测任务，以获取移动终端对第一测试任务的多次完成结果，并根据多次完成结果的平均值，来评估移动终端的第二算力。
需要说明的是，本实施例中的第一测试任务只是对测试任务的统称，可以是每次下发的测试任务不同，且测试任务所需的算力也不同。
302、根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
服务器将第一测试任务下发至移动终端后，根据移动终端对第一测试任务的完成结果，获取移动终端的第二算力。
当服务器是周期性向移动终端下发第一测试任务时，服务器则是根据移动终端对第一测试任务的多次完成结果，来评估移动终端的第二算力，如计算多次完成结果的平均值。
本实施例中，对获取移动终端第二算力的另一种方式做了详细描述，提升了本申请实施例的可实施性。
基于图3所述的实施例，在根据移动终端对第一测试任务的完成结果，评估移动终端第二算力时，还可以对移动终端第二算力的稳定性进行评估，并根据评估结果，将移动终端划分为不同的级别。
具体的，对移动终端第二算力的稳定性进行评估的过程可以是，对所有的在线移动终端每隔3小时进行一次算力测试，并长时间跟踪其算力的变化情况，如连续7天跟踪算力的变化情况，若移动终端的算力波动超过预设阈值(如20％)的移动终端，则标记为异常节点(即稳定性最差)；若移动终端的算力波动未超过预设阈值(如20％)的移动终端，则标记为正常节点(即稳定性一般)；若移动终端的算力波动为负值，即移动终端提前完成测试任务，则标记为优选节点(稳定性最佳)，以使得服务器在分配计算任务时，不仅参考移动终端的第二算力，还参考移动终端算力的稳定性，以保证计算任务的完成度。
当移动终端为异常节点时，即该移动终端的稳定性最差，还可以在向该移动终端下发计算任务前，向该异常节点下发第二测试任务，以根据异常节点对第二测试任务的完成结果，来评估是否向该异常节点下发计算任务。
具体的，若该异常节点对第二测试任务的完成复合预设标准时，则触发向该异常节点下发计算任务的步骤，否则，则拒绝向该异常节点下发计算任务，以保证对计算任务的完成度。
基于图1所述的实施例，当服务器评估计算任务的第一算力较大时，还可以执行以下步骤，以保证对计算任务的完成度，具体请参参阅图4，本申请实施例中一种数据处理方法的另一个实施例，包括：
401、若第一算力大于第一阈值时，将计算任务拆分为多个子任务；
当计算任务所需的第一算力较大时，即第一算力大于第一阈值时，将计算任务拆分为多个子任务；
其中，第一阈值的大小可以根据用户的需求自定义，而将计算任务拆分为子任务的方式，可以是根据每个子任务的算力，进行平均拆分，或根据子任务的相关度，进行拆分，此处对子任务的拆分方式不做具体限制。
402、将所述多个子任务分配至至少一个所述移动终端。
将计算任务拆分为多个子任务后，则是将多个子任务分配至至少一个移动终端。
具体的，本实施例中所分配的移动终端数量，可以根据实际任务需求进行选择，此处不做具体限制。
本实施例中，在计算任务的第一算力较大时，对计算任务的分配方式做了详细描述，提升了本申请实施例中计算任务分配方式的可实施性。
基于图1至图4所述的实施例，在服务器将计算任务分配至移动终端之后，还需要执行以下步骤，以完成对移动终端的奖励，具体请参阅图5，本申请实施例中数据处理方法的另一个实施例，包括：
501、接收所述移动终端对所述计算任务的完成结果；
服务器将计算任务下发至移动终端后，移动终端对该计算任务执行运算，并在运算结束后，将该计算任务的完成结果发送至服务器，使得服务器对该计算任务的完成结果进行验证。
502、验证所述完成结果是否正确，若是，则执行步骤503，若否，则执行步骤504；
服务器接收到移动终端对计算任务的完成结果后，对该完成结果进行验证，以判断该完成结果是否正确，若是，则执行步骤503，若否，则执行步骤504。
503、根据所述完成结果向所述移动终端发送任务奖励；
若服务器验证移动终端对计算任务的完成结果正确，则根据预设的奖励机制向该移动终端发送任务奖励，具体的，奖励机制可以是根据计算任务所需的算力进行奖励，还可以是根据移动终端对计算任务的完成时间进行奖励，此处对具体的奖励机制不做限制。
504、执行其他流程。
若服务器验证移动终端对计算任务的完成结果错误，则执行其他流程，如对该节点进行惩罚，或将该计算任务下发至原有移动终端重新执行运算，或限制该节点参加计算任务等，此处也不做具体限制。
本实施例中，对移动终端完成计算任务后，对移动终端的奖励做了详细描述，提升了本申请实施例的可实施性。
上面对本实施例中的数据处理方法进行了描述，下面对本申请中的数据处理装置进行描述，请参阅图6，本申请实施例中的数据处理装置的一个实施例，包括:
第一获取单元601，用于获取计算任务，并评估所述计算任务所需的第一算力；
第二获取单元602，用于获取在线移动终端的第二算力；
分配单元603，用于根据所述第一算力、所述第二算力，将所述计算任务分配至至少所述一个移动终端。
优选的，第二获取单元602，具体用于：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系；或利用预先设定的计算公式计算所述移动终端的第二算力。
优选的，第二获取单元602，具体用于：
向所述移动终端下发第一测试任务；
根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
优选的，第二获取单元602，还用于:
周期性地向所述移动终端下发第一测试任务；
接收所述移动终端对每次第一测试任务的完成结果；
根据对所述第一测试任务的多次完成结果，获取所述移动终端的第二算力。
优选的，第二获取单元602，还用于:
根据所述第一测试任务的完成结果，评估所述移动终端算力的稳定性；
根据所述稳定性，将所述移动终端划分为不同的级别；
优选的，分配单元603具体用于：
根据所述第一算力、所述第二算力，及所述移动终端的稳定性级别将所述计算任务分配至至少一个所述移动终端。
优选的，分配单元603还用于：
当所述稳定性的级别不符合预设标准时，向所述移动终端下发第二测试任务；
接收所述移动终端对所述第二测试任务的完成结果；
当所述第二测试任务的完成结果符合预设标准时，触发向所述移动终端分配计算任务的步骤。
优选的，第一获取单元601，还用于：
当所述第一算力大于第一阈值时，则将所述计算任务拆分为多个子任务；
优选的，分配单元603，具体用于：
将所述多个子任务分配至至少一个所述移动终端；
优选的，所述装置还包括：奖励单元604，具体用于：
接收所述移动终端对所述计算任务的完成结果；
验证所述完成结果是否正确；
若是，则根据所述完成结果向所述移动终端发送任务奖励。
需要说明的是，本实施例中各单元的作用与图1至图5实施例中描述的类似，此处不再赘述。
本申请实施例中，第一获取单元601在获取到计算任务后，对该计算任务的所需的第一算力进行评估，第二获取单元602获取在线移动终端可提供的第二算力，分配单元603根据第一算力和第二算力，将计算任务分配至至少一个移动终端。因为本实施例中，在获取到计算任务后，能够利用在线移动终端的闲置算力，将该计算任务分配至至少一个移动终端进行运算，不仅利用了在线移动终端的闲置算力，还实现了对计算任务的快速处理。
上面从模块化功能实体的角度对本发明实施例中的数据处理装置进行了描述，下面从硬件处理的角度对本发明实施例中的计算机装置进行描述：
该计算机装置用于实现数据处理装置的功能，本发明实施例中计算机装置一个实施例包括：
处理器以及存储器；
存储器用于存储计算机程序，处理器用于执行存储器中存储的计算机程序时，可以实现如下步骤：
获取计算任务，评估所述计算任务所需的第一算力；
获取在线移动终端的第二算力；
根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系，或利用预先设定的计算公式计算所述移动终端的第二算力。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
向所述移动终端下发第一测试任务；
根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
周期性地向所述移动终端下发第一测试任务；
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
接收所述移动终端每次对第一测试任务的完成结果；
根据对所述第一测试任务的多次完成结果，获取所述移动终端的第二算力。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
根据所述第一测试任务的完成结果，评估所述移动终端算力的稳定性；
根据所述稳定性，将所述移动终端划分为不同的级别；
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
根据所述第一算力、所述第二算力，及所述移动终端的稳定性级别将所述计算任务分配至至少一个所述移动终端。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
当所述稳定性的级别不符合预设标准时，向所述移动终端下发第二测试任务；
接收所述移动终端对所述第二测试任务的完成结果；
当所述第二测试任务的完成结果符合预设标准时，则触发向所述移动终端分配计算任务的步骤。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
若所述第一算力大于第一阈值时，则将所述计算任务拆分为多个子任务；
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
将所述多个子任务分配至至少一个所述移动终端。
在本发明的一些实施例中，处理器，还可以用于实现如下步骤：
接收所述移动终端对所述计算任务的完成结果；
验证所述完成结果是否正确；
若是，则根据所述完成结果向所述移动终端发送任务奖励。
可以理解的是，上述说明的计算机装置中的处理器执行所述计算机程序时，也可以实现上述对应的各装置实施例中各单元的功能，此处不再赘述。示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述数据处理装置中的执行过程。例如，所述计算机程序可以被分割成上述数据处理装置中的各单元，各单元可以实现如上述相应数据处理装置说明的具体功能。
所述计算机装置可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机装置可包括但不仅限于处理器、存储器。本领域技术人员可以理解，处理器、存储器仅仅是计算机装置的示例，并不构成对计算机装置的限定，可以包括更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述计算机装置还可以包括输入输出设备、网络接入设备、总线等。
所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable GateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述计算机装置的控制中心，利用各种接口和线路连接整个计算机装置的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述计算机装置的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
本发明还提供了一种计算机可读存储介质，该计算机可读存储介质用于实现数据处理装置的功能，其上存储有计算机程序，计算机程序被处理器执行时，处理器，可以用于执行如下步骤：
获取计算任务，评估所述计算任务所需的第一算力；
获取在线移动终端的第二算力；
根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系，或利用预先设定的计算公式计算所述移动终端的第二算力。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
向所述移动终端下发第一测试任务；
根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
周期性地向所述移动终端下发第一测试任务；
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
接收所述移动终端每次对第一测试任务的完成结果；
根据对所述第一测试任务的多次完成结果，获取所述移动终端的第二算力。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
根据所述第一测试任务的完成结果，评估所述移动终端算力的稳定性；
根据所述稳定性，将所述移动终端划分为不同的级别；
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
根据所述第一算力、所述第二算力，及所述移动终端的稳定性级别将所述计算任务分配至至少一个所述移动终端。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
当所述稳定性的级别不符合预设标准时，向所述移动终端下发第二测试任务；
接收所述移动终端对所述第二测试任务的完成结果；
当所述第二测试任务的完成结果符合预设标准时，则触发向所述移动终端分配计算任务的步骤。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
若所述第一算力大于第一阈值时，则将所述计算任务拆分为多个子任务；
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
将所述多个子任务分配至至少一个所述移动终端。
在本发明的一些实施例中，计算机可读存储介质存储的计算机程序被处理器执行时，处理器，可以具体用于执行如下步骤：
接收所述移动终端对所述计算任务的完成结果；
验证所述完成结果是否正确；
若是，则根据所述完成结果向所述移动终端发送任务奖励。
可以理解的是，所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在相应的一个计算机可读取存储介质中。基于这样的理解，本发明实现上述相应的实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (12)
1.一种数据处理的方法，其特征在于，包括：
获取计算任务，评估所述计算任务所需的第一算力；
获取在线移动终端的第二算力；
根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端。
2.根据权利要求1所述的方法，其特征在于，所述获取在线移动终端的第二算力，包括：
获取所述移动终端的配置参数，所述配置参数至少包括网络带宽、CPU芯片及存储空间；
查询第一映射表，以确定所述移动终端的第二算力，所述第一映射表中记录了网络带宽、CPU芯片及存储空间与第二算力之间的映射关系；或利用预先设定的计算公式计算所述移动终端的第二算力。
3.根据权利要求1所述的方法，其特征在于，所述获取在线移动终端的第二算力，包括：
向所述移动终端下发第一测试任务；
根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力。
4.根据权利要求3所述的方法，其特征在于，所述向所述移动终端下发第一测试任务，包括：
周期性地向所述移动终端下发第一测试任务；
所述根据对所述第一测试任务的完成结果，获取所述移动终端的第二算力，包括：
接收所述移动终端每次对第一测试任务的完成结果；
根据对所述第一测试任务的多次完成结果，获取所述移动终端的第二算力。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
根据所述第一测试任务的完成结果，评估所述移动终端算力的稳定性；
根据所述稳定性，将所述移动终端划分为不同的级别；
所述根据所述第一算力、所述第二算力，将所述计算任务分配至至少一个所述移动终端，包括：
根据所述第一算力、所述第二算力，及所述移动终端的稳定性级别将所述计算任务分配至至少一个所述移动终端。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
当所述稳定性的级别不符合预设标准时，则在向所述移动终端分配计算任务之前，所述方法还包括：
向所述移动终端下发第二测试任务；
接收所述移动终端对所述第二测试任务的完成结果；
当所述第二测试任务的完成结果符合预设标准时，则触发向所述移动终端分配计算任务的步骤。
7.根据权利要求1至6中任一项所述的方法，其特征在于，在所述评估所述计算任务所需的第一算力之后，所述方法还包括：
若所述第一算力大于第一阈值时，则将所述计算任务拆分为多个子任务；
所述将所述计算任务分配至至少一个所述移动终端，包括：
将所述多个子任务分配至至少一个所述移动终端。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
接收所述移动终端对所述计算任务的完成结果；
验证所述完成结果是否正确；
若是，则根据所述完成结果向所述移动终端发送任务奖励。
9.一种数据处理装置，其特征在于，包括：
第一获取单元，用于获取计算任务，并评估所述计算任务所需的第一算力；
第二获取单元，用于获取在线移动终端的第二算力；
分配单元，用于根据所述第一算力、所述第二算力，将所述计算任务分配至至少所述一个移动终端。
10.一种计算机装置，包括处理器，其特征在于，所述处理器在执行存储于存储器上的计算机程序时，用于实现如权利要求1至8中任一项所述的数据处理方法。
11.根据权利要求10所述的装置，其特征在于，所述计算机装置为CDN组网节点。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，用于实现如权利要求1至8中任一项所述的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910543895.6A CN110231987A (zh) | 2019-06-21 | 2019-06-21 | 一种数据处理方法及相关装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910543895.6A CN110231987A (zh) | 2019-06-21 | 2019-06-21 | 一种数据处理方法及相关装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110231987A true CN110231987A (zh) | 2019-09-13 |
Family
ID=67856349
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910543895.6A Pending CN110231987A (zh) | 2019-06-21 | 2019-06-21 | 一种数据处理方法及相关装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110231987A (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110837421A (zh) * | 2019-11-13 | 2020-02-25 | 北京知道创宇信息技术股份有限公司 | 一种任务分配方法及装置 |
| CN110866264A (zh) * | 2019-11-15 | 2020-03-06 | 成都卫士通信息产业股份有限公司 | 一种多芯片多板卡协同运算方法、装置及设备 |
| CN111432159A (zh) * | 2020-03-19 | 2020-07-17 | 深圳市鹏创软件有限公司 | 计算任务处理方法、装置、系统与计算机可读存储介质 |
| CN112003930A (zh) * | 2020-08-21 | 2020-11-27 | 深圳柏成科技有限公司 | 任务分配方法、装置、设备及存储介质 |
| CN112770071A (zh) * | 2020-12-29 | 2021-05-07 | 北京奕斯伟计算技术有限公司 | 数据处理方法、云屏设备和云屏 |
| CN112799825A (zh) * | 2019-11-13 | 2021-05-14 | 中国移动通信有限公司研究院 | 一种任务处理方法和网络设备 |
| CN113542316A (zh) * | 2020-04-13 | 2021-10-22 | 展讯半导体(南京)有限公司 | 算力共享方法及相关设备 |
| CN113823011A (zh) * | 2021-09-03 | 2021-12-21 | 深圳云天励飞技术股份有限公司 | 巡逻机器人的算力分配方法及相关设备 |
| CN113840317A (zh) * | 2020-06-08 | 2021-12-24 | 中国移动通信有限公司研究院 | 算力上报方法、获取方法、算力网元及算力感知控制网元 |
| CN114564282A (zh) * | 2022-02-28 | 2022-05-31 | 中电工业互联网有限公司 | 一种基于分布式资源共享的仿真平台及其资源分配方法 |
| WO2024125358A1 (zh) * | 2022-12-13 | 2024-06-20 | 维沃移动通信有限公司 | 算力处理方法及通信设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070226742A1 (en) * | 2006-03-22 | 2007-09-27 | Mediatek Inc. | Method for tuning service performance of multi-task system and multi-task system thereof |
| CN109656723A (zh) * | 2019-03-13 | 2019-04-19 | 联想(北京)有限公司 | 容器资源调度方法及装置 |
| CN109783224A (zh) * | 2018-12-10 | 2019-05-21 | 平安科技（深圳）有限公司 | 基于负载调配的任务分配方法、装置及终端设备 |
| CN109873868A (zh) * | 2019-03-01 | 2019-06-11 | 深圳市网心科技有限公司 | 一种计算能力共享方法、系统及相关设备 |
-
2019
- 2019-06-21 CN CN201910543895.6A patent/CN110231987A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070226742A1 (en) * | 2006-03-22 | 2007-09-27 | Mediatek Inc. | Method for tuning service performance of multi-task system and multi-task system thereof |
| CN109783224A (zh) * | 2018-12-10 | 2019-05-21 | 平安科技（深圳）有限公司 | 基于负载调配的任务分配方法、装置及终端设备 |
| CN109873868A (zh) * | 2019-03-01 | 2019-06-11 | 深圳市网心科技有限公司 | 一种计算能力共享方法、系统及相关设备 |
| CN109656723A (zh) * | 2019-03-13 | 2019-04-19 | 联想(北京)有限公司 | 容器资源调度方法及装置 |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110837421A (zh) * | 2019-11-13 | 2020-02-25 | 北京知道创宇信息技术股份有限公司 | 一种任务分配方法及装置 |
| CN112799825A (zh) * | 2019-11-13 | 2021-05-14 | 中国移动通信有限公司研究院 | 一种任务处理方法和网络设备 |
| WO2021093501A1 (zh) * | 2019-11-13 | 2021-05-20 | 中国移动通信有限公司研究院 | 一种任务处理方法和网络设备 |
| CN110866264A (zh) * | 2019-11-15 | 2020-03-06 | 成都卫士通信息产业股份有限公司 | 一种多芯片多板卡协同运算方法、装置及设备 |
| CN111432159A (zh) * | 2020-03-19 | 2020-07-17 | 深圳市鹏创软件有限公司 | 计算任务处理方法、装置、系统与计算机可读存储介质 |
| CN111432159B (zh) * | 2020-03-19 | 2022-05-17 | 深圳市鹏创软件有限公司 | 计算任务处理方法、装置、系统与计算机可读存储介质 |
| US11876856B2 (en) | 2020-04-13 | 2024-01-16 | Spreadtrum Semiconductor (Nanjing) Co., Ltd. | Method for computational-power sharing and related device |
| CN113542316B (zh) * | 2020-04-13 | 2022-11-25 | 展讯半导体(南京)有限公司 | 算力共享方法及相关设备 |
| CN113542316A (zh) * | 2020-04-13 | 2021-10-22 | 展讯半导体(南京)有限公司 | 算力共享方法及相关设备 |
| CN113840317A (zh) * | 2020-06-08 | 2021-12-24 | 中国移动通信有限公司研究院 | 算力上报方法、获取方法、算力网元及算力感知控制网元 |
| CN112003930A (zh) * | 2020-08-21 | 2020-11-27 | 深圳柏成科技有限公司 | 任务分配方法、装置、设备及存储介质 |
| CN112770071A (zh) * | 2020-12-29 | 2021-05-07 | 北京奕斯伟计算技术有限公司 | 数据处理方法、云屏设备和云屏 |
| CN113823011A (zh) * | 2021-09-03 | 2021-12-21 | 深圳云天励飞技术股份有限公司 | 巡逻机器人的算力分配方法及相关设备 |
| CN114564282A (zh) * | 2022-02-28 | 2022-05-31 | 中电工业互联网有限公司 | 一种基于分布式资源共享的仿真平台及其资源分配方法 |
| WO2024125358A1 (zh) * | 2022-12-13 | 2024-06-20 | 维沃移动通信有限公司 | 算力处理方法及通信设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110231987A (zh) | 一种数据处理方法及相关装置 | |
| CN109783224B (zh) | 基于负载调配的任务分配方法、装置及终端设备 | |
| CN110351375B (zh) | 一种数据处理方法、装置及计算机装置、可读存储介质 | |
| US9898346B2 (en) | Resource substitution and reallocation in a virtual computing environment | |
| US10554574B2 (en) | Resource management techniques for heterogeneous resource clouds | |
| CN106326002B (zh) | 资源调度方法、装置及设备 | |
| WO2017166643A1 (zh) | 一种任务资源的量化方法和装置 | |
| CN109345108A (zh) | 任务分配方法、装置、设备及存储介质 | |
| CN111858055B (zh) | 任务处理方法、服务器及存储介质 | |
| US20140330647A1 (en) | Application and service selection for optimized promotion | |
| CN112395075A (zh) | 资源的处理方法、装置以及资源调度系统 | |
| CN114281516A (zh) | 一种基于numa属性的资源分配方法及装置 | |
| CN108924203B (zh) | 数据副本自适应分布方法、分布式计算系统及相关设备 | |
| CN117675566A (zh) | 一种资源配额的分配方法、装置、存储介质及电子设备 | |
| CN115665251B (zh) | 边缘云资源分配方法及系统 | |
| CN113238851A (zh) | 基于云平台的脚本自动化执行方法、系统、设备及介质 | |
| CN104202305A (zh) | 一种转码处理方法、装置及服务器 | |
| CN110837421B (zh) | 一种任务分配方法及装置 | |
| CN109472312B (zh) | 应用程序评估方法、装置、计算机设备及存储介质 | |
| CN118606051A (zh) | 资源分配方法、装置、设备及存储介质 | |
| CN114884900B (zh) | 资源分配方法、装置、设备及存储介质 | |
| CN115794396A (zh) | 资源分配的方法、系统和电子设备 | |
| CN116881016B (zh) | 服务器进程的处理方法及装置、存储介质及电子设备 | |
| CN111177625A (zh) | 数据获取方法、数据上报方法、终端设备及存储介质 | |
| CN109857521B (zh) | 一种主机搬迁方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190913 |
|
| RJ01 | Rejection of invention patent application after publication |