DATA PROCESSING SYSTEM, METHOD, DEVICE, ELECTRONIC APPARATUS, COMPUTER-READABLE STORAGE MEDIUM, AND COMPUTER PROGRAM

• Main Authors: GUO SHAOQING, YANG ZHENSHENG, LIU-ZENG CHAOQIAN, GAO PENG, GUO WEI, XING PENGJU
• Format: Patent
• Language: English; Japanese
• Published: 17.10.2022
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; PHYSICS

To provide a data processing system in which efficiency of data processing is improved.SOLUTION: A data processing system includes a control server, a first puller, and a first task execution manager. The control server acquires a second puller from the first puller by a predetermined scheduling policy, acquires a second task execution manager from the first task execution manager, and controls the second puller and the second task execution manager. The second puller acquires data of a to-be-processed message of a message queue, serializes the acquired data to obtain to-be-stored data, stores the to-be-stored data in a database to obtain stored first data, and adds a data state of the first data in the database. The second task execution manager acquires second data from the database, the data state corresponding to the second data is a processing waiting state, the first data includes the second data, a task corresponding to the second data is executed, and the data state is updated by an execution result.SELECTED DRAWING: Figure 1 【課題】データ処理の効率を向上させたデータ処理システムを提供する。【解決手段】データ処理システムは、制御サーバと、第１プーラと、第１タスク実行マネージャーとを備え、制御サーバは所定のスケジューリングポリシーにより第１プーラから第２プーラを取得し、第１タスク実行マネージャーから第２タスク実行マネージャーを取得し、第２プーラと第２タスク実行マネージャーを制御し、第２プーラはメッセージキューの処理待ちメッセージのデータを取得し、取得したデータをシリアル化処理して記憶待ちデータを得、それをデータベースに記憶して記憶された第１データを得、データベースに第１データのデータ状態を追加し、第２タスク実行マネージャーはデータベースから第２データを取得し、第２データに対応するデータ状態は処理待ち状態で、第１データは第２データを含み、第２データに対応するタスクを実行し、その実行結果によりデータ状態を更新する。【選択図】図１