DATA PROCESSING SYSTEM METHOD APPARATUS ELECTRONIC DEVICE COMPUTER READABLE STORAGE MEDIUM AND COMPUTER PROGRAMS

• Main Authors: GUO SHAOQING, YANG ZHENSHENG, GAO PENG, LIUZENG CHAOQIAN, GUO WEI, XING PENGJU
• Format: Patent
• Language: English; Korean
• Published: 14.09.2022
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC DIGITAL DATA PROCESSING; PHYSICS

The present invention provides a data processing system and relates to the technical fields of data processing, cloud services, and the like. A specific implementation scheme comprises the steps of: allowing a control server to obtain a second puller from first pullers based on a preset scheduling strategy and obtain a second task execution manager from a first task execution manager; allowing the control server to control the second puller and the second task execution manager to execute operation; allowing the second puller to obtain data of the to-be-processed message of the message queue; allowing the second puller to serialize the data of the to-be-processed message and to obtain to-be-stored data; allowing the second puller to store the to-be-stored data in a database and to obtain stored first data; allowing the second puller to add a data state of the first data in a database; allowing the second task execution manager to obtain second data from the database, wherein the data state corresponding to the second data is a to-be-processed state, the first data comprises the second data, and a task corresponding to the second data is executed; and allowing the second task execution manager to update the data state based on the task execution result of the second data. According to such an implementation method, the data processing efficiency is improved. 본 발명은 데이터 처리, 클라우드 서비스 등 기술분야에 관한 것이고, 데이터 처리 시스템을 제공한다. 구체적인 구현 방식은 다음과 같다. 제어 서버는 기 설정된 스케줄링 전략을 기반으로 제1 풀러로부터 제2 풀러를 획득하고, 제1 작업 실행 관리자로부터 제2 작업 실행 관리자를 획득하며; 제2 풀러 및 제2 작업 실행 관리자가 동작을 수행하도록 제어하고; 제2 풀러는 메시지 큐의 처리 대기 메시지의 데이터를 획득하고; 처리 대기 메시지의 데이터에 대해 직렬화 처리를 수행하여 저장 대기 데이터를 얻고; 저장 대기 데이터를 데이터베이스에 저장하여 저장된 제1 데이터를 얻으며; 데이터베이스에 제1 데이터의 데이터 상태를 추가하고; 제2 작업 실행 관리자는 데이터베이스로부터 제2 데이터를 획득하되, 제2 데이터에 대응되는 데이터 상태는 처리 대기 상태이고, 제1 데이터는 제2 데이터를 포함하며, 제2 데이터에 대응되는 작업을 실행하고; 또한 제2 데이터의 작업 실행 결과를 기반으로 데이터 상태를 업데이트한다. 이러한 구현 방식은 데이터 처리의 효율을 향상시킨다.