游戲數據分析智能任務調度架構研究與實踐

［陳杰 黃洋 張澤鑫 唐勇］

?

游戲數據分析智能任務調度架構研究與實踐

［陳杰 黃洋 張澤鑫 唐勇］

摘要

針對常見的數據分析系統，缺少對系統資源的監控及任務優先級的考慮問題，本文提出通過采集集群中各臺主機性能指標，分析系統的查詢日志，構建結合任務優先級配置的智能調度框架，并詳細剖析其組件構成、技術原理和實現流程等。依據實踐中的運行效果，驗證和對比該架構與傳統架構在資源分配和運行時間上的效率情況。

關鍵詞：數據分析 任務調度

陳杰

高級工程師，本科學歷畢業于南京郵電大學，現供職于炫彩互動網絡科技有限公司，研究方向為互聯網大型業務平臺技術架構、大數據技術框架、通信技術和移動互聯網等。

黃洋

工程師，本科學歷畢業于南京人口管理干部學院，現供職于炫彩互動網絡科技有限公司，主要研究方向為大數據，移動互聯網等。

張澤鑫

工程師，碩士研究生學歷畢業于上海同濟大學，現供職于炫彩互動網絡科技有限公司，主要研究方向為大數據，移動互聯網等。

唐勇

高級工程師，博士研究生學歷畢業于東南大學，現供職于炫彩互動網絡科技有限公司，主要研究方向為大數據，手機游戲運營平臺等。

1 引言

在互聯網業務中，數據分析系統是按照決策和管理要求，源于海量的互聯網業務數據，根據任務要求的先后關系生成的相關業務統計數據結果，作為業務決策和產品運營手段調整的依據和來源，需要把數據信息以可靠和安全的方式呈現給管理者或使用者。……