大數據在英語成績可視化中的應用

廖志平

（湖南環境生物職業技術學院，湖南 衡陽 421005）

0 引言

大數據技術的發展使互聯網的應用范圍不斷擴大，論文重查、物流配送、電商平臺以及喜好推薦等許多傳統行業都在利用大數據工具和技術開辟新市場。在大數據技術的幫助下，商家們可以更好地進行消費決策，同時也可以準確地預測出商品的銷售量和銷路，進而使整個行業的供求關系得到改善。

1 大數據開發需求分析

1.1 前后端框架

SpringBoot不能徹底取代Spring，而是將Spring的框架整合到一起，使它成為一個對開發者來說更方便的開發工具。該軟件已經集成了很多第三方的資源庫，在使用時只要簡單地進行引入，無須經常進行其他的整合。

Ajax在Web服務器和Browser間進行異步的數據傳送，而Web頁面則需要從服務器方獲取本地資料，這樣可以讓Web軟件變得更小巧、更友好。Ajax也可以作為一個跨領域的鏈接，用于調整后端的前頁。

MyBatis是一個基于Java的很好的持久的架構，它可以在以后的應用中存儲和調用。MyBatis架構也可以在自定義數據庫、存儲等問題上做出出色的安排，基于MyBatis的實際應用和其本身的特性，通常將其分為3層：API接口層、數據處理層和底層支持層。

1.2 需求分析

該數據的采集過程包括數據爬取、數據清洗、數據分析和數據展示。數據挖掘技術是通過scrapy從一個特定的頁面中得到一個完整的頁面，再通過BS4的框架提取出該頁面的主題和標記；數據清理就是對所采集到的數據進行初步加工、整理，剔除不合格的數據；……