梭子魚Web應用防火墻助力網站數據采集管理

■劉晴

梭子魚Web應用防火墻助力網站數據采集管理

■劉晴

網站數據持續地被腳本、bots病毒和其它一些自動執行的程序采集，這有時候是件好事，有時候卻并非如此，通常介于兩者之間。

對不熟悉的人來說，采集就是從網站復制或提取信息，那些提供比價購物服務以及數據監控的應用往往需要通過信息的抓取來實現。這通常被認為是合法的采集，遵守了內容提供商的服務條款。而惡意的采集形式是在未經許可的情況下把一個網站上的內容轉發到另外一個網站，完全不考慮版權和服務條款。

梭子魚Web應用防火墻可以幫助您管理對您網站數據的采集行為，保護服務器、應用和數據不受Web以及其他攻擊的威脅。主要功能有以下幾點：

啟發式指紋和IP信譽：可以根據IP地址的歸屬地以及梭子魚IP信譽庫的查詢結果來限制訪問的IP。然后管理員可以設定對這些受限制的IP的訪問策略，比如直接阻斷來自梭子魚黑名單的連接，也可以限制嘗試訪問的次數，或者通過要求輸入驗證碼來驗證疑似鏈接的身份。

拒絕指定用戶客戶端的訪問。如果一個信息采集者以及它的客戶端信息已經被甄別，那么就可以設定梭子魚WEB應用網關拒絕來自此類連接的流量。

防止強制瀏覽：強制瀏覽即試圖訪問網站上未鏈接的內容。比如，公司網站有一些頁面只有員工可以訪問，訪問這些頁面需要在瀏覽器的地址欄直接輸入URL。強制瀏覽發現這些網頁并搜索一些有價值的內容或其它數據，從而導致信息的泄露。

利用這些主要功能，您可以基于各種策略來保護網站的數據。通過部署梭子魚Web應用防火墻，您可以禁止未授權的數據被采集，同時也可以只允許采集有鏈接的資源。