爬蟲技術在社交形象定位與塑造中的運用

摘? 要：隨著Web2.0時代的到來，如何將爬蟲技術下沉運用到社交個人信息的篩選、抽取、組合、分析中，最后得出有助于個人網絡社交形象的塑造和社交電商營銷的分析報告，成為人們關注的重要問題。通過OAuth2.0技術，可以實現經過用戶授權的各類信息的獲取。這一技術是實現社群經營指標分析的基礎。通過有效的系統設計，我們可以通過系統生成出各種各樣的對比分析圖，用于幫助人們建立更好的、競爭力更強的社交形象，提升發布內容質量，進一步激發用戶的自我提升能力。除此之外，該技術還可以應用于電商品牌的塑造和影響力的生成，也可以用于自媒體運營和發布內容的分析、知識共享平臺中對用戶提供指導參考等等。

關鍵詞：爬蟲技術;運營管理;社交形象定位和塑造

中圖分類號：TP311 文獻標識碼：A 文章編號：2096-4706（2019）08-0023-02

Abstract：With the advent of Web2.0，how to apply crawler technology to the screening，extraction，combination and analysis of social personal information，and finally draw an analysis report that is conducive to the building of personal network social image and social e-commerce marketing，has become an important issue of concern to people. Through OAuth2.0 technology，all kinds of information obtained through user authorization can be realized. This technology is the basis of community management index analysis. Through effective system design，we can generate a variety of comparative analysis charts through the system to help people build a better and more competitive social image，improve the quality of published content，and further stimulate the self-improvement ability of users. In addition，this technology can not only be used to shape and influence e-commerce brands，but also can be used for the analysis of We-Media operation and published content，to provide guidance and reference for users in the knowledge sharing platform，and so on.

Keywords：crawler technology;operation management;social image positioning and shaping

0? 引? 言

隨著互聯網的快速發展，爬蟲技術，即在冗雜的海量信息中高效快捷地抽取用戶需要的信息的一項技術也應運而生。這樣的一種輔助性搜索技術被運用到互聯網行業中去，大大地方便了人們的工作和生活。網絡社交，作為另一種深刻影響人們生產生活的互聯網平臺，則是更加普遍地與個體緊密聯系起來。研究表明，用戶愿意為管理自己的在線社交賬戶而付出更多的成本，這其中包括：過濾負面信息、人設塑造、虛擬化、個性化等等。不同于網紅塑造，這樣的社交形象管理不存在商業化運作，但又是人們普遍存在的需求，在經營自己的社交形象時，他們很難從專業的角度，全面的審視自己的社交形象，針對這種情況，本文將闡述一種將信息抓取并初步處理后運用到社交形象的管理與塑造的技術。

1? 國外案例——Socialbakers

Socialbakers是針對社群經營指標分析，所開發出來的工具。2008年10月13日，一家全球人工智能社交媒體營銷公司，提出名為Socialbakers Suite的營銷軟件即服務平臺。它被McDonalds，L’Oreal和Desigual等品牌用于Facebook，Instagram，Twitter，YouTube，LinkedIn，Google +，VK和Pinterest上的社交媒體營銷。2010年7月，Socialbakers推出了FanPage Analyzer，為用戶提供有關其Facebook頁面所遇到的問題以及競爭對手的信息。2012年1月，Socialbakers推出了針對Twitter的Analytics。他們開始提供Twitter統計數據的分析，如每日追隨者增長、每日推文與轉推比率、總提及數量等。

Socialbakers營銷套件包括幾個社交媒體管理工具，包括分析、“競爭洞察”和基準測試、企業發布工具、廣告，在Facebook和Twitter上優化和管理廣告、傾聽，幫助品牌跟隨品牌周圍的對話并提供專業服務。

Socialbakers Analytics通過監控Facebook、Twitter、LinkedIn、VK、Pinterest和YouTube上的社交媒體資料（近期添加了關于Instagram的報告）來生成營銷信息。該軟件提供性能指標來衡量粉絲增長，跟蹤關鍵影響因素，分析參與率和交互，針對競爭對手和行業標準的基準性能，優化社交媒體存在并生成圖形報告。Socialbakers Builder是一個用于安排和發布內容以及在社交媒體上圍繞品牌聚合對話的工具。除主要產品套件外，Socialbakers還提供多項服務，包括EdgeRank Checker，這是一種深度學習算法，可以告訴用戶哪些內容最適合其品牌的Facebook頁面等等。

2? 國外爬蟲技術介紹

作為Web 2.0時代的典型應用，社交網絡服務正在世界各地以極快的速度流行起來。隨著社交網絡的不斷發展以及注冊用戶的迅猛增加，越來越多的研究人員開始研究如何將現有的python技術運用到社交網站的信息抓取中。國外研究者多針對Facebook、Twitter等進行數據采集，研究者在Twitter平臺上建立網絡模型，對網絡特性進行研究，Twitter底層的很多接口和庫是公開的，研究者多利用這一特性對Twitter數據進行統計;Facebook也逐漸開放了API接口，研究者利用陸續開放的接口對Facebook用戶數據進行采集與研究應用。國內的研究人員將以Twitter為原型的新浪微博作為研究對象，開發出了OAuth2.0技術。

3? OAuth2.0技術

OAUTH是一種開放的授權標準。它允許用戶將自己存放在一個站點上的資源分享給另一個資源，而在這個過程中用戶不需要將他在資源站點上的證書提供給另一站點，如用戶名、密碼。用戶可以通過一系列授權指令，將信息共享授權指令發送給微博的API，微博API提供Rest風格的基礎數據接口，包括：獲取下行數據集接口、微博接口、用戶接口、標簽接口、話題接口、OAUTH接口等，這些接口為第三方開發者提供了諸如獲取用戶信息、獲取好友關系、發送微博等功能。

返回數據包括：用戶id、用戶昵稱、友好顯示名稱、用戶所在地、用戶博客地址、用戶個人描述、用戶個性化域名、用戶頭像地址、性別、粉絲數、關注數、收藏數、微博數、用戶創建（注冊）時間、是否是微博認證用戶、認證原因、用戶互粉數、用戶的在線狀態等。

該技術采用廣度優先的爬行辦法，通過開放API，模擬登錄，獲得更多權限和相關信息，實現了初步的信息抓取。

4? 系統設計——以新浪微博為例

免費功能包括：個人社交頁分析報告：包括近三個月內的用戶上線時間散點分布圖;每日平均登錄頻次;關注量變化情況折線圖;獲取最受歡迎帖子的數據，包括瀏覽量、點贊數、轉發量、評論量（Top3進行圖片截取展示）;話題量統計（表格展示使用量前5名）;話題影響度&熱度（與使用該話題熱度最大的帖子進行數據對比），以上指標可以在用戶授權之后，自動生成報告。用戶可以通過輸入郵箱地址，獲取PDF版本的個人社交頁分析報告。

用戶對比報告：輸入自己微博ID并VS競爭對手的ID（單個），可以獲取關于近三個月每周發帖量的對比圖、發帖總量色條PK圖、每周平均發帖量色條PK圖;近三個月每周漲粉量對比圖、實際粉絲活躍量對比圖、1000粉絲量中最大互動量帖子PK色條圖、1000粉絲中最小互動帖子的PK色條圖、1000粉絲量中平均互動量帖子PK色條圖、展示最成功發帖內容Top3（發帖用戶頭像、發帖時間、發帖內容、總互動量、點贊、評論量、分享量、每一千粉絲互動比例）。用戶可以輸入郵箱地址獲取PDF版本的用戶對比報告。

多用戶對比分析報告：輸入自己微博ID并VS競爭對手ID（多個），可以獲取以發帖量和互動量為軸的象限報告;發帖量與互動量的倍數曲線圖（分析平均發帖的影響效率）。用戶可以直接在網頁獲取該報告。

付費功能：對不同的平臺進行統一監控，把握競爭者的實時數據，提供更加詳盡的分析報告。具體功能包括：（1）使用社交媒體分析衡量用戶的策略的影響。利用可操作的見解來推動實際業務成果，并輕松地在整個業務中共享數據。獲取用戶需要的背景信息，并根據用戶的行業、國家/地區，進一步了解用戶的策略在關鍵指標中的智能程度，例如總廣告支出、廣告參與度、廣告費用和內容效果。（2）通過受眾分析，將用戶的內容定制為合適的人物角色。將用戶的數字受眾群體數據整合到一個位置，借助AI生成用戶可以信賴的角色個人資料。創建與用戶的細分受眾群產生共鳴的個性化內容，并使用社交媒體分析來分析和報告用戶的結果。（3）分析用戶的廣告系列的情緒。輕松了解受眾對用戶的廣告系列的感受和情感，并分析他們背后的情緒。確定人們喜愛的內容并使用這些數據來構建可帶來更多積極影響的策略。（4）構建和共享易于閱讀的社交媒體報告輕松跟蹤和報告用戶的進度。獲取可更新的可自定義儀表板，該儀表板配備第三方數據集成，用戶可以通過移動設備輕松導出。通過直接發送到收件箱的自動報告，讓用戶的團隊快速掌握數據信息。

5? 結? 論

綜上所述，該技術通過收集用戶微博相關數據，并對收集到的微博交互情況進行分析，定義高影響力用戶，將用戶發微博時間、用戶微博的轉發、評論、點贊等交互行為因素以及博文的內容相結合，分類提取特征，評估和預測用戶以及所發微博的影響力，可以進一步凈化網絡虛假信息，優化網絡生態環境;幫助用戶自我經營、自我管理社交平臺，自助提升內容質量，擴大影響力，進一步促進社交環境的繁榮發展。

參考文獻：

[1] 孫曉，葉嘉麒，唐陳意，等.基于多策略的新浪微博大數據抓取及應用 [J].合肥工業大學學報（自然科學版），2014，37（10）：1210-1215.

[2] 丁兆云，賈焰，周斌.微博數據挖掘研究綜述 [J].計算機研究與發展，2014，51（4）：691-706.

[3] 孫青云，王俊峰，趙宗渠，等.一種基于模擬登錄的微博數據采集方案 [J].計算機技術與發展，2014，24（3）：6-10.

[4] 王元卓，靳小龍，程學旗.網絡大數據：現狀與展望 [J].計算機學報，2013，36（6）：1125-1138.

[5] 黃延煒，劉嘉勇.新浪微博數據獲取技術研究 [J].信息安全與通信保密，2013（6）：71-73+76.

[6] 廉捷，周欣，曹偉，劉云.新浪微博數據挖掘方案 [J].清華大學學報（自然科學版），2011，51（10）：1300-1305.

[7] 姚科.開放API：新浪微博必經之路？ [J].互聯網天地，2010（8）：71-72.

[8] 姚峰.Java平臺中Base64編碼/解碼算法的改進 [J].計算機應用與軟件，2008，25（12）：164-165+176.

作者簡介：李雅薇（1998.05-），女，漢族，江西人，在校本科生，研究方向：工商管理。