數據收集的終極指南

冀博裕

在當今世界，數據對任何一家企業的成功都起著關鍵作用。企業的目標受眾、競爭對手產生的數據、工作領域的信息以及企業自己收集的數據可能會幫助找到更多客戶、分析業務決策、重新優化業務模型或進入到其他市場。數據將幫助企業定義其可以解決的問題，并提供更好的服務，準確了解客戶的需求。

根據麥肯錫全球研究所發布的研究報告，與傳統企業相比，數據驅動的企業獲得客戶的可能性是23倍，留住客戶的可能性是6倍，盈利的可能性是19倍。

近年來，全球數據量大幅增長。90 %的數據是在過去2年中產生的。IDC的研究表明，到2025年，大數據將達到約1 ZB。根據最近發布的一份研究報告，全球每天產生的數據量約為2.5萬億字節。

但是數據本身沒有任何意義，除非它是根據企業的業務想要實現的目標或想要解決的問題進行收集和分析的，這就是數據科學面臨挑戰的地方。

本文將重點介紹處理數據的第一步，也可能是最重要的一步———數據收集。定義企業需要哪些數據以及如何收集這些數據至關重要，因為企業所有進一步操作都將基于這些數據。收集錯誤的數據意味著其他所有工作都將徒勞無功，因為它不會帶來正確的見解或為企業提供所需的信息。

先從數據科學的簡要概述開始，因為從數據中提取有洞察力的信息是其核心。

數據科學發現并揭示了趨勢，揭示了企業可用于更好決策、創造創新產品和服務以滿足客戶需求的見解。

數據科學結合了不同的領域，如統計學、科學方法、人工智能和數據分析。數據科學家獲得從互聯網、智能手機、客戶和其他服務收集的數據分析的各種知識和技能，以提供見解。

數據科學家從數據庫中收集相關數據，然后清理、處理、分析以及指定有用的數據。下一個任務是找到能夠引導企業獲得豐富見解的模式。

因此，數據科學家負責收集數據、制定分析策略、可視化數據，并使用Python和R等編程語言使用數據構建模型。他們將模型部署到應用程序中。

在進一步的數據操作之前，先專注于數據收集。

數據收集是在特定的成熟技術幫助下，測量和分析不同類型信息的同時收集數據。收集的數據類型取決于需要解決的問題，這是任何一個數據科學家開展項目的起點，因為總有一些東西可以修復或改進。

數據收集有多種方法，具體取決于要獲取的數據類型。其中一些使用技術收集，而另一些則通過人工收集，包括：

在應用程序和網站中內置數據收集工具；

用于從車輛或機械等設備收集數據的傳感器；

跟蹤社交媒體、博客、評論、論壇和其他渠道上的活動，幫助企業了解有關客戶的更多信息；

在線完成的調查和問卷調查；

焦點小組、訪談、研究性學習時的直接觀察。

但在開始使用任何數據收集方法之前，需要完成一些重要的步驟。

問自己一個準確的問題

定義需要解決的一個問題是數據收集過程路線圖的第一步，在開始整個過程之前，應該制定明確的目標。例如企業是一個在線服裝銷售平臺，但是客戶較少，因此，其目標將是吸引更多人訪問網站，并增加銷售額。

現在有多種改進方法，例如通過吸引老年客戶或來自特定地區的人員來擴大目標受眾。這就是企業采用大數據的原因和著力之處，以找出其客戶是誰，以及什么可以引起其他客戶的注意。

或者，可以通過實施更多技術解決方案或簡單地改善交付流程來改善他們的購物體驗。

眾所周知的是，數據收集在于質量不在于數量，質量決定對最終目標的理解，收集數據的目的是什么，以及它應該如何為解決確切的問題提供幫助。

指定數據類型

根據企業的目標，下一步將是定義哪種數據對其更有利。它可以是定量的或定性的。第一個包含數字，而第二個更復雜，可能會因客戶反饋到決策過程而異。

需要記住的是，并不需要所有的數據，因為需要回答一個準確的問題，指定其需要的數據類型將幫助處理數據。

概述消息來源

根據需要的數據，應該決定可以在哪里收集數據，在企業內部、第三方或外部來源。

這種趨勢表明，使用外部數據可以獲得更好的結果，因為它可以讓企業跟蹤競爭對手，并為其提供更廣闊的前景。選擇這條道路在法律法規和道德標準方面似乎更為復雜。但是，如果想更廣泛地了解情況，這是值得的，該領域已經做了什么，競爭對手面臨什么問題，以及企業如何改進其服務以使他們做得更好。

此外還要牢記道德問題，企業必須確保其客戶了解從他們那里收集的數據。否則，可能會卷入數據丑聞。其次，企業的法律團隊應跟蹤他們的數據收集方法是否遵守使用第三方數據源的法律。

企業還可以聯系政府機構或開始調查，這是收集數據科學數據的標準工具。

最后但同樣重要的是，企業可以根據現有數據創建用戶角色。了解客戶的行為和需求可以開發強大的洞察力來推動其下一個商業理念，當無法從其他來源獲取更多數據時，通常使用這一工具。

定義時間范圍

這不僅僅是關于企業需要什么數據，當數據最有益時，衡量時間線也很重要。例如，需要指定客戶在其網站上的行為或確定他們在特定時期內的地理位置和搜索歷史。雖然用戶一直在生成數據，但企業有責任確定數據何時對其有效。

不要忘記數據存儲

在收集數據之前，企業應該定義如何存儲數據，許多工具將幫助其收集和組織結構化和非結構化數據。結構化數據主要由數字和數值組成，而非結構化數據更為復雜，包括傳感器、文本文件、音頻和視頻文件等。找到合適的數據管理工具對于進一步處理和管理至關重要。

收集數據

最后，企業可以進行實際的數據收集，考慮可能發生的要求和隱私問題以及安全問題，然后進行重復。

數據收集遵循每個步驟，這是升級業務的無限過程。隨著新工具和技術幾乎每天都在出現，企業客戶的行為可能會發生變化，可能會出現新的渠道，并且會出現新的問題。因此，企業可能將不得不重復這些步驟，以獲取有關客戶或業務處理領域的更多信息，改進解決方案并開發新的解決方案，為此還需要了解數據收集之后的步驟。