每個數據科學家都應該知道的 7 個數據挖掘功能
已發表: 2020-11-17目錄
介紹
數據挖掘在大數據中具有廣泛的應用,可以預測和表徵數據。 功能是發現數據科學的趨勢。 一般來說,數據挖掘分為以下幾類:
- 描述性數據挖掘:它提供有關數據的某些知識,例如計數、平均值。 它提供了有關數據內部正在發生的事情的信息,而沒有任何先前的想法。 它展示了數據中的共同特徵。 簡而言之,您將了解數據庫中存在的數據的一般屬性。
- 預測數據挖掘:這有助於開發人員理解未明確可用的特徵。 比如下個季度的業務分析預測與前幾個季度的表現。 通常,預測分析利用先前可用的數據來預測或推斷特徵。
下面列出了數據挖掘的功能
- 類/概念描述:表徵和區分
- 分類
- 預言
- 關聯分析
- 聚類分析
- 異常值分析
- 演化與偏差分析
1. 類/概念描述:表徵和區分
數據與類或概念相關聯,因此它們可以與結果相關聯。 例如,新的 iPhone 型號發布了三個變體,以根據目標客戶的需求(如 Pro、Pro max 和 Plus)來滿足他們的需求。
數據表徵
當您總結數據的一般特徵時,稱為數據表徵。 它為目標類別生成特徵規則,例如我們的 iPhone 買家。 我們可以使用簡單的 SQL 查詢收集數據並執行 OLAP 函數來概括數據。
面向屬性的歸納技術也用於以最少的用戶交互來概括或表徵數據。 廣義數據以表格、餅圖、折線圖、條形圖和圖形等多種形式呈現。 數據之間的多維關係以一種稱為目標類特徵規則的規則呈現。
數據歧視
它比較兩個類之間的數據。 通常,它將目標類映射到預定義的組或類。 它使用一組稱為判別規則的規則將類的特徵與預定義的類進行比較和對比。 數據鑑別中使用的方法類似於數據表徵。
2.分類
它使用數據模型來預測數據的趨勢。 例如,我們的網上銀行或移動應用程序根據我們的支出模式顯示的支出圖表。 這有時用於定義我們獲得新貸款的風險。
它使用 IF-THEN、決策樹、數學公式或神經網絡等方法來預測或分析模型。 它使用訓練數據來生成新實例,以與現有實例進行比較。
閱讀:數據科學職業
3. 預測
預測在數據中查找缺失的數值。 它使用回歸分析來查找不可用的數據。 如果缺少類標籤,則使用分類完成預測。 預測因其在商業智能中的重要性而廣受歡迎。 有兩種方法可以預測數據:

- 使用預測分析預測不可用或缺失的數據
- 使用先前構建的類模型預測類標籤。
這是一種預測技術,可以讓我們在未來深處發現價值。 我們需要擁有龐大的過去值數據集來預測未來趨勢。
4.關聯分析
它涉及數據的兩個或多個屬性。 它發現數據和綁定它們的規則之間的關係。 它在零售業中得到廣泛應用。 亞馬遜在底部顯示的建議“購買此商品的客戶也購買了..”是關聯分析的實時示例。
它將經常交易的屬性關聯在一起。 他們找出所謂的關聯規則,並廣泛用於購物籃分析。 有兩個項目可以關聯屬性。 一個是置信度,表示兩者關聯在一起的概率,另一個是支持度,它說明了過去發生的關聯。
例如,如果買手機是帶耳機的:支持是2%,信心是40%。 這意味著 2% 的客戶購買帶有耳機的手機。 40% 的置信度是相同關聯再次發生的概率。
閱讀:印度的數據挖掘項目
5. 聚類分析
無監督分類稱為聚類分析。 它類似於對數據進行分組的分類。 與分類不同,在聚類分析中,類標籤是未知的。 數據根據聚類算法進行分組。
類似地分組在一個集群下的對象。 一個集群和另一個集群之間會有很大的不同。 進行分組以最大化類內相似性並最小化類內相似性。 聚類應用於機器學習、圖像處理、模式識別和生物信息學等許多領域。
6.異常值分析
當出現無法歸入任何類的數據時,我們使用異常值分析。 將出現對任何其他類或通用模型具有不同屬性的數據。 這些突出的數據稱為異常值。 它們通常被認為是噪聲或異常,對這些異常值的分析稱為異常值挖掘。
這些異常值在許多應用程序中可能是有價值的關聯,儘管它們通常作為噪聲被丟棄。 它們也被稱為異常或意外,這對於識別它們很重要。 異常值是使用找到概率的統計測試來識別的。 異常值的其他名稱是:
- 離經叛道者
- 異常情況
- 不和諧
- 異常情況
7. 演化與偏差分析
通過進化分析,我們得到了與時間相關的數據聚類。 我們可以發現一段時間內行為的趨勢和變化。 通過這種獨特的分析,我們可以找到時間序列數據、週期性和趨勢相似性等特徵。
另請閱讀:印度數據科學家的薪水
結論
從空間科學到零售營銷,整體數據挖掘和功能發現了許多應用。
如果您對學習數據科學以走在快節奏的技術進步的前沿感到好奇,請查看 upGrad 和 IIIT-B 的數據科學執行 PG 計劃。
功能在數據挖掘中意味著什麼?
數據挖掘是從海量數據集中收集信息、檢測模式和發現聯繫的過程。 數據挖掘中的功能用於定義數據科學家將在數據挖掘活動中發現的模式類型。 數據挖掘操作分為描述性和預測性兩種類型。 描述性挖掘任務描述數據庫數據的一般特徵。 預測性挖掘任務通過對當前數據進行推斷來產生預測。 根據數據挖掘過程選擇功能。
數據模型是什麼意思?
數據模型是信息域中各種數據組件之間的邏輯相互關係和數據流的表示。 它還描述瞭如何存儲和訪問數據的過程。 數據模型通過適當地表達信息系統要求並為這些要求創建答案來增強通信、業務和技術開發。 數據模型有助於描述需要哪些數據以及數據科學家應以何種格式將其用於各種業務活動。
異常值分析會發生什麼?
異常值分析是一種稱為“異常值挖掘”的數據挖掘任務。 數據科學家可以使用它來檢測各種情況下的欺詐行為,包括意外的信用卡或電信使用、醫療保健分析以檢測對醫療的奇怪反應以及營銷以發現客戶的購買習慣。 數據科學專業人員可以通過多種方法找到異常值。 所有這些策略都使用各種方法來發現與數據集的其餘部分不同的值。