91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

大數(shù)據(jù)挖掘是什么,數(shù)據(jù)挖掘的方法主要有哪些?

jmiy_worldofai ? 來源:YXQ ? 2019-04-17 10:42 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

數(shù)據(jù)挖掘(Data Mining)是從大量的、不完全的、有噪聲的、模糊的、隨機的數(shù)據(jù)中提取隱含在其中的、人們事先不知道的、但又是潛在有用的信息和知識的過程。

數(shù)據(jù)挖掘?qū)ο?/strong>

根據(jù)信息存儲格式,用于挖掘的對象有關系數(shù)據(jù)庫、面向?qū)ο髷?shù)據(jù)庫、數(shù)據(jù)倉庫、文本數(shù)據(jù)源、多媒體數(shù)據(jù)庫、空間數(shù)據(jù)庫、時態(tài)數(shù)據(jù)庫、異質(zhì)數(shù)據(jù)庫以及Internet等。

數(shù)據(jù)挖掘流程

定義問題:清晰地定義出業(yè)務問題,確定數(shù)據(jù)挖掘的目的。

數(shù)據(jù)準備:數(shù)據(jù)準備包括:選擇數(shù)據(jù)–在大型數(shù)據(jù)庫和數(shù)據(jù)倉庫目標中 提取數(shù)據(jù)挖掘的目標數(shù)據(jù)集;數(shù)據(jù)預處理–進行數(shù)據(jù)再加工,包括檢查數(shù)據(jù)的完整性及數(shù)據(jù)的一致性、去噪聲,填補丟失的域,刪除無效數(shù)據(jù)等。

數(shù)據(jù)挖掘:根據(jù)數(shù)據(jù)功能的類型和和數(shù)據(jù)的特點選擇相應的算法,在凈化和轉(zhuǎn)換過的數(shù)據(jù)集上進行數(shù)據(jù)挖掘。

結(jié)果分析:對數(shù)據(jù)挖掘的結(jié)果進行解釋和評價,轉(zhuǎn)換成為能夠最終被用戶理解的知識。

數(shù)據(jù)挖掘分類

直接數(shù)據(jù)挖掘:目標是利用可用的數(shù)據(jù)建立一個模型,這個模型對剩余的數(shù)據(jù),對一個特定的變量(可以理解成數(shù)據(jù)庫中表的屬性,即列)進行描述。

間接數(shù)據(jù)挖掘:目標中沒有選出某一具體的變量,用模型進行描述;而是在所有的變量中建立起某種關系。

數(shù)據(jù)挖掘的方法

神經(jīng)網(wǎng)絡方法

神經(jīng)網(wǎng)絡由于本身良好的魯棒性、自組織自適應性、并行處理、分布存儲和高度容錯等特性非常適合解決數(shù)據(jù)挖掘的問題,因此近年來越來越受到人們的關注。

遺傳算法

遺傳算法是一種基于生物自然選擇與遺傳機理的隨機搜索算法,是一種仿生全局優(yōu)化方法。遺傳算法具有的隱含并行性、易于和其它模型結(jié)合等性質(zhì)使得它在數(shù)據(jù)挖掘中被加以應用。

決策樹方法

決策樹是一種常用于預測模型的算法,它通過將大量數(shù)據(jù)有目的分類,從中找到一些有價值的,潛在的信息。它的主要優(yōu)點是描述簡單,分類速度快,特別適合大規(guī)模的數(shù)據(jù)處理。

粗集方法

粗集理論是一種研究不精確、不確定知識的數(shù)學工具。粗集方法有幾個優(yōu)點:不需要給出額外信息;簡化輸入信息的表達空間;算法簡單,易于操作。粗集處理的對象是類似二維關系表的信息表。

覆蓋正例排斥反例方法

它是利用覆蓋所有正例、排斥所有反例的思想來尋找規(guī)則。首先在正例集合中任選一個種子,到反例集合中逐個比較。與字段取值構(gòu)成的選擇子相容則舍去,相反則保留。按此思想循環(huán)所有正例種子,將得到正例的規(guī)則(選擇子的合取式)。

統(tǒng)計分析方法

在數(shù)據(jù)庫字段項之間存在兩種關系:函數(shù)關系和相關關系,對它們的分析可采用統(tǒng)計學方法,即利用統(tǒng)計學原理對數(shù)據(jù)庫中的信息進行分析。可進行常用統(tǒng)計、回歸分析、相關分析、差異分析等。

模糊集方法

即利用模糊集合理論對實際問題進行模糊評判、模糊決策、模糊模式識別和模糊聚類分析。系統(tǒng)的復雜性越高,模糊性越強,一般模糊集合理論是用隸屬度來刻畫模糊事物的亦此亦彼性的。

數(shù)據(jù)挖掘任務

關聯(lián)分析

兩個或兩個以上變量的取值之間存在某種規(guī)律性,就稱為關聯(lián)。數(shù)據(jù)關聯(lián)是數(shù)據(jù)庫中存在的一類重要的、可被發(fā)現(xiàn)的知識。關聯(lián)分為簡單關聯(lián)、時序關聯(lián)和因果關聯(lián)。關聯(lián)分析的目的是找出數(shù)據(jù)庫中隱藏的關聯(lián)網(wǎng)。一般用支持度和可信度兩個閥值來度量關聯(lián)規(guī)則的相關性,還不斷引入興趣度、相關性等參數(shù),使得所挖掘的規(guī)則更符合需求。

聚類分析

聚類是把數(shù)據(jù)按照相似性歸納成若干類別,同一類中的數(shù)據(jù)彼此相似,不同類中的數(shù)據(jù)相異。聚類分析可以建立宏觀的概念,發(fā)現(xiàn)數(shù)據(jù)的分布模式,以及可能的數(shù)據(jù)屬性之間的相互關系。

分類

分類就是找出一個類別的概念描述,它代表了這類數(shù)據(jù)的整體信息,即該類的內(nèi)涵描述,并用這種描述來構(gòu)造模型,一般用規(guī)則或決策樹模式表示。分類是利用訓練數(shù)據(jù)集通過一定的算法而求得分類規(guī)則。分類可被用于規(guī)則描述和預測。

預測

預測是利用歷史數(shù)據(jù)找出變化規(guī)律,建立模型,并由此模型對未來數(shù)據(jù)的種類及特征進行預測。預測關心的是精度和不確定性,通常用預測方差來度量。

時序模式

時序模式是指通過時間序列搜索出的重復發(fā)生概率較高的模式。與回歸一樣,它也是用己知的數(shù)據(jù)預測未來的值,但這些數(shù)據(jù)的區(qū)別是變量所處時間的不同。

偏差分析

在偏差中包括很多有用的知識,數(shù)據(jù)庫中的數(shù)據(jù)存在很多異常情況,發(fā)現(xiàn)數(shù)據(jù)庫中數(shù)據(jù)存在的異常情況是非常重要的。偏差檢驗的基本方法就是尋找觀察結(jié)果與參照之間的差別。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4785

    瀏覽量

    98156
  • 數(shù)據(jù)挖掘

    關注

    1

    文章

    406

    瀏覽量

    25088

原文標題:大數(shù)據(jù)挖掘是什么,數(shù)據(jù)挖掘的方法主要有哪些?

文章出處:【微信號:worldofai,微信公眾號:worldofai】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    生成式AI賦能工程師挖掘非結(jié)構(gòu)化數(shù)據(jù)價值

    您是否知道,生成式 AI(GenAI)可以幫助工程師在幾秒鐘內(nèi)診斷汽車故障,甚至在設備出現(xiàn)問題之前預測潛在失效?GenAI 正在通過加速數(shù)據(jù)分析和算法開發(fā),讓這些場景從設想走向現(xiàn)實,使工程師能夠充分發(fā)揮專業(yè)知識,挖掘可執(zhí)行的洞察。
    的頭像 發(fā)表于 02-28 10:24 ?479次閱讀

    1688品類API:藍海市場發(fā)現(xiàn),新機會挖掘!

    ? 在當今競爭激烈的電商市場中,發(fā)現(xiàn)藍海市場(即未飽和、低競爭高需求的市場)成為企業(yè)增長的關鍵。1688作為阿里巴巴旗下的批發(fā)平臺,其品類API提供了豐富的商品數(shù)據(jù),幫助開發(fā)者通過技術手段高效挖掘
    的頭像 發(fā)表于 01-23 13:39 ?369次閱讀
    1688品類API:藍海市場發(fā)現(xiàn),新機會<b class='flag-5'>挖掘</b>!

    請問單片機開發(fā)的程序設計語言主要有哪幾種?

    單片機開發(fā)的程序設計語言主要有哪幾種?
    發(fā)表于 01-14 08:29

    大數(shù)據(jù)平臺運營的基礎是什么

    在數(shù)聚股份看來,越來越多的企業(yè)開始搭建自己的大數(shù)據(jù)平臺體系,并傾注大量資源用于平臺的迭代和運營。那么大數(shù)據(jù)平臺作為越來越被關注的企業(yè)新興價值點,它應該以何種方式看待,并且以什么樣的方式去建設和運營
    的頭像 發(fā)表于 12-23 16:07 ?264次閱讀

    大數(shù)據(jù)時代下的管理變革:勤哲EXCEL服務器助力企業(yè)高效運營

    大數(shù)據(jù)高速發(fā)展的今天,先進信息技術正在潛移默化地改變現(xiàn)代企業(yè)的經(jīng)營管理模式。實踐證明,這些技術不但提升了管理效率,還為企業(yè)決策提供了科學依據(jù)。信息化建設已成為企業(yè)管理創(chuàng)新的重要趨勢,越來越多企業(yè)
    的頭像 發(fā)表于 11-19 14:29 ?527次閱讀

    奧松電子協(xié)辦第二屆智能計算與數(shù)據(jù)挖掘國際學術會議

    2025年10月24日至26日,第二屆智能計算與數(shù)據(jù)挖掘國際學術會議(ICDM 2025)在中國廣州隆重舉行。本次會議由廣州航海學院、汕頭大學、廣東省數(shù)智科技研究會聯(lián)合主辦,廣州奧松電子股份有限公司作為協(xié)辦單位之一,攜手多家產(chǎn)業(yè)機構(gòu),共同推動智能計算與
    的頭像 發(fā)表于 11-03 14:18 ?630次閱讀

    IMU P/N312-0755在卡特彼勒挖掘機上的應用實踐

    直川科技通過持續(xù)優(yōu)化IMU傳感器的環(huán)境適應性與數(shù)據(jù)可靠性,為卡特彼勒挖掘機提供了兼顧精度與穩(wěn)健性的姿態(tài)感知方案。其P/N312-0755產(chǎn)品在多個大型項目中的實踐表明,基于工業(yè)標準設計的IMU已成為重型機械智能升級的關鍵組件。
    的頭像 發(fā)表于 10-11 11:04 ?579次閱讀
    IMU P/N312-0755在卡特彼勒<b class='flag-5'>挖掘</b>機上的應用實踐

    京東商品詳情接口實戰(zhàn)解析:從調(diào)用優(yōu)化到商業(yè)價值挖掘(附避坑代碼)

    本文深入解析京東商品詳情接口jd.union.open.goods.detail.query,涵蓋核心特性、權(quán)限限制、關鍵參數(shù)及調(diào)用避坑指南。通過實戰(zhàn)代碼演示數(shù)據(jù)采集、促銷解析與商業(yè)分析,助力開發(fā)者高效獲取價格、庫存、評價等全維度數(shù)據(jù),
    的頭像 發(fā)表于 10-10 09:28 ?886次閱讀
    京東商品詳情接口實戰(zhàn)解析:從調(diào)用優(yōu)化到商業(yè)價值<b class='flag-5'>挖掘</b>(附避坑代碼)

    XKCON祥控輸煤皮帶智能機器人巡檢系統(tǒng)對監(jiān)測數(shù)據(jù)進行挖掘分析

    XKCON祥控輸煤皮帶智能機器人巡檢系統(tǒng)通過智能機器人在皮帶運行過程中對皮帶的運行狀態(tài)和環(huán)境狀況進行實時檢測,在應用過程中,不但提升了巡視周期頻次,還通過大數(shù)據(jù)分析和深度學習算法,對監(jiān)測數(shù)據(jù)進行挖掘分析,及時發(fā)現(xiàn)設備缺陷故障,為
    的頭像 發(fā)表于 09-15 11:22 ?648次閱讀
    XKCON祥控輸煤皮帶智能機器人巡檢系統(tǒng)對監(jiān)測<b class='flag-5'>數(shù)據(jù)</b>進行<b class='flag-5'>挖掘</b>分析

    無線數(shù)傳模塊助力挖掘機工廠實現(xiàn)高效無線通信系統(tǒng)

    應用背景? 山東某挖掘機機械有限公司的核心產(chǎn)品涵蓋裝載機、挖掘機、道路機械及核心關鍵零部件等系列工程機械。為加速新舊動能轉(zhuǎn)換,企業(yè)引入全新挖掘機整機裝配線,并配合勞動組合調(diào)整,不僅顯著提升了裝配水平
    的頭像 發(fā)表于 08-27 15:12 ?565次閱讀
    無線數(shù)傳模塊助力<b class='flag-5'>挖掘</b>機工廠實現(xiàn)高效無線通信系統(tǒng)

    淘寶 API 接口:海量商品數(shù)據(jù)挖掘的寶藏鑰匙

    高效、安全地訪問和分析這些數(shù)據(jù),為市場洞察、用戶行為預測和商業(yè)決策提供強大支持。 淘寶 API 接口的核心功能 淘寶 API 接口提供了一系列標準化的服務,允許開發(fā)者通過編程方式獲取平臺數(shù)據(jù)主要功能包括: 商品
    的頭像 發(fā)表于 08-12 14:26 ?757次閱讀
    淘寶 API 接口:海量商品<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>挖掘</b>的寶藏鑰匙

    水晶頭主要有哪幾種型號

    水晶頭主要有RJ-45、RJ-11和RJ-12三種型號,具體說明如下: RJ-45水晶頭: 結(jié)構(gòu):有8個凹槽和8個觸點(8p8c),體積相對較大。 應用:廣泛用于以太網(wǎng)、快速以太網(wǎng)、千兆以太網(wǎng)等網(wǎng)絡
    的頭像 發(fā)表于 08-05 09:41 ?4648次閱讀

    用樹莓派挖掘5種頂級加密貨幣!

    加密貨幣是用于在線交易的數(shù)字貨幣。挖掘這些貨幣通常需要專門的硬件,如ASIC礦機或高性能GPU。然而,有些加密貨幣仍可用樹莓派來挖掘。在本文中,我將為您介紹可在樹莓派上挖掘的最佳加密貨幣。適合用樹莓
    的頭像 發(fā)表于 07-21 16:34 ?1509次閱讀
    用樹莓派<b class='flag-5'>挖掘</b>5種頂級加密貨幣!

    測量相位差的方法主要有哪些?

    測量相位差可以用示波器測量,也可以把相位差轉(zhuǎn)換為時間間隔,先測量出時間間隔,再換算為相位差,可以把相位差轉(zhuǎn)換為電壓,先測量出電壓,再換算為相位差,還可以與標準移相器進行比較的比較法(零示法)等方法
    的頭像 發(fā)表于 06-18 09:03 ?2178次閱讀
    測量相位差的<b class='flag-5'>方法</b><b class='flag-5'>主要有</b>哪些?

    物聯(lián)網(wǎng)感知數(shù)據(jù)挖掘:賦能萬物智聯(lián)的核心引擎

    背后,數(shù)據(jù)挖掘與分析技術正成為解鎖設備潛能、驅(qū)動產(chǎn)業(yè)變革的關鍵鑰匙。 一、從數(shù)據(jù)到洞察:六大核心價值維度 1. 價值轉(zhuǎn)化器:解鎖設備數(shù)據(jù)的商業(yè)密碼 工業(yè)傳感器產(chǎn)生的振動頻譜、智能電表的
    的頭像 發(fā)表于 06-17 16:22 ?683次閱讀