91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

Python機器學習庫談Scikit-learn技術

深度學習自然語言處理 ? 來源:NewBeeNLP公眾號 ? 作者:Rebecca Vickery ? 2020-08-27 17:34 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

Scikit-learn是使用最廣泛的Python機器學習庫之一。它有標準化和簡單的接口,用于數(shù)據(jù)預處理和模型訓練、優(yōu)化以及評估。

這個項目最初是由David Cournapeau 開發(fā)的Google Summer of Code 項目,并于2010年首次公開發(fā)布。自創(chuàng)建以來,該庫已經(jīng)發(fā)展成為一個豐富的生態(tài)系統(tǒng),用于開發(fā)機器學習模型。隨著時間的推移,該項目開發(fā)了許多方便的功能,以增強其易用性。在本文中,我將介紹你可能不知道的10個關于Scikit-learn最有用的特性。

1. 內(nèi)置數(shù)據(jù)集

Scikit-learn API內(nèi)置了各種toy和real-world數(shù)據(jù)集[1]。這些可以便捷地通過一行代碼訪問,如果你正在學習或只是想快速嘗試新功能,這會非常有用。

你還可以使用make_regression()、make_blobs()和make_classification()生成合成數(shù)據(jù)集。所有加載實用程序都提供了返回已拆分為X(特征)和y(目標)的數(shù)據(jù)選項,以便它們可以直接用于訓練模型。

2. 獲取公開數(shù)據(jù)集

如果你想直接通過Scikit-learn訪問更多的公共可用數(shù)據(jù)集,請了解,有一個方便的函數(shù)datasets.fetch_openml,可以讓您直接從openml.org網(wǎng)站[2]獲取數(shù)據(jù)。這個網(wǎng)站包含超過21000個不同的數(shù)據(jù)集,可以用于機器學習項目。

3. 內(nèi)置分類器來訓練baseline

在為項目開發(fā)機器學習模型時,首先創(chuàng)建一個baseline模型是非常有必要的。這個模型在本質(zhì)上應該是一個“dummy”模型,比如一個總是預測最頻繁出現(xiàn)的類的模型。這就提供了一個基準,用來對你的“智能”模型進行基準測試,這樣你就可以確保它的性能比隨機結果更好。

Scikit learn包括用于分類任務的DummyClassifier() 和用于基于回歸問題的 DummyRegressor()。

4. 內(nèi)置繪圖api

Scikit learn有一個內(nèi)置的繪圖API,允許你在不導入任何其他庫的情況下可視化模型性能。包括以下繪圖:部分相關圖、混淆矩陣、精確召回曲線和ROC曲線。

5. 內(nèi)置特征選擇方法

提高模型性能的一種技術是只使用最好的特征集或通過刪除冗余特征來訓練模型。這個過程稱為特征選擇。

Scikit learn有許多函數(shù)來執(zhí)行特征選擇。一個示例為 SelectPercentile(),該方法根據(jù)所選的統(tǒng)計方法選擇性能最好的X百分位特征進行評分。

6. 機器學習pipeline

除了為機器學習提供廣泛的算法外,Scikit learn還具有一系列用于「預處理」「轉(zhuǎn)換數(shù)據(jù)」的功能。為了促進機器學習工作流程的再現(xiàn)性和簡單性,Scikit learn創(chuàng)建了管道(pipeline),允許將大量預處理步驟與模型訓練階段鏈接在一起。

管道將工作流中的所有步驟存儲為單個實體,可以通過「fit」「predict」方法調(diào)用該實體。在管道對象上調(diào)用fit方法時,預處理步驟和模型訓練將自動執(zhí)行。

7. ColumnTransformer

在許多數(shù)據(jù)集中,你將擁有不同類型的特征,需要應用不同的預處理步驟。例如,可能有分類數(shù)據(jù)和連續(xù)數(shù)據(jù)的混合,你可能希望通過one-hot編碼將分類數(shù)據(jù)轉(zhuǎn)換為數(shù)字,并縮放數(shù)字變量。

Scikit-learn管道有一個名為ColumnTransformer的函數(shù),它允許你通過索引或指定列名來輕松指定要對哪些列應用最適當?shù)念A處理。

8. 管道的HTML形式

管道通常會變得非常復雜,尤其是在處理真實世界的數(shù)據(jù)時。因此,scikit-learn提供了一種方法來輸出管道中步驟的HTML圖表[3],非常方便。

9. 可視化 樹模型

plot_tree() 函數(shù)允許你創(chuàng)建決策樹模型中的步驟圖。

10. 豐富的第三方擴展

許多第三方庫可以更好地擴展scikit-learn的特性。舉個栗子,category-encoders庫,它為分類特性提供了更大范圍的預處理方法,以及ELI5包以實現(xiàn)更大的模型可解釋性。這兩個包也可以直接在Scikit-learn管道中使用。

本文參考資料

[1]toy和real-world數(shù)據(jù)集: https://scikit-learn.org/stable/datasets/index.html

[2]openml.org網(wǎng)站: https://www.openml.org/home

[3]HTML圖表: https://scikit-learn.org/stable/modules/compose.html#visualizing-composite-estimators

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器學習
    +關注

    關注

    66

    文章

    8554

    瀏覽量

    136982
  • python
    +關注

    關注

    57

    文章

    4877

    瀏覽量

    90078

原文標題:關于Scikit-Learn你(也許)不知道的10件事

文章出處:【微信號:zenRRan,微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    如何在 Vision Five 2 上安裝 python

    這可能是一個完全愚蠢的問題,但我如何在 Vision Five 2 上安裝 python 。 使用該命令后,它給了我這個錯誤。 默認為用戶安裝,因為普通站點包不可寫 錯誤:找不到滿足要求
    發(fā)表于 03-06 07:51

    算法工程師需要具備哪些技能?

    開發(fā)(如NumPy、Pandas、Scikit-learn)。C++/Java:高性能場景(如大規(guī)模矩陣運算、分布式系統(tǒng)開發(fā))。 開發(fā)工具Linux命令行:文件操作、進程管理、日志分析等。Shell腳本
    發(fā)表于 02-27 10:53

    無法去除 Python VisionFive.i2c 的終端輸出?

    燒的官方最新八月份的 debian 12 的系統(tǒng)。 根據(jù)這個案例安裝好了 python 環(huán)境和 VisionFive 。 執(zhí)行下面這條代碼: import VisionFive.i2c
    發(fā)表于 02-25 06:13

    AGV機器人如何精準識別位有無貨物?

    AGV機器人如何精準判斷位狀態(tài)?激光傳感器、視覺識別和壓力傳感器三大技術協(xié)同作戰(zhàn):激光測距穿透空位,視覺捕捉貨物特征,壓力感知重量變化,多技術
    的頭像 發(fā)表于 01-13 17:03 ?525次閱讀
    AGV<b class='flag-5'>機器</b>人如何精準識別<b class='flag-5'>庫</b>位有無貨物?

    CIE全國RISC-V創(chuàng)新應用大賽 人臉識別系統(tǒng)介紹與移植

    scikit-learn 等依賴的編譯需求,執(zhí)行以下命令(需管理員權限): 打開命令行,不要進入venv環(huán)境,直接輸入: sudo apt update && sudo apt
    發(fā)表于 11-08 11:19

    一文了解Mojo編程語言

    Mojo 語言的具體介紹: 核心特點 Python 兼容性 Mojo 支持大部分 Python 語法和標準,可直接調(diào)用 Python 生態(tài)系統(tǒng)中的
    發(fā)表于 11-07 05:59

    Python調(diào)用API教程

    兩個不同系統(tǒng)之間的信息交互。在這篇文章中,我們將詳細介紹Python調(diào)用API的方法和技巧。 一、用Requests發(fā)送HTTP請求 使用Python調(diào)用API的第一步是發(fā)送HTTP請求,通常
    的頭像 發(fā)表于 11-03 09:15 ?900次閱讀

    貿(mào)澤電子2025邊緣AI與機器學習技術創(chuàng)新論壇回顧(上)

    2025年,隨著人工智能技術的快速發(fā)展,邊緣AI與機器學習市場迎來飛速增長,據(jù)Gartner預計,2025年至2030年,邊緣AI市場將保持23%的復合年增長率。
    的頭像 發(fā)表于 07-21 11:08 ?1192次閱讀
    貿(mào)澤電子2025邊緣AI與<b class='flag-5'>機器</b><b class='flag-5'>學習</b><b class='flag-5'>技術</b>創(chuàng)新論壇回顧(上)

    linux虛擬環(huán)境中調(diào)用Linux 版matlab編譯的python時出錯

    matlab代碼編譯為CAO_pythonpython,其中cp_Main_python.m為入口文件,編譯后生成的文件有mccExcludedFiles.log、setup.py
    發(fā)表于 07-18 10:40

    FPGA在機器學習中的具體應用

    隨著機器學習和人工智能技術的迅猛發(fā)展,傳統(tǒng)的中央處理單元(CPU)和圖形處理單元(GPU)已經(jīng)無法滿足高效處理大規(guī)模數(shù)據(jù)和復雜模型的需求。FPGA(現(xiàn)場可編程門陣列)作為一種靈活且高效的硬件加速平臺
    的頭像 發(fā)表于 07-16 15:34 ?2905次閱讀

    基于米爾瑞芯微RK3576開發(fā)板的創(chuàng)建機器學習環(huán)境方案

    】 【米爾-瑞芯微RK3576核心板及開發(fā)板】具有6TpsNPU以及GPU,因此是學習機器學習的好環(huán)境,為此結合《深度學習的數(shù)學——使用Python語言》 1、使用vscode 連接遠
    發(fā)表于 06-27 11:33

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】機器人入門的引路書

    的限制和調(diào)控) 本書還有很多前沿技術項目的擴展 比如神經(jīng)網(wǎng)絡識別例程,機器學習圖像識別的原理,yolo圖像追蹤的原理 機器學習訓練三大點:
    發(fā)表于 04-30 01:05

    NanoEdge AI Studio 面向STM32開發(fā)人員機器學習(ML)技術

    NanoEdge? AI Studio*(NanoEdgeAIStudio)是一種新型機器學習(ML)技術,可以讓終端用戶輕松享有真正的創(chuàng)新成果。只需幾步,開發(fā)人員便可基于最少量的數(shù)據(jù)為其項目創(chuàng)建
    的頭像 發(fā)表于 04-22 11:09 ?1355次閱讀
    NanoEdge AI Studio 面向STM32開發(fā)人員<b class='flag-5'>機器</b><b class='flag-5'>學習</b>(ML)<b class='flag-5'>技術</b>

    **【技術干貨】Nordic nRF54系列芯片:傳感器數(shù)據(jù)采集與AI機器學習的完美結合**

    技術干貨】nRF54系列芯片:傳感器數(shù)據(jù)采集與AI機器學習的完美結合 近期收到不少伙伴咨詢nRF54系列芯片的應用與技術細節(jié),今天我們整理幾個核心問題與解答,帶你快速掌握如何在nRF
    發(fā)表于 04-01 00:00

    ?如何在虛擬環(huán)境中使用 Python,提升你的開發(fā)體驗~

    。RaspberryPiOS預裝了Python3。干擾系統(tǒng)Python的安裝可能會給你的操作系統(tǒng)帶來問題。安裝第三方Python時,請務必使用正確的包管理工具。在Lin
    的頭像 發(fā)表于 03-25 09:34 ?818次閱讀
    ?如何在虛擬環(huán)境中使用 <b class='flag-5'>Python</b>,提升你的開發(fā)體驗~