我們使用dmoz.org這個網(wǎng)站來作為小抓抓一展身手的對象。
首先先要回答一個問題。
問：把網(wǎng)站裝進爬蟲里，總共分幾步？
答案很簡單，四步：
新建項目 (Project)：新建一個新的爬蟲項目
明確目標（Items）：明確你想要抓取的目標
制作爬蟲（Spider）：制作爬蟲開始爬取網(wǎng)頁
存儲內(nèi)容（Pipeline）：設(shè)計管道存儲爬取內(nèi)容
好的，基本流程既然確定了，那接下來就一步一步的完成就可以了。
1.新建項目（Project）
在空目錄下按住Shift鍵右擊，選擇“在此處打開命令窗口”，輸入一下命令：
其中，tutorial為項目名稱。
可以看到將會創(chuàng)建一個tutorial文件夾，目錄結(jié)構(gòu)如下：
下面來簡單介紹一下各個文件的作用：
scrapy.cfg：項目的配置文件
tutorial/：項目的Python模塊，將會從這里引用代碼
tutorial/items.py：項目的items文件
tutorial/pipelines.py：項目的pipelines文件
tutorial/settings.py：項目的設(shè)置文件
tutorial/spiders/：存儲爬蟲的目錄
2.明確目標（Item）
在Scrapy中，items是用來加載抓取內(nèi)容的容器，有點像Python中的Dic，也就是字典，但是提供了一些額外的保護減少錯誤。
一般來說，item可以用scrapy.item.Item類來創(chuàng)建，并且用scrapy.item.Field對象來定義屬性（可以理解成類似于ORM的映射關(guān)系）。
接下來，我們開始來構(gòu)建item模型（model）。
首先，我們想要的內(nèi)容有：
名稱（name）
鏈接（url）
描述（description）
修改tutorial目錄下的items.py文件，在原本的class后面添加我們自己的class。
因為要抓dmoz.org網(wǎng)站的內(nèi)容，所以我們可以將其命名為DmozItem：
剛開始看起來可能會有些看不懂，但是定義這些item能讓你用其他組件的時候知道你的 items到底是什么。
可以把Item簡單的理解成封裝好的類對象。
3.制作爬蟲（Spider）
制作爬蟲，總體分兩步：先爬再取。
也就是說，首先你要獲取整個網(wǎng)頁的所有內(nèi)容，然后再取出其中對你有用的部分。
3.1爬
Spider是用戶自己編寫的類，用來從一個域（或域組）中抓取信息。
他們定義了用于下載的URL列表、跟蹤鏈接的方案、解析網(wǎng)頁內(nèi)容的方式，以此來提取items。
要建立一個Spider，你必須用scrapy.spider.BaseSpider創(chuàng)建一個子類，并確定三個強制的屬性：
name：爬蟲的識別名稱，必須是唯一的，在不同的爬蟲中你必須定義不同的名字。
start_urls：爬取的URL列表。爬蟲從這里開始抓取數(shù)據(jù)，所以，第一次下載的數(shù)據(jù)將會從這些urls開始。其他子URL將會從這些起始URL中繼承性生成。
parse()：解析的方法，調(diào)用的時候傳入從每一個URL傳回的Response對象作為唯一參數(shù)，負責解析并匹配抓取的數(shù)據(jù)(解析為item)，跟蹤更多的URL。
這里可以參考寬度爬蟲教程中提及的思想來幫助理解，教程傳送：[Java] 知乎下巴第5集：使用HttpClient工具包和寬度爬蟲。
也就是把Url存儲下來并依此為起點逐步擴散開去，抓取所有符合條件的網(wǎng)頁Url存儲起來繼續(xù)爬取。
下面我們來寫第一只爬蟲，命名為dmoz_spider.py，保存在tutorial\spiders目錄下。
dmoz_spider.py代碼如下：
allow_domains是搜索的域名范圍，也就是爬蟲的約束區(qū)域，規(guī)定爬蟲只爬取這個域名下的網(wǎng)頁。
從parse函數(shù)可以看出，將鏈接的最后兩個地址取出作為文件名進行存儲。
然后運行一下看看，在tutorial目錄下按住shift右擊，在此處打開命令窗口，輸入：
運行結(jié)果如圖：
報錯了：
UnicodeDecodeError: 'ascii' codec can't decode byte 0xb0 in position 1: ordinalnot in range(128)
運行第一個Scrapy項目就報錯，真是命運多舛。
應該是出了編碼問題，谷歌了一下找到了解決方案：
在python的Lib\site-packages文件夾下新建一個sitecustomize.py：
再次運行，OK，問題解決了，看一下結(jié)果：
最后一句INFO: Closing spider (finished)表明爬蟲已經(jīng)成功運行并且自行關(guān)閉了。
包含 [dmoz]的行 ，那對應著我們的爬蟲運行的結(jié)果。
可以看到start_urls中定義的每個URL都有日志行。
還記得我們的start_urls嗎？
http://www.dmoz.org/Computers/Programming/Languages/Python/Bookshttp://www.dmoz.org/Computers/Programming/Languages/Python/Resources
因為這些URL是起始頁面，所以他們沒有引用(referrers)，所以在它們的每行末尾你會看到 (referer: )。
在parse 方法的作用下，兩個文件被創(chuàng)建：分別是 Books 和 Resources，這兩個文件中有URL的頁面內(nèi)容。
那么在剛剛的電閃雷鳴之中到底發(fā)生了什么呢？
首先，Scrapy為爬蟲的 start_urls屬性中的每個URL創(chuàng)建了一個 scrapy.http.Request 對象 ，并將爬蟲的parse 方法指定為回調(diào)函數(shù)。
然后，這些 Request被調(diào)度并執(zhí)行，之后通過parse()方法返回scrapy.http.Response對象，并反饋給爬蟲。
3.2取
爬取整個網(wǎng)頁完畢，接下來的就是的取過程了。
光存儲一整個網(wǎng)頁還是不夠用的。
在基礎(chǔ)的爬蟲里，這一步可以用正則表達式來抓。
在Scrapy里，使用一種叫做 XPath selectors的機制，它基于 XPath表達式。
如果你想了解更多selectors和其他機制你可以查閱相關(guān)資料。
這是一些XPath表達式的例子和他們的含義
/html/head/title: 選擇HTML文檔
元素下面的
<a target="_blank"><u>標簽</u></a>。</p>
<p style="text-indent: 2em;">
/html/head/title/text(): 選擇前面提到的<title> 元素下面的文本內(nèi)容</p>
<p style="text-indent: 2em;">
//td: 選擇所有 <td> 元素</p>
<p style="text-indent: 2em;">
//div[@class="mine"]: 選擇所有包含 class="mine" 屬性的div 標簽元素</p>
<p style="text-indent: 2em;">
以上只是幾個使用XPath的簡單例子，但是實際上XPath非常強大。</p>
<p style="text-indent: 2em;">
為了方便使用XPaths，Scrapy提供XPathSelector 類，有兩種可以選擇，HtmlXPathSelector(HTML數(shù)據(jù)解析)和XmlXPathSelector(XML數(shù)據(jù)解析)。</p>
<p style="text-indent: 2em;">
必須通過一個 Response 對象對他們進行實例化操作。</p>
<p style="text-indent: 2em;">
你會發(fā)現(xiàn)Selector對象展示了文檔的節(jié)點結(jié)構(gòu)。因此，第一個實例化的selector必與根節(jié)點或者是整個目錄有關(guān) 。</p>
<p style="text-indent: 2em;">
在Scrapy里面，Selectors 有四種基礎(chǔ)的方法（點擊查看API文檔）：</p>
<p style="text-indent: 2em;">
xpath()：返回一系列的selectors，每一個select表示一個xpath參數(shù)表達式選擇的節(jié)點</p>
<p style="text-indent: 2em;">
css()：返回一系列的selectors，每一個select表示一個css參數(shù)表達式選擇的節(jié)點</p>
<p style="text-indent: 2em;">
extr<a target="_blank"><u>ac</u></a>t()：返回一個unicode字符串，為選中的數(shù)據(jù)</p>
<p style="text-indent: 2em;">
re()：返回一串一個unicode字符串，為使用正則表達式抓取出來的內(nèi)容</p>
<p style="text-indent: 2em;">
3.3xpath實驗</p>
<p style="text-indent: 2em;">
下面我們在Shell里面嘗試一下Selector的用法。</p>
<p style="text-indent: 2em;">
實驗的網(wǎng)址：http://www.dmoz.org/Computers/Programming/Languages/Python/Books/</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3OAMag2AAB7_dZ30Cg048.png" /></p>
<p style="text-indent: 2em;">
熟悉完了實驗的小白鼠，接下來就是用Shell爬取網(wǎng)頁了。</p>
<p style="text-indent: 2em;">
進入到項目的頂層目錄，也就是第一層tutorial文件夾下，在cmd中輸入：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3OAUgvEAAAvjyHSf78514.png" /></p>
<p style="text-indent: 2em;">
回車后可以看到如下的內(nèi)容：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3SATik7AAHbS5Z2YkQ587.png" /></p>
<p style="text-indent: 2em;">
在Shell載入后，你將獲得response回應，存儲在本地變量 response中。</p>
<p style="text-indent: 2em;">
所以如果你輸入response.body，你將會看到response的body部分，也就是抓取到的頁面內(nèi)容：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3aAFYdPAALND72cYfk023.png" /></p>
<p style="text-indent: 2em;">
或者輸入response.headers 來查看它的 header部分：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3mAe8tVAALBJa2ARnE086.png" /></p>
<p style="text-indent: 2em;">
現(xiàn)在就像是一大堆沙子握在手里，里面藏著我們想要的金子，所以下一步，就是用篩子搖兩下，把雜質(zhì)出去，選出關(guān)鍵的內(nèi)容。</p>
<p style="text-indent: 2em;">
selector就是這樣一個篩子。</p>
<p style="text-indent: 2em;">
在舊的版本中，Shell實例化兩種selectors，一個是解析HTML的 hxs 變量，一個是解析XML 的 xxs 變量。</p>
<p style="text-indent: 2em;">
而現(xiàn)在的Shell為我們準備好的selector對象，sel，可以根據(jù)返回的數(shù)據(jù)類型自動選擇最佳的解析方案(XML or HTML)。</p>
<p style="text-indent: 2em;">
然后我們來搗弄一下！~</p>
<p style="text-indent: 2em;">
要徹底搞清楚這個問題，首先先要知道，抓到的頁面到底是個什么樣子。</p>
<p style="text-indent: 2em;">
比如，我們要抓取網(wǎng)頁的標題，也就是<title>這個標簽：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3mAYZubAAAMzxt2yJ4194.png" /></p>
<p style="text-indent: 2em;">
可以輸入：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3mAdRyfAAAHpvVtoOo344.png" /></p>
<p style="text-indent: 2em;">
結(jié)果就是：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3qAQejMAAAvPB0_p9g042.png" /></p>
<p style="text-indent: 2em;">
這樣就能把這個標簽取出來了，用extract()和text()還可以進一步做處理。</p>
<p style="text-indent: 2em;">
備注：簡單的羅列一下有用的xpath路徑表達式：</p>
<p style="text-indent: 2em;">
表達式</p>
<p style="text-indent: 2em;">
描述</p>
<p style="text-indent: 2em;">
nodename 選取此節(jié)點的所有子節(jié)點。 </p>
<p style="text-indent: 2em;">
/ 從根節(jié)點選取。 </p>
<p style="text-indent: 2em;">
// 從匹配選擇的當前節(jié)點選擇文檔中的節(jié)點，而不考慮它們的位置。 </p>
<p style="text-indent: 2em;">
. 選取當前節(jié)點。 </p>
<p style="text-indent: 2em;">
.. 選取當前節(jié)點的父節(jié)點。 </p>
<p style="text-indent: 2em;">
@ 選取屬性。 </p>
<p style="text-indent: 2em;">
全部的實驗結(jié)果如下，In[i]表示第i次實驗的輸入，Out[i]表示第i次結(jié)果的輸出：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3qAVtJSAABq5y-5nTo180.png" /></p>
<p style="text-indent: 2em;">
當然title這個標簽對我們來說沒有太多的價值，下面我們就來真正抓取一些有意義的東西。</p>
<p style="text-indent: 2em;">
使用火狐的審查元素我們可以清楚地看到，我們需要的東西如下：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3uAdCiqAABSVCIAudw253.png" /></p>
<p style="text-indent: 2em;">
我們可以用如下代碼來抓取這個<li>標簽：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3uAEGbvAAAGwo7Xx3w887.png" /></p>
<p style="text-indent: 2em;">
從<li>標簽中，可以這樣獲取網(wǎng)站的描述：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3yAVaxqAAALDd45q6Y420.png" /></p>
<p style="text-indent: 2em;">
可以這樣獲取網(wǎng)站的標題：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3yALz5oAAALFMU58tc217.png" /></p>
<p style="text-indent: 2em;">
可以這樣獲取網(wǎng)站的超鏈接：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3yAb7ArAAALbImHF8A623.png" /></p>
<p style="text-indent: 2em;">
當然，前面的這些例子是直接獲取屬性的方法。</p>
<p style="text-indent: 2em;">
我們注意到xpath返回了一個對象列表，</p>
<p style="text-indent: 2em;">
那么我們也可以直接調(diào)用這個列表中對象的屬性挖掘更深的節(jié)點</p>
<p style="text-indent: 2em;">
（參考：Nesting selectorsandWorking with relative XPathsin theSelectors）：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3yAKXYOAAAFlcs_O2Q945.png" /></p>
<p style="text-indent: 2em;">
3.4xpath實戰(zhàn)</p>
<p style="text-indent: 2em;">
我們用shell做了這么久的實戰(zhàn)，最后我們可以把前面學習到的內(nèi)容應用到dmoz_spider這個爬蟲中。</p>
<p style="text-indent: 2em;">
在原爬蟲的parse函數(shù)中做如下修改：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK32APDm_AABf9RQ21Ug644.png" /></p>
<p style="text-indent: 2em;">
注意，我們從scrapy.selector中導入了Selector類，并且實例化了一個新的Selector對象。這樣我們就可以像Shell中一樣操作xpath了。</p>
<p style="text-indent: 2em;">
我們來試著輸入一下命令運行爬蟲（在tutorial根目錄里面）：</p>
<p style="text-indent: 2em;">
scrapy crawl dmoz</p>
<p style="text-indent: 2em;">
運行結(jié)果如下：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK36Acd2dAAFYpLNs00Y419.png" /></p>
<p style="text-indent: 2em;">
果然，成功的抓到了所有的標題。但是好像不太對啊，怎么Top，Python這種導航欄也抓取出來了呢？</p>
<p style="text-indent: 2em;">
我們只需要紅圈中的內(nèi)容：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK36AOjgYAACr0aW5qJA726.png" /></p>
<p style="text-indent: 2em;">
看來是我們的xpath語句有點問題，沒有僅僅把我們需要的項目名稱抓取出來，也抓了一些無辜的但是xpath語法相同的元素。</p>
<p style="text-indent: 2em;">
審查元素我們發(fā)現(xiàn)我們需要的<ul>具有class='directory-url'的屬性，</p>
<p style="text-indent: 2em;">
那么只要把xpath語句改成sel.xpath('//ul[@class="directory-url"]/li')即可</p>
<p style="text-indent: 2em;">
將xpath語句做如下調(diào)整：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK3-ACJoMAABs7DrGtok960.png" /></p>
<p style="text-indent: 2em;">
成功抓出了所有的標題，絕對沒有濫殺無辜：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK4CAHGdkAAGerLsr9Lo332.png" /></p>
<p style="text-indent: 2em;">
3.5使用Item</p>
<p style="text-indent: 2em;">
接下來我們來看一看如何使用Item。</p>
<p style="text-indent: 2em;">
前面我們說過，Item 對象是自定義的python字典，可以使用標準字典語法獲取某個屬性的值：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK4GASXyKAAAbv4i09k4540.png" /></p>
<p style="text-indent: 2em;">
作為一只爬蟲，Spiders希望能將其抓取的數(shù)據(jù)存放到Item對象中。為了返回我們抓取數(shù)據(jù)，spider的最終代碼應當是這樣:</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK4GASocHAACB7Ri1uLE782.png" /></p>
<p style="text-indent: 2em;">
4.存儲內(nèi)容（Pipeline）</p>
<p style="text-indent: 2em;">
保存信息的最簡單的方法是通過Feed exports，主要有四種：JSON，JSON lines，CSV，XML。</p>
<p style="text-indent: 2em;">
我們將結(jié)果用最常用的JSON導出，命令如下：</p>
<p style="text-indent: 2em;">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK4GAHhJ1AAAJ_lLGWaQ037.png" /></p>
<p style="text-indent: 2em;">
-o 后面是導出文件名，-t 后面是導出類型。</p>
<p style="text-indent: 2em;">
然后來看一下導出的結(jié)果，用文本編輯器打開json文件即可（為了方便顯示，在item中刪去了除了title之外的屬性）：</p>
<p align="center">
<img src="http://file.elecfans.com/web1/M00/7D/BB/pIYBAFwKK4KACVqfAAIE9eyo2bQ297.png" /></p>
<p style="text-indent: 2em;">
因為這個只是一個小型的例子，所以這樣簡單的處理就可以了。</p>
<p style="text-indent: 2em;">
如果你想用抓取的items做更復雜的事情，你可以寫一個 Item Pipeline(條目管道)。</p>
</div>
<div id="kghr5cg" class="statement2">
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問題，請聯(lián)系本站處理。
<a class="complaint handleJumpBy" href="/about/tousu.html" target="_blank">舉報投訴</a>
</div>
<ul class="hot-main clearfix" style="text-align: right; ">
<li data-href="http://www.makelele.cn/tags/python/">
<span>python</span>
<div id="2f65v66" class="hot-des">
<div id="y5om7wb" class="detail">
<div id="iecint5" class="top clearfix">
<div id="oy77w6r" class="lf title">
<a href="http://www.makelele.cn/tags/python" target="_blank">python</a>
</div>
<div id="zyeauih" class="lf attend advertTagId" data-id="42127">+關(guān)注</div>
</div>
<div class="xo75l5k" id="tag_desc_button42127"></div>
<div id="snmgwz7" class="clearfix des-detail">
<div id="mxd577w" class="lf">
<p>關(guān)注</p>
<span>57</span>
</div>
<div id="zaq7hwt" class="lf">
<p>文章</p>
<span>4876</span>
</div>
<div id="kxltriy" class="lf">
<p>瀏覽量</p>
<span>90025</span>
</div>
</div>
</div>
</div>
</li><li data-href="http://www.makelele.cn/tags/爬蟲/">
<span>爬蟲</span>
<div id="titcb7v" class="hot-des">
<div id="jcl6cao" class="detail">
<div id="a6nzh7u" class="top clearfix">
<div id="k7feugo" class="lf title">
<a href="http://www.makelele.cn/tags/爬蟲" target="_blank">爬蟲</a>
</div>
<div id="mjltoxg" class="lf attend advertTagId" data-id="187495">+關(guān)注</div>
</div>
<div class="noexnuv" id="tag_desc_button187495"></div>
<div id="ifabmzz" class="clearfix des-detail">
<div id="6k6dxda" class="lf">
<p>關(guān)注</p>
<span>0</span>
</div>
<div id="5ow7izg" class="lf">
<p>文章</p>
<span>87</span>
</div>
<div id="qm6qtbq" class="lf">
<p>瀏覽量</p>
<span>8091</span>
</div>
</div>
</div>
</div>
</li> </ul>
<!-- 廣告中臺 -->
<div id="ba6c5ln" class="articleContentFooterAD" style="display: none; margin: 20px 0 0 0;"></div>
<div id="7dwumn6" class="wx_detail">
<p>原文標題：爬蟲框架Scrapy的第一個爬蟲示例入門教程</p>
<p>文章出處：【微信號：magedu-Linux，微信公眾號：馬哥Linux運維】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。</p>
</div> </div>
<div id="xzmcsyf" class="art-share-layout mt18" id="shareAddPcb">
<div id="mo6d7ds" class="clearfix">
<a href="javascript:;" class="art-collect J_bottom-coll J_coll-btn" style="visibility:visible">收藏</a>
<span id="obr7gxx" class="ml15 fb"><span id="keghruk" class="J_stownum"></span>人收藏</span>
<div id="j6ustbz" class="bdsharebuttonbox fr">
<div id="od4modp" class="share-web-qrcode--detail fl">
<i class="share-web-qrcode--share-icon"></i>
<div id="g6xl7xa" class="share-web-qrcode--bubble">
<div id="ecavuah" class="share-web-qrcode--bubble-inner">
<p class="qrcode-copy-title">掃一掃，分享給好友</p>
<div id="g3nrass" class="qrcode-image"></div>
<div id="zdnttj2" class="qrcode-copy-link"><span>復制鏈接分享</span></div>
</div>
</div>
</div>
</div>
<div id="q7457vl" class="wx-qrcode-container fr">
<div id="fxdhnac" class="wx-qrcode-tt"><i class="wx-icon"></i>加入交流群</div>
<div id="hdnnxot" class="wx-qrcode-box">
<div id="etklg7c" class="wx-qrcode-img">
<img src="https://staticd.elecfans.com/images/wx_qrcode3.png" alt="微信小助手二維碼">
</div>
<div id="d52ypet" class="wx-qrcode-tips">
<p>掃碼添加小助手</p>
<p>加入工程師交流群</p>
</div>
</div>
</div>
</div>
<a class="art-like-up J_bottom-like J_like-btn" href="javascript:;"></a>
<ul class="art-like-u"></ul>
</div>
<!-- comment Begin -->
<div id="2wwqdpa" class="comment-list detaildzs_list" id="comment">
<h2 class="title2">評論</h2>
</div><!-- comment End -->
<div id="oqfqsn2" class="c-form" id="cForm">
<!-- 未登錄 -->
<p class="c-login special-login">發(fā)布評論請先 <a href="javascript:;">登錄</a></p> </div>
<div id="cfa3yt2" class="recommend-container">
<div id="lwwqilw" class="recommend-tabs">
<div id="upftnhf" class="recommend-tabs_item active" data-value="1">相關(guān)推薦</div>
<div id="3c7njfq" class="recommend-tabs_item" data-value="2">熱點推薦</div>
</div>
<div id="pp22qbo" class="recommend-list-container">
<div id="s22alok" class="recommend-list article-list">
<div id="qep2kh2" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>Python</b>數(shù)據(jù)<b class='flag-5'>爬蟲</b>學習內(nèi)容</a>
</h2>
<div id="dgkxbxc" class="summary">流程來實現(xiàn)的。這個過程其實就是模擬了一個人工瀏覽網(wǎng)頁的過程。<b class='flag-5'>Python</b>中<b class='flag-5'>爬蟲</b>相關(guān)的包很多：urllib、requests、bs4、<b class='flag-5'>scrapy</b>、pyspider 等，我們可以按照requests</div>
<div id="zwi2zmg" class="info">
<span id="ptolgi2" class="fby">發(fā)表于</span> 05-09 17:25 <!-- <span id="ttfyvni" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="qnkjdw6" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>Python</b><b class='flag-5'>爬蟲</b>與Web開發(fā)庫盤點</a>
</h2>
<div id="r5ymiuh" class="summary">的接口,一般我們都是和正則結(jié)合使用，如果對速度有要求的話，建議用lmxp,它比bs4 速度要快很多。2.<b class='flag-5'>Scrapy</b><b class='flag-5'>爬蟲</b>的世界里面有沒有懶人專用的<b class='flag-5'>框架</b>，當然有啦,<b class='flag-5'>scrapy</b>就是其中比</div>
<div id="zrnhlhb" class="info">
<span id="jzzdmiu" class="fby">發(fā)表于</span> 05-10 15:21 <!-- <span id="3ls3xh3" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="lwjc3qd" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>Python</b><b class='flag-5'>爬蟲</b>初學者需要準備什么？</a>
</h2>
<div id="okacrkz" class="summary">了一個人工瀏覽網(wǎng)頁的過程。<b class='flag-5'>Python</b>中<b class='flag-5'>爬蟲</b>相關(guān)的包很多：urllib、requests、bs4、<b class='flag-5'>scrapy</b>、pyspider 等，我們可以按照requests 負責連接網(wǎng)站，返回網(wǎng)頁，Xpath 用于</div>
<div id="avaeh33" class="info">
<span id="63a6vzb" class="fby">發(fā)表于</span> 06-20 17:14 <!-- <span id="z2plxyl" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="rvsuhiw" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b><b class='flag-5'>scrapy</b>包括了以下組件</a>
</h2>
<div id="tok2lt2" class="summary"><b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b><b class='flag-5'>scrapy</b></div>
<div id="q7wjmhi" class="info">
<span id="kdqugq2" class="fby">發(fā)表于</span> 04-03 15:57 <!-- <span id="adb2sv2" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="zxzkghk" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>python</b>學習筆記-安裝<b class='flag-5'>scrapy</b></a>
</h2>
<div id="gblwqch" class="summary">以下是基于<b class='flag-5'>python</b>所寫的一個<b class='flag-5'>爬蟲</b>，因為我曾經(jīng)學過一點<b class='flag-5'>python</b>，所以對所有的東西都會寫的很詳細，同時肯定會有錯的。。如果您在看這個博客，希望你可以指出我的錯誤之處，并且可以提高之處，謝謝。項目</div>
<div id="3vg3osm" class="info">
<span id="fqxic3x" class="fby">發(fā)表于</span> 07-10 07:49 <!-- <span id="o333uqm" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="ckysmgj" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
<b class='flag-5'>Scrapy</b><b class='flag-5'>爬蟲</b>架構(gòu)流程圖詳解</a>
</h2>
<div id="vjc6wmw" class="summary"><b class='flag-5'>Scrapy</b><b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b></div>
<div id="bch3uzi" class="info">
<span id="k33ea3m" class="fby">發(fā)表于</span> 09-25 14:15 <!-- <span id="cg33wil" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="bvyuz2e" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
使用<b class='flag-5'>scrapy</b>-Redis的<b class='flag-5'>爬蟲</b>項目</a>
</h2>
<div id="2suodzs" class="summary"><b class='flag-5'>scrapy</b>-Redis分布式<b class='flag-5'>爬蟲</b></div>
<div id="e3xixgj" class="info">
<span id="q3kfzlu" class="fby">發(fā)表于</span> 03-24 10:24 <!-- <span id="gruv3mz" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="cxtnhb3" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
Ubuntu 1604后臺如何運行<b class='flag-5'>scrapy</b><b class='flag-5'>爬蟲</b>程序</a>
</h2>
<div id="hwqkxju" class="summary">Ubuntu 1604后臺運行<b class='flag-5'>scrapy</b><b class='flag-5'>爬蟲</b>程序</div>
<div id="mg3v3ak" class="info">
<span id="ouzswrd" class="fby">發(fā)表于</span> 05-25 12:32 <!-- <span id="zqdzlgj" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="2yc3nsf" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
如何通過網(wǎng)頁開啟<b class='flag-5'>scrapy</b><b class='flag-5'>爬蟲</b>？</a>
</h2>
<div id="kfzlxad" class="summary">通過網(wǎng)頁開啟<b class='flag-5'>scrapy</b><b class='flag-5'>爬蟲</b>，scrapydganjo結(jié)合</div>
<div id="t3uwsxk" class="info">
<span id="eknlpku" class="fby">發(fā)表于</span> 06-05 15:56 <!-- <span id="vau22os" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="ybea2dg" class="article" style="padding-left: 0px;">
<h2 class="title">
<a target="_blank" >
0基礎(chǔ)入門<b class='flag-5'>Python</b><b class='flag-5'>爬蟲</b><b class='flag-5'>實戰(zhàn)</b>課</a>
</h2>
<div id="2apaybo" class="summary">學習資料良莠不齊<b class='flag-5'>爬蟲</b>是一門實踐性的技能，沒有<b class='flag-5'>實戰(zhàn)</b>的課程都是騙人的！所以這節(jié)<b class='flag-5'>Python</b><b class='flag-5'>爬蟲</b><b class='flag-5'>實戰(zhàn)</b>課，將幫到你！課程從0基礎(chǔ)入門開始，受眾人群廣</div>
<div id="5amxrea" class="info">
<span id="ux6yhwi" class="fby">發(fā)表于</span> 07-25 09:28 <!-- <span id="uoz2jd2" class="art_click_count" data-id=""></span>次閱讀 -->
</div>
</div> <div id="ohkaxlj" class="article" >
<h2 class="title">
<a href="http://www.makelele.cn/soft/study/net/2017/20171207596641.html" target="_blank" >
基于<b class='flag-5'>Scrapy</b>的<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>的Web應用程序漏洞檢測方法</a>
</h2>
<div id="pmgi3pq" class="summary">不斷提高和完善防御的方法和手段。針對此問題，提出了一種基于<b class='flag-5'>Scrapy</b>的<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>的Web應用程序漏洞檢測方法。通過<b class='flag-5'>框架</b>提供的便利條件對頁面進行提取分析，根據(jù)不同的攻擊方式生成特有的攻擊</div>
<div id="wmaufbn" class="info">
<span id="3ztpsxa" class="fby">發(fā)表于</span> 12-07 09:48 <!-- <span id="pkuxcfo" class="art_click_count" data-id=""></span>次閱讀 -->
<span id="fr3dgst" class="sp">?</span><span id="quo7mpv" class="" data-id="">2</span>次下載 </div>
<a href="http://www.makelele.cn/soft/study/net/2017/20171207596641.html" class="thumb" target="_blank">
<img src="https://file.elecfans.com/web2/M00/49/75/poYBAGKhwLiAcn8PAAASbfjQZZM951.jpg" alt="基于<b class='flag-5'>Scrapy</b>的<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>的Web應用程序漏洞檢測方法" /> </a>
</div> <div id="vhc2w7v" class="article" style="padding-left: 0px;">
<h2 class="title">
<a href="http://www.makelele.cn/d/889110.html" target="_blank" >
<b class='flag-5'>python</b><b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>有哪些</a>
</h2>
<div id="b23pvq3" class="summary">本視頻主要詳細介紹了<b class='flag-5'>python</b><b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>有哪些，分別是Django、CherryPy、Web2py、TurboGears、Pylons、Grab、BeautifulSoup、Cola。</div>
<div id="6gt2idw" class="info">
<a class="face s" href="" target="_blank" rel="nofollow">
<img src="" alt="的頭像"/>
</a> <span id="7mq2glu" class="fby">發(fā)表于</span> 03-22 16:13 <!-- <span id="uxafinz" class="art_click_count" data-id=""></span>次閱讀 -->
<span id="qwydjdg" class="sp">?</span><span id="li3pbog" class="" data-id="">7453</span>次閱讀 </div>
</div> <div id="zsd33tn" class="article" style="padding-left: 0px;">
<h2 class="title">
<a href="http://www.makelele.cn/d/1436835.html" target="_blank" >
windows下如何新建<b class='flag-5'>爬蟲</b>虛擬環(huán)境和進行<b class='flag-5'>Scrapy</b>安裝</a>
</h2>
<div id="e3psvan" class="summary"><b class='flag-5'>Scrapy</b>是<b class='flag-5'>Python</b>開發(fā)的一個快速、高層次的屏幕抓取和web抓取<b class='flag-5'>框架</b>，用于抓取web站點并從頁面中提取結(jié)構(gòu)化的數(shù)據(jù)。<b class='flag-5'>Scrapy</b>吸引人的地方在于它是一個</div>
<div id="qv3ptuh" class="info">
<a class="face s" href="" target="_blank" rel="nofollow">
<img src="" alt="的頭像"/>
</a> <span id="e3pbnw3" class="fby">發(fā)表于</span> 12-25 18:03 <!-- <span id="jd33i3z" class="art_click_count" data-id=""></span>次閱讀 -->
<span id="ytuqvni" class="sp">?</span><span id="akx3gj3" class="" data-id="">922</span>次閱讀 </div>
</div> <div id="633z3zl" class="article" >
<h2 class="title">
<a href="http://www.makelele.cn/d/2018353.html" target="_blank" >
<b class='flag-5'>Scrapy</b>怎么爬取<b class='flag-5'>Python</b>文件</a>
</h2>
<div id="fkvhumy" class="summary">我們介紹了<b class='flag-5'>Scrapy</b><b class='flag-5'>框架</b>運行基本原理,緊接著我們介紹了如何利用<b class='flag-5'>Scrapy</b>爬取文本數(shù)據(jù)</div>
<div id="nbeh3cw" class="info">
<a class="face s" href="" target="_blank" rel="nofollow">
<img src="" alt="的頭像"/>
</a> <span id="6sx3yu2" class="fby">發(fā)表于</span> 02-24 15:16 <!-- <span id="3lmh3ke" class="art_click_count" data-id=""></span>次閱讀 -->
<span id="hvqrfzv" class="sp">?</span><span id="2mfzwi3" class="" data-id="">1293</span>次閱讀 </div>
<a href="http://www.makelele.cn/d/2018353.html" class="thumb" target="_blank">
<img src="https://file.elecfans.com/web2/M00/93/A9/poYBAGP4Y_6AB05JAAFNTAiOhI4194.jpg" alt="<b class='flag-5'>Scrapy</b>怎么爬取<b class='flag-5'>Python</b>文件" /> </a>
</div> <div id="b333j3e" class="article" style="padding-left: 0px;">
<h2 class="title">
<a href="http://www.makelele.cn/d/2299204.html" target="_blank" >
feapder：一款功能強大的<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b></a>
</h2>
<div id="yt3ymf3" class="summary">今天推薦一款更加簡單、輕量級，且功能強大的<b class='flag-5'>爬蟲</b><b class='flag-5'>框架</b>：feapder 項目地址： https://github.com/Boris-code/feapder 2. 介紹及安裝 和 <b class='flag-5'>Scrapy</b> 類似</div>
<div id="d33btrs" class="info">
<a class="face s" href="" target="_blank" rel="nofollow">
<img src="" alt="的頭像"/>
</a> <span id="bfoivh3" class="fby">發(fā)表于</span> 11-01 09:48 <!-- <span id="cmglejs" class="art_click_count" data-id=""></span>次閱讀 -->
<span id="dhzkhrs" class="sp">?</span><span id="v75zits" class="" data-id="">2228</span>次閱讀 </div>
</div> </div>
<div id="jat227b" class="recommend-list qyh-list"></div>
</div>
</div>
</div><!-- .main-wrap -->
</article>
<aside class="aside">
<input type="hidden" name="zl_mp" value="1">
<div id="cjlp3fx" class="author-box">
<div id="k3uzwqu" class="author">
<div id="2snqvpa" class="author-msg">
<a href="/d/user/2737481/" class="face" target="_blank"><img src="https://bbs.elecfans.com/uc_server/data/avatar/002/73/74/81_avatar_big.jpg"/></a> <h2 class="author-msg-name"><a href="/d/user/2737481/" target="_blank">馬哥Linux運維</a></h2>
<!-- 需要條件判斷 -->
<span id="dxqkysv" class="is-coulmn-author">專欄</span>
</div>
<div id="deb3erd" class="count">
<span id="c3nhfi3" class="count-item">
<span id="lvqlpsm" class="column-article-count">0</span>
<b>文章</b>
</span>
<span id="dgcwzvp" class="count-item">
<span id="pl33kw2" class="column-view-count">0</span>
<b>閱讀</b>
</span>
<span id="ux3hkn3" class="count-item">
<span id="keoavyb" class="column-follow-count">0</span>
<b>粉絲</b>
</span>
<span id="dqtdg3n" class="count-item">
<span id="fskrumy" class="column-praise-count">0</span>
<b>點贊</b>
</span>
</div>
<div id="l3ztfju" class="author-opreat">
<a class="author-collect" id="follow">關(guān)注</a> <a href="http://www.makelele.cn/d/user/2737481/" title="***的空間" target="_blank">個人主頁</a> <!-- 需要條件判斷 -->
</div>
<!-- <span id="ntuftnh" class="followNum">
<strong>61</strong>人關(guān)注
</span> -->
</div>
<div id="niuwsko" class="author-recom">
<ul class="author-recom-list">
<li id="kvg3bvy" class="author-recom-item">
<span id="bdxifib" class="author-recom-type-hot">Hot</span>
<a href=http://www.makelele.cn/d/6732512.html>PXE高效批量網(wǎng)絡(luò)裝機教程</a>
</li><li id="dyc3yi3" class="author-recom-item">
<span id="gws3upl" class="author-recom-type-hot">Hot</span>
<a href=http://www.makelele.cn/d/716931.html>Linux如何使用XFS?</a>
</li>
<li id="j3wtfgs" class="author-recom-item">
<span id="fkpqk3g" class="author-recom-type-new">New</span>
<a href=http://www.makelele.cn/d/7732403.html>TiDB分布式數(shù)據(jù)庫運維實踐</a>
</li><li id="fg3n3c2" class="author-recom-item">
<span id="gafznyq" class="author-recom-type-new">New</span>
<a href=http://www.makelele.cn/d/7732385.html>MySQL數(shù)據(jù)庫備份恢復方式對比</a>
</li> </ul>
</div>
</div>
<div class="w3nhsvg" id="new-adsm-berry" ></div>
<div class="bxikea3" id="new-company-berry"></div>
<!-- 推薦文章【主站文章顯示這個】 -->
<div id="tfzmoaq" class="aside-section">
<div id="nlvpdp3" class="aside-section-head">
<h3 class="aside-section-name">精選推薦</h3>
<a class="aside-section-more" id="recMore" href="http://www.makelele.cn/d/">更多<i class="arrow_right"></i></a>
</div>
<div id="udeiwol" class="aside-section-body">
<ul class="article-rec-tabs">
<li data-index="0" class="is-active">文章</li> <li data-index="2" >資料</li> <li data-index="3" >帖子</li> </ul>
<!-- 文章默認展示 start -->
<ul class="article-rec-content is-active">
<li id="dorlq7x" class="article-rec-item">
<div id="jufivxj" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/d/7734718.html" target="_blank">
<span>匠芯創(chuàng)D213ECV實現(xiàn)PicoClaw極簡部署（附體驗過程）</span>
</a>
</h4>
<div id="j2cysvv" class="text-content">
<a class="text-name" href="http://www.makelele.cn/d/c5865747" target="_blank">匠芯創(chuàng)ArtInChip</a>
<div id="dnhmfad" class="text-date">18小時前</div>
<div id="w2kwcob" class="text-view">776 閱讀</div>
</div>
</div>
</li><li id="kgrl2ws" class="article-rec-item">
<div id="eg2hrxb" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/d/7734565.html" target="_blank">
<span>從點云到圖像級！華為新一代896線激光雷達來襲，分辨率提升4倍</span>
</a>
</h4>
<div id="mqkgawi" class="text-content">
<a class="text-name" href="http://www.makelele.cn/d/user/2351591/" target="_blank">章鷹觀察</a>
<div id="7wsobuy" class="text-date">12小時前</div>
<div id="zbxh3qc" class="text-view">1450 閱讀</div>
</div>
</div>
</li><li id="ixjmqor" class="article-rec-item">
<div id="oggpy3i" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/d/7734122.html" target="_blank">
<span>睿擎派3562快速上手體驗</span>
</a>
</h4>
<div id="fblepjv" class="text-content">
<a class="text-name" href="http://www.makelele.cn/d/c6361260" target="_blank">RT-Thread官方賬號</a>
<div id="dfjaq7b" class="text-date">1天前</div>
<div id="yvnrn7z" class="text-view">856 閱讀</div>
</div>
</div>
</li><li id="pjeg3bn" class="article-rec-item">
<div id="s3hznos" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/d/7734068.html" target="_blank">
<span>MWC2026:6G狂飆！華為、高通、英偉達等五大巨頭，亮出哪些突破性技術(shù)</span>
</a>
</h4>
<div id="ysxgdyb" class="text-content">
<a class="text-name" href="http://www.makelele.cn/d/user/2351591/" target="_blank">章鷹觀察</a>
<div id="hvxk33y" class="text-date">19小時前</div>
<div id="mhk3o3h" class="text-view">2342 閱讀</div>
</div>
</div>
</li><li id="7gregcn" class="article-rec-item">
<div id="dfbcjvg" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/d/7733990.html" target="_blank">
<span>中科芯CKS32F107XX系列MCU的以太網(wǎng)介紹（二）</span>
</a>
</h4>
<div id="mqunjzv" class="text-content">
<a class="text-name" href="http://www.makelele.cn/d/user/5136348/" target="_blank">中科芯MCU</a>
<div id="eilympb" class="text-date">18小時前</div>
<div id="t2ruzse" class="text-view">1223 閱讀</div>
</div>
</div>
</li> </ul> <!-- 文章 end -->
<!-- 方案默認展示 start -->
<!-- 方案 end -->
<ul class="article-rec-content"> <li id="wkqsnzl" class="article-rec-item">
<div id="cie3z2x" class="col-left">
<div id="igcfnax" class="icon-type pdf"></div>
</div>
<div id="emz3hz3" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/soft/35/2011/20110804208546.html" target="_blank">
<span>VHDL程序?qū)嵗?/span>
</a>
</h4>
<div id="nmecx33" class="text-content">
<a class="text-name" target="_blank">暗夜龍之吻</a>
<div id="33e3iso" class="text-date">2.86 MB</div>
<div id="hdehvis" class="text-date">免費</div>
<div id="amejchs" class="text-down">0下載</div>
</div>
</div>
</li><li id="3n3apy3" class="article-rec-item">
<div id="vhbmqte" class="col-left">
<div id="33grfza" class="icon-type pdf"></div>
</div>
<div id="chsmytw" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/soft/35/2011/20110822211386.html" target="_blank">
<span>電路設(shè)計技術(shù)與技巧_周玉坤</span>
</a>
</h4>
<div id="spiuxid" class="text-content">
<a class="text-name" target="_blank">黃靈智</a>
<div id="3wsmjbm" class="text-date">19.4 MB</div>
<div id="ma33y3v" class="text-date">免費</div>
<div id="2ht33pn" class="text-down">0下載</div>
</div>
</div>
</li><li id="pazadxr" class="article-rec-item">
<div id="de3knob" class="col-left">
<div id="icor33x" class="icon-type zip"></div>
</div>
<div id="eybeady" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/soft/Mec/2022/202205311842788.html" target="_blank">
<span>Green Recorder Linux簡易錄屏軟件</span>
</a>
</h4>
<div id="ug3l3j2" class="text-content">
<a class="text-name" target="_blank">李丹</a>
<div id="lmglmgs" class="text-date">0.05 MB</div>
<div id="k3xy3sy" class="text-date">2積分</div>
<div id="eosvgjv" class="text-down">3下載</div>
</div>
</div>
</li><li id="7wqd3fb" class="article-rec-item">
<div id="wsv33dm" class="col-left">
<div id="dxinysv" class="icon-type zip"></div>
</div>
<div id="d3p3v3g" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/soft/Mec/2022/202206161849145.html" target="_blank">
<span>MOS輕量級游戲引擎</span>
</a>
</h4>
<div id="ftnyjeh" class="text-content">
<a class="text-name" target="_blank">卞輪輝</a>
<div id="wrum3bm" class="text-date">1.55 MB</div>
<div id="7cic3hb" class="text-date">2積分</div>
<div id="73isvhu" class="text-down">1下載</div>
</div>
</div>
</li><li id="f3lhbk3" class="article-rec-item">
<div id="coc3yaw" class="col-left">
<div id="lobcjdv" class="icon-type zip"></div>
</div>
<div id="fl3ei3b" class="col-right">
<h4 class="text-title">
<a href="http://www.makelele.cn/soft/Mec/2022/202206221851560.html" target="_blank">
<span>mGBA Game Boy高級模擬器</span>
</a>
</h4>
<div id="chu33lm" class="text-content">
<a class="text-name" target="_blank">陳杰</a>
<div id="lo3txal" class="text-date">14.71 MB</div>
<div id="tyeipql" class="text-date">2積分</div>
<div id="wrlqdmy" class="text-down">3下載</div>
</div>
</div>
</li> </ul> <!-- 資料 end -->
<!-- 帖子默認展示 start -->
<ul class="article-rec-content"> <li id="lorlzip" class="article-rec-item">
<div id="3frsxbv" class="col-right">
<h4 class="text-title">
<a target="_blank">
<span>【飛凌嵌入式RV1126B開發(fā)板】+基本功能測試篇（1）</span>
</a>
</h4>
<div id="ptuxlw3" class="text-content">
<a class="text-name" target="_blank">jennyzhaojie</a>
<div id="h3vrbmh" class="text-date">1天前</div>
<div id="iuo3zcx" class="text-view">130 閱讀</div>
</div>
</div>
</li><li id="gcxieyb" class="article-rec-item">
<div id="bo33keq" class="col-right">
<h4 class="text-title">
<a target="_blank">
<span>【飛凌嵌入式RV1126B開發(fā)板】+初識篇</span>
</a>
</h4>
<div id="2eamk3f" class="text-content">
<a class="text-name" target="_blank">jennyzhaojie</a>
<div id="eh3nwi3" class="text-date">2天前</div>
<div id="3b3iuoh" class="text-view">172 閱讀</div>
</div>
</div>
</li><li id="eyb33wq" class="article-rec-item">
<div id="vhsey3u" class="col-right">
<h4 class="text-title">
<a target="_blank">
<span>樹莓派5還是香橙派5 Pro？兩款熱門開發(fā)板的詳細對比</span>
</a>
</h4>
<div id="bor3nhb" class="text-content">
<a class="text-name" target="_blank">行走的小派</a>
<div id="ytgidgr" class="text-date">2天前</div>
<div id="spanhsm" class="text-view">466 閱讀</div>
</div>
</div>
</li><li id="gjfocdy" class="article-rec-item">
<div id="3lnyse3" class="col-right">
<h4 class="text-title">
<a target="_blank">
<span>OrangePi RV2 深度技術(shù)評測：RISC-V AI融合架構(gòu)的先行者</span>
</a>
</h4>
<div id="ze3xluo" class="text-content">
<a class="text-name" target="_blank">行走的小派</a>
<div id="3tzifoi" class="text-date">3天前</div>
<div id="o3fxmhz" class="text-view">816 閱讀</div>
</div>
</div>
</li><li id="xfqcwp3" class="article-rec-item">
<div id="ze3cdzu" class="col-right">
<h4 class="text-title">
<a target="_blank">
<span>lab view NI6003搭建電路</span>
</a>
</h4>
<div id="gknrlx3" class="text-content">
<a class="text-name" target="_blank">jf_73763743</a>
<div id="s3fzjuf" class="text-date">3天前</div>
<div id="3tnicfq" class="text-view">811 閱讀</div>
</div>
</div>
</li> </ul> <!-- 帖子 end -->
<!-- 視頻 start -->
<!-- 視頻 end -->
<!-- 話題 start -->
<!-- 話題 end -->
</div>
</div>
<!-- <div class="t3yjv3z" id="new-company-zone"></div> -->
<div class="2xiamxs" id="new-course-berry" ></div>
<!-- 推薦專欄 -->
<div id="oioror7" class="aside-section dzs-article-column">
<div id="j3mytnr" class="aside-section-head">
<h3 class="aside-section-name">推薦專欄</h3>
<a class="aside-section-more" href="http://www.makelele.cn/d/column">更多<i class="arrow_right"></i></a>
</div>
<div id="a2ug2s2" class="aside-section-body">
<ul class="dzs-article-column-list"></ul>
</div>
</div> <div class="vr2s2in" id="new-webinar-berry"></div>
<div id="iivxgxb" class="qyh-container">
<div id="izvjwln" class="qyh-tabs">
<div id="slojvz2" class="qyh-tabs_item active">企業(yè)產(chǎn)品</div>
<div id="ai7hdwb" class="qyh-tabs_item">資料</div>
<div id="7wid2an" class="qyh-tabs_item">方案</div>
<a class="qyh-more" target="_blank">更多<i class="soft-more"></a>
</div>
<div id="jdhtd2o" class="qyh-list">
<div id="dxcztfi" class="qyh-type-list qyh-product-list active">
</div>
<div id="uocnyco" class="qyh-type-list qyh-soft-list"></div>
<div id="svd3tvp" class="qyh-type-list qyh-scheme-list"></div>
</div>
</div>
<div class="wmru2zk" id="IndexRightBottom"></div>
</aside>
</section>
<!-- Page #content End -->
<input type="hidden" name="aid" id="webID" value="828560">
<!-- $article['store_flag'] = 15 為企業(yè)號 -->
<input type="hidden" class="store_flag" value="0">
<input type="hidden" class="evip_type" value="0">
<!--企業(yè)號文章id -->
<input type="hidden" class="evip_article_id" value="">
<!-- 企業(yè)號id -->
<input type="hidden" class="evip_id" value="">
<!--- 企業(yè)號是否付費1-是 0-否 --->
<input type="hidden" name="isPayEvip" class="isPayEvip" value="0">
<input type="hidden" class="vip-limit-read" value="0">
<input type="hidden" id="headerType" value="data">
<input type="hidden" id="details_right_hero" value="true">
<input type="hidden" id="currentUserID" value="" />
<div id="vcngoy7" class="gather-bottom"></div>
<link rel="stylesheet" href="/static/footer/footer.css?20230919" />
<div id="n67ag6l" class="public-footer">
<div id="yjfrdyt" class="public-footer__hd">
<dl>
<dd>電子發(fā)燒友</dd>
</dl>
<dl>
<dd><a target="_blank" rel="nofollow">My ElecFans </a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/app/"> APP </a></li>
<dd><a target="_blank" href="http://www.makelele.cn/about/sitemap.html">網(wǎng)站地圖</a></dd>
</dl>
</div>
<div id="z7tmojq" class="public-footer__main">
<dl>
<dt>設(shè)計技術(shù)</dt>
<dd><a href="http://www.makelele.cn/pld/" target="_blank">可編程邏輯</a></dd>
<dd><a href="http://www.makelele.cn/article/83/" target="_blank">電源/新能源</a></dd>
<dd><a href="http://www.makelele.cn/article/88/142/" target="_blank">MEMS/傳感技術(shù)</a></dd>
<dd><a href="http://www.makelele.cn/article/85/" target="_blank">測量儀表</a></dd>
<dd><a href="http://www.makelele.cn/emb/" target="_blank">嵌入式技術(shù)</a></dd>
<dd><a href="http://www.makelele.cn/article/90/155/" target="_blank">制造/封裝</a></dd>
<dd><a href="http://www.makelele.cn/analog/" target="_blank">模擬技術(shù)</a></dd>
<dd><a href="http://www.makelele.cn/tongxin/rf/" target="_blank">RF/無線</a></dd>
<dd><a href="http://www.makelele.cn/emb/jiekou/" target="_blank">接口/總線/驅(qū)動</a></dd>
<dd><a href="http://www.makelele.cn/emb/dsp/" target="_blank">處理器/DSP</a></dd>
<dd><a href="http://www.makelele.cn/bandaoti/eda/" target="_blank">EDA/IC設(shè)計</a></dd>
<dd><a href="http://www.makelele.cn/consume/cunchujishu/" target="_blank">存儲技術(shù)</a></dd>
<dd><a href="http://www.makelele.cn/xianshi/" target="_blank">光電顯示</a></dd>
<dd><a href="http://www.makelele.cn/emc_emi/" target="_blank">EMC/EMI設(shè)計</a></dd>
<dd><a href="http://www.makelele.cn/connector/" target="_blank">連接器</a></dd>
</dl>
<dl>
<dt>行業(yè)應用</dt>
<dd><a href="http://www.makelele.cn/led/" target="_blank">LEDs </a></dd>
<dd><a href="http://www.makelele.cn/qichedianzi/" target="_blank">汽車電子</a></dd>
<dd><a href="http://www.makelele.cn/video/" target="_blank">音視頻及家電</a></dd>
<dd><a href="http://www.makelele.cn/tongxin/" target="_blank">通信網(wǎng)絡(luò)</a></dd>
<dd><a href="http://www.makelele.cn/yiliaodianzi/" target="_blank">醫(yī)療電子</a></dd>
<dd><a href="http://www.makelele.cn/rengongzhineng/" target="_blank">人工智能</a></dd>
<dd><a href="http://www.makelele.cn/vr/" target="_blank">虛擬現(xiàn)實</a></dd>
<dd><a href="http://www.makelele.cn/wearable/" target="_blank">可穿戴設(shè)備</a></dd>
<dd><a href="http://www.makelele.cn/jiqiren/" target="_blank">機器人</a></dd>
<dd><a href="http://www.makelele.cn/application/Security/" target="_blank">安全設(shè)備/系統(tǒng)</a></dd>
<dd><a href="http://www.makelele.cn/application/Military_avionics/" target="_blank">軍用/航空電子</a></dd>
<dd><a href="http://www.makelele.cn/application/Communication/" target="_blank">移動通信</a></dd>
<dd><a href="http://www.makelele.cn/kongzhijishu/" target="_blank">工業(yè)控制</a></dd>
<dd><a href="http://www.makelele.cn/consume/bianxiedianzishebei/" target="_blank">便攜設(shè)備</a></dd>
<dd><a href="http://www.makelele.cn/consume/chukongjishu/" target="_blank">觸控感測</a></dd>
<dd><a href="http://www.makelele.cn/iot/" target="_blank">物聯(lián)網(wǎng)</a></dd>
<dd><a href="http://www.makelele.cn/dianyuan/diandongche_xinnenyuan/" target="_blank">智能電網(wǎng)</a></dd>
<dd><a href="http://www.makelele.cn/blockchain/" target="_blank">區(qū)塊鏈</a></dd>
<dd><a href="http://www.makelele.cn/xinkeji/" target="_blank">新科技</a></dd>
</dl>
<dl>
<dt>特色內(nèi)容</dt>
<dd><a href="http://www.makelele.cn/d/column/" target="_blank">專欄推薦</a></dd>
<dd><a target="_blank" >學院</a></dd>
<dd><a target="_blank" >設(shè)計資源</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/technical/">設(shè)計技術(shù)</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/baike/">電子百科</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/dianzishipin/">電子視頻</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/yuanqijian/">元器件知識</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/tools/">工具箱</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/vip/#choose">VIP會員</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/article/special/">最新技術(shù)文章</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/p/eda/category">產(chǎn)品地圖</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/p/eda/supplier">品牌地圖</a></dd>
</dl>
<dl>
<dt>社區(qū)</dt>
<dd><a target="_blank" >小組</a></dd>
<dd><a target="_blank" >論壇</a></dd>
<dd><a target="_blank" >問答</a></dd>
<dd><a target="_blank" >評測試用</a></dd>
<dt><a target="_blank" >企業(yè)服務(wù)</a></dt>
<dd><a target="_blank" >產(chǎn)品</a></dd>
<dd><a target="_blank" >資料</a></dd>
<dd><a target="_blank" >文章</a></dd>
<dd><a target="_blank" >方案</a></dd>
<dd><a target="_blank" >企業(yè)</a></dd>
</dl>
<dl>
<dt>供應鏈服務(wù)</dt>
<dd><a target="_blank" href="http://www.makelele.cn/kf/">硬件開發(fā)</a></dd>
<dt>媒體服務(wù)</dt>
<dd><a target="_blank" href="http://www.makelele.cn/about/service.html">網(wǎng)站廣告</a></dd>
<dd><a target="_blank" >在線研討會</a></dd>
<dd><a target="_blank" >活動策劃</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/news/">新聞發(fā)布</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/xinpian/ic/">新品發(fā)布</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/quiz/">小測驗</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/contest/">設(shè)計大賽</a></dd>
</dl>
<dl>
<dt>電子發(fā)燒友</dt>
<dd><a target="_blank" href="http://www.makelele.cn/about/" rel="nofollow">關(guān)于我們</a></dd>
<dd><a target="_blank" href="http://www.makelele.cn/about/contact.html" rel="nofollow">聯(lián)系我們</a></dd>
<dd><a target="_blank" href="/about/tousu.html" rel="nofollow">舉報投訴</a></dd>
<dt>社交網(wǎng)絡(luò)</dt>
<dd><a target="_blank" rel="nofollow">微博</a></dd>
<dt>移動端</dt>
<dd><a target="_blank" href="http://www.makelele.cn/app/">發(fā)燒友APP</a></dd>
<dd><a target="_blank" >WAP</a></dd>
</dl>
<dl>
<dt>聯(lián)系我們</dt>
<dd class="small_tit">廣告合作</dd>
<dd>王婉珠：<a href="mailto:wangwanzhu@elecfans.com">wangwanzhu@elecfans.com</a></dd>
<dd class="small_tit split_10">內(nèi)容合作</dd>
<dd>張迎輝：<a href="mailto:mikezhang@elecfans.com" class="small_tit">mikezhang@elecfans.com</a></dd>
</dl>
<ul class="qr-code">
<li>
<p>關(guān)注我們的微信</p>
<img src="/static/main/img/elecfans_code.jpg" alt="關(guān)注我們的微信" />
</li>
<li>
<p>下載發(fā)燒友APP</p>
<img src="/static/main/img/elec_app_code.jpg" alt="下載發(fā)燒友APP" />
</li>
<li>
<p>電子發(fā)燒友觀察</p>
<img src="/static/main/img/elec_focus_code.jpg" alt="電子發(fā)燒友觀察" />
</li>
</ul>
</div>
<div id="qruz3jb" class="public-footer__copyright">
<p>版權(quán)所有 ? 長沙勒克斯教育咨詢有限公司 </p>
<p>湖南省長沙市開福區(qū)月湖街道匍園路20號聚恒科技園1棟2301-1房</p>
<a href="http://www.makelele.cn/">電子發(fā)燒友</a>
<a href="http://www.makelele.cn/" target="_blank"><strong>（電路圖）</strong></a>
<a target="_blank" rel="nofollow">湘公網(wǎng)安備43011202000918</a>
<!-- <a href="http://www.makelele.cn/about/edi.html" target="_blank">電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證：合字B2-20210191</a> -->
<a target="_blank" rel="nofollow">
<img src="http://skin.elecfans.com/images/ebsIcon.png" alt="工商網(wǎng)監(jiān)認證">工商網(wǎng)監(jiān)
</a>
<a target="_blank" rel="nofollow">湘ICP備2023036445號-105-1</a>
</div>
</div>
<div><input type="hidden" value="0" name="arc_relate_vid"></div>
<link rel="stylesheet" href="/webapi/public/project/idt/iconfont/iconfont.css">
<footer>
<div class="friendship-link">
<p>感谢您访问我们的网站，您可能还对以下资源感兴趣：</p>
<a href="http://www.makelele.cn/" title="91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级">91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级</a>
<div class="friend-links">
<a href="http://www.piygc.cn">国产操人视频在线|亚洲欧美第一区第二区在线视频观看|日本A片在线看一级无码片|sese国产sy导航|久久国产老熟女按摩AV|久久无码最新视频|免费靥色AV在线青草热|亚洲AV无码乱码一区二三区|成人免费在线A片|一级片在线免费天天久久</a>
<a href="http://www.lf920.cn">97亚洲国产怡红啊AV|a片大全免费在线观看|在线能看的黄色视频网站|日韩精品国模成人午夜福利|AV毛片在线看三级片黄片免费|日韩成人av在线观看|日本不卡小说欧美一区大毛片|超碰人妻AV在线|日韩精妻视频美日韩性爱|手机看片日韩一区二区</a>
<a href="http://www.cdow.cn">图片一区中文字幕亚洲|国产在线一区二区三区有字幕|黄色影片无码五月亭AV|日韩一级久久视频|人人爱人人操人人爱|亚洲av激情电影|日韩一区二区三区制服师生中出|动漫五码中文字幕|日韩人妻精品中文字幕专区不卡|成人伦理Av一级一级a片</a>
</div>
</div>
</footer>
<script>
(function(){
var bp = document.createElement('script');
var curProtocol = window.location.protocol.split(':')[0];
if (curProtocol === 'https') {
bp.src = 'https://zz.bdstatic.com/linksubmit/push.js';
}
else {
bp.src = 'http://push.zhanzhang.baidu.com/push.js';
}
var s = document.getElementsByTagName("script")[0];
s.parentNode.insertBefore(bp, s);
})();
</script>
</body><div id="okler" class="pl_css_ganrao" style="display: none;"><center id="okler"><tfoot id="okler"></tfoot></center><rt id="okler"></rt><tbody id="okler"><tbody id="okler"><menuitem id="okler"></menuitem></tbody></tbody><code id="okler"></code><dfn id="okler"><em id="okler"><fieldset id="okler"></fieldset></em></dfn><nav id="okler"></nav><nobr id="okler"></nobr><thead id="okler"><source id="okler"><th id="okler"><strike id="okler"></strike></th></source></thead><thead id="okler"></thead><listing id="okler"><small id="okler"></small></listing><sup id="okler"></sup><tt id="okler"><dfn id="okler"></dfn></tt><style id="okler"><li id="okler"><span id="okler"><pre id="okler"></pre></span></li></style><td id="okler"></td><label id="okler"><output id="okler"><strike id="okler"></strike></output></label><label id="okler"></label><style id="okler"><rp id="okler"><span id="okler"><tbody id="okler"></tbody></span></rp></style><strong id="okler"></strong><sub id="okler"></sub><address id="okler"><label id="okler"><center id="okler"><fieldset id="okler"></fieldset></center></label></address><ol id="okler"><rp id="okler"></rp></ol><rp id="okler"><thead id="okler"><table id="okler"></table></thead></rp><td id="okler"></td><strike id="okler"><u id="okler"><tbody id="okler"></tbody></u></strike><progress id="okler"><dfn id="okler"></dfn></progress><th id="okler"></th><abbr id="okler"></abbr><sub id="okler"><style id="okler"><button id="okler"></button></style></sub><ins id="okler"></ins><dfn id="okler"><menuitem id="okler"><s id="okler"></s></menuitem></dfn><dl id="okler"><video id="okler"></video></dl><sup id="okler"></sup><xmp id="okler"></xmp><form id="okler"></form><listing id="okler"><sub id="okler"><cite id="okler"><rp id="okler"></rp></cite></sub></listing><ruby id="okler"><dl id="okler"></dl></ruby><strong id="okler"><sub id="okler"><code id="okler"><rp id="okler"></rp></code></sub></strong><progress id="okler"></progress><span id="okler"></span><rt id="okler"></rt><optgroup id="okler"></optgroup><bdo id="okler"></bdo><tt id="okler"></tt><th id="okler"></th><video id="okler"><legend id="okler"><small id="okler"><em id="okler"></em></small></legend></video><li id="okler"></li><acronym id="okler"><source id="okler"><track id="okler"></track></source></acronym><delect id="okler"></delect><nobr id="okler"></nobr><tr id="okler"><small id="okler"></small></tr></div>
</html> 
python爬蟲框架Scrapy實戰(zhàn)案例！
