97人妻无码免费视频一区,中文字幕亚洲一区二区无码伊人

內(nèi)容簡(jiǎn)介

　　互聯(lián)網(wǎng)上存在著大量值得收集的公共信息，而爬蟲(chóng)技術(shù)就是獲取這些公共信息的主要工具。《Python網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架）》以主流的Scrapy爬蟲(chóng)框架為例，介紹了Python網(wǎng)絡(luò)爬蟲(chóng)的組成、爬蟲(chóng)框架的使用以及分布式爬蟲(chóng)等內(nèi)容?！禤ython網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架）》運(yùn)用了大量案例和實(shí)踐，融入了含金量十足的開(kāi)發(fā)經(jīng)驗(yàn)，使得內(nèi)容緊密結(jié)合實(shí)際應(yīng)用。在此基礎(chǔ)上，《Python網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架）》還通過(guò)豐富的練習(xí)和操作實(shí)踐，幫助讀者鞏固所學(xué)的內(nèi)容?！禤ython網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架）》配以多元的學(xué)習(xí)資源和支持服務(wù)，包括視頻、案例素材、學(xué)習(xí)社區(qū)等，為讀者提供全方位的學(xué)習(xí)體驗(yàn)?！禤ython網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架）》適合作為計(jì)算機(jī)、大數(shù)據(jù)等相關(guān)專業(yè)的教材，也適合具有一定Linux或Python開(kāi)發(fā)基礎(chǔ)的人員閱讀，還可以作為爬蟲(chóng)工程師的學(xué)習(xí)用書(shū)。

作者簡(jiǎn)介

暫缺《Python網(wǎng)絡(luò)爬蟲(chóng)（Scrapy框架新技術(shù)技能人才培養(yǎng)系列教程）》作者簡(jiǎn)介

圖書(shū)目錄

第1章使用第三方庫(kù)實(shí)現(xiàn)信息抓取
任務(wù)1 使用第三方庫(kù)實(shí)現(xiàn)北京公交站點(diǎn)頁(yè)面信息抓取
1．1．1 介紹爬蟲(chóng)
1．1．2 HTTP
1．1．3 HTML
1．1．4 使用第三方庫(kù)實(shí)現(xiàn)爬蟲(chóng)功能
1．1．5 技能實(shí)訓(xùn)
任務(wù)2 使用第三方庫(kù)實(shí)現(xiàn)北京公交站點(diǎn)詳細(xì)信息抓取
1．2．1 lxml庫(kù)
1．2．2 第三方庫(kù)數(shù)據(jù)抓取及保存
1．2．3 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第2章初探Scrapy爬蟲(chóng)框架
任務(wù)1 安裝Scrapy爬蟲(chóng)框架并創(chuàng)建爬蟲(chóng)工程
2．1．1 根據(jù)使用場(chǎng)景劃分爬蟲(chóng)種類
2．1．2 開(kāi)發(fā)基于Scrapy爬蟲(chóng)框架的工程
任務(wù)2 學(xué)習(xí)并掌握Scrapy爬蟲(chóng)框架各模塊的功能
2．2．1 Scrapy爬蟲(chóng)工程組成
2．2．2 Scrapy爬蟲(chóng)框架架構(gòu)
本章小結(jié)
本章作業(yè)
第3章提取網(wǎng)頁(yè)數(shù)據(jù)
任務(wù)1 使用Scrapy的選擇器提取豆瓣電影信息
3．1．1 Response對(duì)象
3．1．2 css選擇器
3．1．3 多層級(jí)網(wǎng)頁(yè)爬取
3．1．4 技能實(shí)訓(xùn)
任務(wù)2 使用正則表達(dá)式從電影介紹詳情中提取信息
3．2．1 正則表達(dá)式
3．2．2 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第4章 Scrapy數(shù)據(jù)保存（文件、MySQL、MongoDB）
任務(wù)一使用Feed exports將爬取的電影信息保存到常見(jiàn)數(shù)據(jù)格式文件中
4．1．1 Feed exports
4．1．2 技能實(shí)訓(xùn)
任務(wù)2 使用pipeline將爬取的電影信息數(shù)據(jù)保存到數(shù)據(jù)庫(kù)中
4．2．1 Python操作MySQL數(shù)據(jù)庫(kù)
4．2．2 pipeline模塊
4．2．3 將數(shù)據(jù)保存到MongoDB中
4．2．4 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第5章 Scrapy反反爬技術(shù)
任務(wù)1 學(xué)習(xí)反爬蟲(chóng)和反反爬蟲(chóng)策略
5．1．1 反爬蟲(chóng)方法和反反爬蟲(chóng)策略
5．1．2 Scrapy設(shè)置實(shí)現(xiàn)反反爬
5．1．3 技能實(shí)訓(xùn)
任務(wù)2 學(xué)習(xí)Scrapy框架中*多常用的設(shè)置
……