Python爬蟲入門筆記

本來想著導師做C#的，一門心思先扎進去再說，但是一直沒有項目實踐的話，怕是會覺得越來越枯燥。索性先學學Python，畢竟以后每種類型的編程語言還是都要了解的。加上同學在研究這個，也有個討論的。

1.requests庫

pip install requests

python庫的通用安裝方法吧
這里寫圖片描述

import requests        //調用requests庫(雖然這并不是Python的注釋方法）
r=requests.get("url")  //輸入網站url參數
r.status_code          //獲取狀態碼
r.encoding             //獲取編碼信息
r.encoding=r.apparent_encoding  //將編碼信息改為可閱讀的編碼

2.beautifulsoup庫

這里寫圖片描述
參數1，html格式的內容；參數2，html解析器

這里寫代碼片

本文鏈接：https://blog.csdn.net/dieice2030/article/details/78028712

智能推薦

Python爬蟲（入門+進階）學習筆記 1-2 初識Python爬蟲

本人Mac + Anaconda(Python3) + PyCharm + Chrome 簡單來說，Anaconda是包管理器和環境管理器。Anaconda 附帶了一大批常用數據科學包，它附帶了 conda、Python 和 150 多個科學包及其依賴項。因此你可以立即開始處理數據。Anaconda 是在 conda（一個包管理器和環境管理器）上發展出來的。在數據分析中，你會用到很多第三方的包，而...

Scrapy Python爬蟲入門

創建項目目錄格式定義Item.py item.py 定義爬取數據的容器，數據類型，類似python中字典，在item中定義我們要獲取的數據...

Python爬蟲-Request入門

安裝Requests庫 requests.get()-獲取百度首頁信息爬取網頁的通用代碼框架 HTTP協議及requests方法： HTTP協議：超文本傳輸協議基于“請求與響應”模式的無狀態的應用層協議。無狀態-第一次和第二次請求沒有關聯。應用層-在TCP協議之上 URL：http://host【：port】【path】 host：Internet 主機域名。port：...

Python爬蟲簡易入門

文章目錄什么是爬蟲查看網頁源代碼寫一個最簡單的爬蟲結果分析什么是爬蟲查看網頁源代碼我們首先打開進入瀏覽器打開搜狐網然后點擊鼠標右鍵選擇查看網頁源代碼我們發現網站背后都是一些數據，如果我們可以用一個自動化的程序輕輕松松就能把它們給爬取下來是不是很爽？比如，一些圖片和電影的網站，我們只要用 Python 寫幾行代碼然后一運行這個程序就幫我們爬取所有的圖片和電影到我們本地，完全不需要我...