1.到糗事百科查看網(wǎng)頁源代碼找到規(guī)律，發(fā)現(xiàn)內(nèi)容都在class_=”content”的div標簽內(nèi)

2.直接上代碼：

from bs4 import BeautifulSoup #調(diào)用BeautifulSoup from urllib import requesturl = 'https://www.qiushibaike.com/' headers = ("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.79 Safari/537.36 Edge/14.14393") openner = request.build_opener() openner.addheaders = [headers] data = openner.open(url).read().decode("utf-8") #對瀏覽器進行偽裝，并以utf-8編碼解碼soup = BeautifulSoup(data,"html.parser") #將上面得到的網(wǎng)頁內(nèi)容，轉(zhuǎn)為html.parser模板樣式nodes = soup.find_all("div",class_="content") #提取網(wǎng)頁中的div標簽內(nèi)，class="content"內(nèi)的內(nèi)容for node in nodes:print(node.text.replace("\n","")) #將得到的內(nèi)容去除\n ,并依次遍歷出來

附上運行結(jié)果，大家可以欣賞下

在市場里買了個白蘿卜稱了稱一塊二。只有一塊零 錢找 零那些一毛的鋼镚 兒最煩了你懂的。把錢遞過去，說了句：“一塊錢行不”另一只手在兜里摸著口袋，確保萬一被拒絕一定要第一時間能拿出錢。大姐不置可否，漠漠然伸手捏住一塊 錢的一角兒，另一只手遞過蘿 卜凝視著我的眼睛。周圍賣魚賣肉賣水果的吆喝聲，瞬間被隔離，我們就這樣各自捏著這一塊錢的兩邊和蘿卜的兩頭，互相審視著對方。她不松蘿卜，我也沒松錢！空氣中彌漫著殺 氣。我知道，這時候如果我先開口，就代表著認輸啦！這不僅僅是2 毛 錢的問…查看全文 一幫熊孩子在小區(qū)里踢足球，我外甥也在里面。這時我看見地上有枚金戒指，急忙彎腰去撿，額……你知道的，胖人彎腰很費力，我就兩腿向兩側(cè)彎曲成O 形，再彎腰，戒指還沒撿起來，就聽一聲:射門！足球從我兩腿之間穿過來，把我的眼鏡都打掉了……與此同時，我摸到地上那個戒指，它是個塑料的…… 化學(xué)課,老師在講題,我同桌悄悄對我說:我覺得你對班上那XX有點意思啊。我:放屁!結(jié)果我說話聲不知怎么賊大，老師當(dāng)時就愣住了,然后看了看黑板說:我沒講錯啊? 昨天買了一部榮耀v10，然后手機自帶語音，我給我手機智能語音起了個小林同學(xué)的名字。然后老婆夜班10點到家，就問我這個語音怎么弄的，我就告訴了她。然后她也玩，想了一伙起名小朱同學(xué)。然后我們就在對著手機各自玩，一伙就聽見她對著她的手機叫小林同學(xué)，喊了半天手機沒反應(yīng)，就問我怎么不靈啊。然后我說了句，你喊我手機干嘛…… lz女在上大學(xué)和男朋友異地。今天男友給我打電話讓我用手。教我怎么做 我竟然gc了。這以后怎么辦 跟他是剛認識的同事，他看到我拿lv包包，私下跟其他同事說我裝b，沒錢還買假貨。后來他知道我家是本地人，那包包也是真的，又是各種哥前哥后，說是跟我最投緣。天曉得，那個包包是抽獎抽到的，我家是本地人沒錯，但是，我家是本地最窮的。 經(jīng)過女同事的位置，她指著電腦問我：“你是不是有一件這樣的衣服？”我看了看說：“嗯是的，想買給你老公？”她：“你上星期打麻將說先欠著我三百時，穿的就是這件衣服?！?2018我的女朋友我相信糗友的力量，不過我一直發(fā) 就現(xiàn)在，外面不是很熱，穿短袖剛剛好，在辦公室，女同事穿著厚外套，說熱，空調(diào)開的溫度特別低，我這一個穿短袖的，被凍成狗，此時，內(nèi)心是絕望的，上天啊，誰來帶走這奇葩 為什么你們都不和我做朋友 開車了，系好安全帶！ 耳邊好像傳來了一首歌“西湖美景，三月天內(nèi)……” 這招好像落伍了吧[doge] 俺們村有個丫頭小麗，平常跟女漢子似的，天天就愛扎男人堆里玩。有一回秋天，我們村幾個男人在吹牛皮，說到天冷了，我們想去給城里的洗頭房的小妹妹送溫暖。小麗聽了，嚷嚷著也要去。我們就逗她：你去了不是送溫暖，你去那里會被凍死的?！彼龥]聽懂，我們幾個男人就在一旁壞笑�� 我能說美女含蓄點嗎，公共場合… 去新公司面試，HR負責(zé)人問我：“”你談過幾個女朋友？”。我告訴他我老婆就是我的初戀。面試官走過來，拍拍我肩膀“你是個癡情好男人，但你不符合我們公司要求”。我不解，他緊著說道：“因為泡妞是個挑戰(zhàn)你就挑戰(zhàn)一次就止步不前了，說明你是個不愛挑戰(zhàn)創(chuàng)新的人” 剛才送閨女去興趣班，電梯里遇到一個五六歲的小男孩，問他怎么一個人下去？小男孩說:“媽媽讓我下去尿完再午睡”“為什么不在家里尿？一個人下去多危險啊”“媽媽說我尿多，在家里尿浪費水”我…… 從小我乖乖女的外表下有著一顆調(diào)皮搗蛋的心。放寒假父母去上班把我反鎖在家里讓我寫作業(yè)，結(jié)果他們吃完午飯前腳剛走，我就翻出備用鑰匙，從陽臺把鑰匙丟給住在隔壁的小伙伴幫我“越獄”，溜出去瘋玩了整整一下午，直到父母下班時間快到了，再故技重施讓小伙伴把我反鎖起來，毫無破綻！誰知那天媽媽回到家，看到我像往常一樣安靜地坐在書桌前寫作業(yè)。她盯著我看了一會兒，毫無征兆地抄起了雞毛撣子：“在外面玩到很開心是吧？”我一驚，急忙狡辯：“沒有啊，我一直在做作業(yè)！”老媽的雞毛撣子像雨點般落下來：“你大冬天穿著單衣做作…查看全文 話接上回，上個貼子說二悶子想去他爸的褲襠里找奶水把子，被他媽發(fā)現(xiàn)了…………我問：你媽發(fā)現(xiàn)了你偷唆你爸的奶水就把你打成豬頭了？“屁啊！是我被我媽突然進房里來給下尿了，伸進我爸褲衩里的手下意識的一緊…………”然后怎么樣了？找到你爸的奶水把子了？“然后我就扯到了我爸褲襠里的一蓬草”（現(xiàn)在想想估計這二逼是抓住了他爹的鳥毛了）啥玩意啊？？？？你爸褲襠里有草？臥槽！我又扯開自己的褲腰往襠里瞅？？？？怎么我褲襠里就一桿…查看全文 只發(fā)圖，不說話。 小時候跟著電視學(xué)會的第一句英語是“oh my god”，但是那部電視的字幕翻譯很缺德，因為他是用我們生活中的習(xí)慣用語來翻譯的，比如剛才這句“oh my god”，他就直接給翻譯成了“臥槽”，于是我也好死不死的跟著學(xué)會了。結(jié)果第一次上英語課的時候，老師在黑板上寫出“oh my god”，問我們誰會翻譯的時候，我第一個站了起來…… 小時候，一天，老爸下班，買回一大條驢打滾（香甜軟糯），老爸切開，我和哥哥各一段。我見哥哥比我多，剛要哭，老爸拿起我那段，拉成細長，小聲說：你比哥哥的長、比他多……當(dāng)時，我就感覺哪里不對，直到后來學(xué)了體積…… 好朋友要和他女神表白，車鑰匙扔給我，讓我搞點重量級，大場面的！剛才鑰匙已經(jīng)給他了，并且千叮嚀萬囑咐，千萬不要打開，這東西是一次性的，我花了好大的力氣才弄出來的，全是我辛勤的汗水啊～我覺得是時候出去旅個游避個風(fēng)頭了～哼，誰讓他昨天吃雪糕不給我?guī)У?#xff01; 這一天天的，前天大姑爺去世去參加葬禮，車鑰匙折了花了七十三，，昨天表妹結(jié)婚，皮鞋底掉了，花了八十四。。。。下禮拜送親我不敢想了。。。。。。。[大哭][大哭][大哭][大哭][大哭] 許愿樹許愿樹，妹子的愛情就靠你了 超強干貨來襲 云風(fēng)專訪：近40年碼齡，通宵達旦的技術(shù)人生

總結(jié)

以上是生活随笔為你收集整理的python笔记之利用BeautifulSoup爬取糗事百科首页段子的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。