訂閱
糾錯(cuò)
加入自媒體
當(dāng)前位置： OFweek 人工智能網(wǎng)   >   其他   >  正文

如何用Python抓取上海美團(tuán)火鍋的數(shù)據(jù)？

2、此時(shí)在右側(cè)會(huì)顯示下圖的界面，點(diǎn)擊黃色區(qū)域內(nèi)的那串英文“Responsebody is encoded． Click to decode．”意思是response是加密的，點(diǎn)擊此處進(jìn)行解碼，對(duì)返回的網(wǎng)頁(yè)進(jìn)行解碼。

3、此時(shí)會(huì)彈出下圖所示的界面，在WebView中可以看到返回的數(shù)據(jù)，與網(wǎng)頁(yè)中的內(nèi)容對(duì)應(yīng)一致。

4、不過(guò)美團(tuán)網(wǎng)限制一頁(yè)最多顯示32條火鍋信息，如下圖所示。

5、如果我想獲取100條信息的話，那得前后找4頁(yè)，才能夠滿足要求。有沒有辦法讓其一次性多顯示一些數(shù)據(jù)呢？答案是可以的，操作方法如下。

在左側(cè)找到對(duì)應(yīng)的美團(tuán)網(wǎng)鏈接，然后點(diǎn)擊右鍵一次選擇CopyàJustUrl，如下圖所示。

7、將得到的URL放到瀏覽器中去進(jìn)行訪問，如下圖所示。可以看到limit＝32，即代表可以獲取到32條相關(guān)的火鍋信息，并且返回的內(nèi)容和Fiddler抓包工具返回的信息是一致的。

8、此時(shí)，我們直接在瀏覽器中將limit＝32這個(gè)參數(shù)改為limit＝100，也就是說(shuō)將32更改為100，讓其一次性返回100條火鍋數(shù)據(jù)，天助我也，竟然可以一次性訪問到，如下圖所示。就這樣，輕輕松松的拿到了一百條數(shù)據(jù)。

<上一頁(yè)  1  2  3  下一頁(yè)>  
聲明： 本文由入駐維科號(hào)的作者撰寫，觀點(diǎn)僅代表作者本人，不代表OFweek立場(chǎng)。如有侵權(quán)或其他問題，請(qǐng)聯(lián)系舉報(bào)。

發(fā)表評(píng)論

共0條評(píng)論，0人參與

請(qǐng)輸入評(píng)論內(nèi)容...

請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字

您提交的評(píng)論過(guò)于頻繁，請(qǐng)輸入驗(yàn)證碼繼續(xù)

  • 看不清，點(diǎn)擊換一張  刷新

暫無(wú)評(píng)論

暫無(wú)評(píng)論

    掃碼關(guān)注公眾號(hào)
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯(cuò)
    x
    *文字標(biāo)題：
    *糾錯(cuò)內(nèi)容：
    聯(lián)系郵箱：
    *驗(yàn) 證 碼：

    粵公網(wǎng)安備 44030502002758號(hào)