鍍金池/ 問(wèn)答/Python  數(shù)據(jù)庫(kù)/ 如何獲取b站某分區(qū)所有視頻的av號(hào)

如何獲取b站某分區(qū)所有視頻的av號(hào)

比如在https://www.bilibili.com/v/te...
想要獲取科技分區(qū)下,趣味科普人文版塊的所有視頻av號(hào),通過(guò)修改網(wǎng)址上的頁(yè)碼可以模擬翻頁(yè),但是想看見(jiàn)每一頁(yè)的20個(gè)視頻av號(hào),需要用瀏覽器自帶的檢查元素,或者selenium來(lái)模擬,效率比較低。
或者從1開(kāi)始遍歷所有的視頻,再看該視頻是不是該分區(qū),但是這個(gè)辦法也繞路了。
有沒(méi)有其他辦法?謝謝

回答
編輯回答
伴謊

我試著開(kāi)了100個(gè)進(jìn)程去跑,如果遍歷1000w個(gè),從中篩選出我要的分區(qū),按一個(gè)進(jìn)程遍歷3條/s,大概需要一天多。時(shí)間上對(duì)于我當(dāng)前項(xiàng)目是可以忍受的,但是這樣遍歷確實(shí)背離了初衷

2018年8月26日 22:38
編輯回答
初心

連最基本的概念都沒(méi)有 ……

類(lèi)似于 https://api.bilibili.com/x/we...

這樣的服務(wù),直接拿不就完了,不需要什么檢查元素,selenium模擬。

2018年1月31日 10:29