雖然名字起的很曖昧,但內容相信大家也能猜到,就是某一平臺的批量采集器。 用這種工具的理由千千萬萬,比如不想看見因為平臺審核導致 404,比如下載到本地方便管理等等。 不過說真的,批量下載器這種東西,不屬于離線的效率工具,也不屬于咱們平常折騰的騷操作。 跟平臺有關,那就天然帶上了時效性。 畢竟平臺一風控,稍微改個接口、加個密,這種工具都是也是批量失效的。 算起來,這篇大概是咱們 2023 年最后一篇文章了,趁這個機會,全面更新一波咱們的「扒光」系列。 小紅書 我對批量下載小紅書本身沒有什么執念,主要原因是小紅書今年才發布的網頁版。。。 此前所謂的小紅書下載器,要么是單篇筆記的無水印下載,要么是抓包舊版微信小程序,后者十有八九還是收費的。 但今年不一樣啊,有了網頁版的小紅書,給了我們在其中挪移的空間,3、4 月份的時候,吾愛論壇上小紅書下載器一抓一大把。 直到 10 月份前后,突然發現以前無水印的解析方案統統失效了。 記憶中是又搞了層新水印,按以前的方案會導致筆記上出現非常非常小的水印 logo。 所以就尋思著去 GitHub 上找找,碰到了這一節的主角——XHS Downloader。 作者打包有現成的 .exe 文件,隨開隨用。 操作起來 0 門檻,無論是網頁鏈接、右鍵筆記鏈接,還是手機分享鏈接全都支持。 復制、剪切板導入,再點下載即可,圖片、視頻皆無水印。 至于批量下載,XHS Downloader 暫時只支持多鏈接用空格隔開這一種方式。 對于有批量下載需求的小伙伴,可以把鏈接放到 txt 文檔里,復制后剪切板導入。 為了好看,咱可以開啟 txt 文檔的自動換行,別忘了每行后面加個空格。 好消息是,現階段小紅書網頁版并沒有強制要求登錄,如果后續風控中加了強制登錄,那就需要大家自行搞定 Cookie 了。 GitHub 上有教程—— 至于 Cookie 放在哪?解壓后文件目錄里有一個名為「settings.json」的配置文件。 下載目錄、文件格式等內容都在這里修改。 抖音 抖音批量下載器,最好用的是曾經吾愛論壇上作者 @biqiang 開發的抖音采集工具,可惜因為這樣那樣的原因這款工具停更了。 最好的替代品,也是上一節小紅書下載器作者開發的 TikTokDownloader。 如你所見,從單視頻下載到圖集,從批量下載作者全部內容到熱榜、合集、收藏、直播,甚至評論也都 OK。 唯一美中不足的,是操作上要接受命令行。 像抖音這種反爬比較成熟的,想要下載登錄是必須的,細心的作者同樣提供有 Cookie 獲取方案(實際操作時,你可以試試 2 掃碼登錄)。 搞定 Cookie 后,按照命令行上面的提示,輸入「3」進入終端模式,是下載 TikTok,還是下載抖音,是評論,還是直播,跟著引導走,復制粘貼鏈接靜等下載。 不用擔心鏈接里有文字,TikTok Downloader 會幫你自動解析鏈接,視頻本身是無水印的。 對了,這個工具你用的時候,別怕操作有問題,命令行里按回車,即可返回上一級菜單。 而批量下載時,也不用擔心失敗,完全可以把 TikTok Downloader 的窗口給關了。 因為下載失敗、下載中斷,這個工具會自動刪除緩存內容,且下次下載同一鏈接,會檢測是否存在,沒錯 TikTok Downloader 是支持增量下載的。 除此之外,TikTok Downloader 還有很高的擴展性,像小紅書那樣的配置文件調教下載器的思路,在這里同樣適用。 GitHub 上有近萬字的文檔說明, 你可以簡單使用,也可以玩得更花。 B 站 這些年的 B 站工具,沒有 200 也有 100 了,畢竟你說是小紅書無水印找個頭像、壁紙次數多,還是把 B 站長視頻保存下來反復觀看次數多,肯定是后者。 怎么從這大量的工具里篩選出自己想要的?簡單的方案是,你可以在 GitHub 上看看項目的更新發布日期。 像 BBDown 這款命令行下載器,我自己挺喜歡的,但最新一次的更新還是 8 月份,好多反饋說部分功能失效的。 挑來挑去,還是相中了之前分享過的 BilibiliDown。 在登錄賬號后,右邊不僅能選擇收藏的視頻,還支持稍后再看的視頻。 UP 主的空間、專欄也好。 多 P 視頻也罷,都可以粘貼鏈接,解析后批量下載。 除此之外,BilibiliDown 也是難得支持下載 CC 字幕,支持下載彈幕、互動視頻、相簿圖片等類型的工具了。 關于視頻的參數設置,比如編碼、比如下載后是否點贊、CC 字幕的語種之類的,在配置頁里修改。 關于 B 站下載器,有幾點要說明的—— 1、是否無水印,從 GitHub 看到,B 站的無水印接口屬于 TV 端,有些視頻沒有 TV 端,所以是沒辦法下載無水印的。 2、碼率大小,你可能會看到不同下載器的碼率不一致,但我之前做過測試,登錄下載的 1080P,大會員的 4K,和未登錄的 480P 碼率肯定不同。 除此之外,影響不同下載器下載視頻碼率不同的,是編碼格式,但清晰度上說,沒有到影響觀感的那一步。 B 站肯定是二壓了的,與其糾結下載器,不如搞個大會員的賬號。 3、所有 B 站下載器,均不存在破解行為,你賬號能看什么,才能下什么,至于充電視頻,我不知道這個工具有沒有像其他工具那樣失效,有需求的可以試一試。 其他 除了小紅書、抖音、B 站,我用的比較多的還有微博,但微博的反爬比那三家要嚴得多。 倆月前我碰到個我碰到個擴展,可以一鍵把關注的博主圖文備份到本地,再轉眼人家就收費了。 GitHub 上找了很久,有 UI 界面,不用自己部署環境的工具挨個試,找到了最后一次更新停留在 2022 年的穩部落。 穩步落可以把微博圖文導出為 PDF、HTML 電子書,圖片也是批量保存。 它是利用微博的一個舊接口實現的爬取,爬完每一頁還強制休眠 20 秒,盡管如此哈,在搞到 20 多頁的時候,還是有可能接口暫時失效。 如果你真需要,就 10 頁 10 頁慢慢弄好了。 |
|