n8n爬蟲 Apify串接教學:最簡單的萬用爬蟲,從FB到YT一篇搞定

很多人喜歡問:「n8n 怎麼爬到臉書的資料?」、「n8n 能不能爬某某網站?」,答案很簡單:當然可以,只要搭配爬蟲工具就行。

利用n8n爬蟲,通過Apify爬到的自己FB貼文數據的整理
我用爬蟲做的貼文數據資料庫

你可能會想,那用官方提供的 API 跟用第三方爬蟲,差別在哪?差別可大了。官方 API 通常不好用,使用門檻也高,除了一堆要設定的不說,你一爬,官方馬上就知道是你,而大部分的公司,通常不喜歡有人一直來家裡搬資料。

這就是第三方爬蟲最大的好處:你不用登入,不會被知道是誰,官方找不到人。而且這些爬蟲工具為了讓你用得開心,自然會把功能做得非常簡單!

(小提示:若你已熟悉 Apify,或是使用我的n8n模板,想直接看如何在 n8n 中設定,請直接跳至文章末尾的「n8n Apify API 串接圖文教學」段落。)

最強 n8n爬蟲夥伴:Apify 教學

Apify的爬蟲頁面
現在已有9000多個爬蟲

在眾多爬蟲工具中,我最常用的就是 Apify。你可以把它想像成一個超大的「爬蟲市集」,上面有幾千種開發者寫好的現成爬蟲(他們稱為 “Actor”),應有盡有,光是 Facebook 相關的爬蟲就有幾十個。

最棒的是,它對新手非常友善。註冊完全免費、不用綁信用卡,每個月還送你 5 美金的免費額度
以爬 Facebook 貼文來說,大概可以爬 1000 次,我自己一個月根本發不到 1000 篇文,所以基本上就是免費在使用。就算不小心用超過了,也只是當月不能再爬而已,絕對不會偷偷扣你的錢

而且它的用途很廣,不只能串接到 n8n,也能串接到任何你想得到的自動化平台,甚至你可以在網站上直接操作,然後手動把爬下來的資料匯出成 CSV 或 JSON 檔,非常方便。

我的 5 個 Apify 爬蟲實戰應用

應用一:爬取 FB 個人貼文,建立自動化成效儀表板

這是我每天都會執行的任務。我會用爬蟲自動抓我 Facebook 的所有文章,包含原文、圖片、按讚數、留言數等數據,然後統一存到 Notion 資料庫做記錄。這樣做不僅能清楚看到自己發文的成效,未來想再利用這些內容時,也能快速找到。

我常用的爬蟲是「Facebook Profile & Posts Scraper」,只要給它你的個人主頁網址,就能爬到指定時間段的所有貼文和數據,每爬一筆的成本大約是 0.006 美金。這個只能爬個人頁面,如果想爬粉專、社團或留言,就找相對應的爬蟲即可。Threads 也是同樣的道理。

應用二:爬取 YouTube 字幕,快速生成影片摘要與知識庫

雖然現在可以直接把 YouTube 網址丟給 AI 做摘要,但這種方式消耗的 Token 量極大,而且 AI 有時會偷懶或幻想。最保險、最省錢的方式,是先把影片的逐字稿字幕爬下來,再把純文字丟給 AI 處理。

我習慣用「Best Youtube Transcripts Scraper」來爬字幕,每筆成本約 0.003 美金。除了做影片摘要,我還會把這些字幕存到資料庫,當作自己的知識庫,未來寫文章或做新影片時,這些都是很棒的素材。

應用三:在 LinkedIn 獲客,打造潛在客戶開發系統

LinkedIn 上面聚集了大量的商務人士,是開發 B2B 客戶的寶地。我之後要上架的「潛在客戶自動開發」n8n 模板,就是使用「LinkedIn Profile Scraper + Email」這個爬蟲。它可以幫你抓下指定條件的用戶資料,一筆約 0.004 美金,如果需要連 Email 一起爬,則是 0.01 美金。不過要注意,因為 Email 是不公開資訊,爬蟲是透過其他管道去查找,不保證 100% 能拿到。

應用四:拆解 Udemy 課程,快速規劃自己的內容

如果你想開發線上課程,市場調查是必要的一步。你可以使用 Udemy 相關的爬蟲,快速搜集目標領域的課程簡介、單元大綱、學生評價等資訊,幫助你快速了解市場上的競品都教些什麼,從而規劃出更有競爭力的課程。

應用五:串接 Perplexity AI,打造免費的 App 搜尋功能

想幫自己的 App 或網站加入 AI 搜尋功能,但又不想支付昂貴的 AI API 費用嗎?你可以使用 Perplexity 或其他 AI 服務的爬蟲。效果跟直接調用該 AI 差不多,但好處是成本可以全部算在 Apify 每月 5 美金的免費額度內,是個省錢的好方法。

n8n 如何結合爬蟲,打造自動化應用?

當你透過 Apify 成功爬取到資料後,這只是第一步。n8n 強大的地方在於,你可以將這些資料(通常是 JSON 格式)傳遞給下一個節點做處理。例如,你可以將爬到的臉書貼文數據存入 Notion 或 Google Sheets、將爬到的 YouTube 字幕丟給 OpenAI 做摘要、或是將爬到的客戶名單設定成自動寄送 Email。整個工作流可以完全自動化,釋放你寶貴的時間。

想看一個完整的實戰案例嗎?在這篇文章中,我詳細介紹了如何結合爬蟲與 AI,打造一個全自動的新聞自媒體,推薦給你參考:n8n新聞自媒體全攻略:打造個人新聞編輯室,啟動自動化之路

別再造輪子,優先使用現成爬蟲

現在,如果我想要爬取任何網站的資料,我的第一步絕對是先到 Apify 上搜尋,看有沒有可以直接使用的現成爬蟲。這真的比自己去研究官方 API 方便太多了。一堆人連申請 Meta 的發文 API 都搞到暈頭轉向,更別說想用官方 API 爬資料了。善用 Apify,讓你的 n8n 自動化之路更加順暢!

n8n Apify API 串接圖文教學

步驟一:進入 Apify 官網並註冊

首先,進到Apify官網,然後點擊右上角的「Get started」進行註冊。

進到Apify官網點擊Get started進行註冊

步驟二:進入後台設定

註冊登入後,會看到主控台畫面,點擊左邊選單的「Settings」。

註冊後進入Apify後台的Settings頁面

步驟三:選擇 API & Integrations

在設定頁面中,點擊上方的「API & Integrations」頁籤。

在Apify設定中選擇API & Integrations

步驟四:建立新的 API Token

點擊「Create a new token」按鈕,準備新增一組給 n8n 使用的 API Key。

在Apify中點擊Create a new token新增API Key

步驟五:複製 API Key

建立完成後,系統會給你一組獨一無二的 API Key,點擊複製按鈕將它複製起來。

複製新建立的Apify API Key

步驟六:回到 n8n 並打開 Apify 節點

回到你的 n8n 工作流,找到 Apify 節點並雙擊打開它。

回到n8n工作流中雙擊打開Apify節點

步驟七:新增憑證 (Credential)

在 Apify 節點的設定視窗中,點擊「Credential」裡的「Create New Credential」按鈕。

在n8n的Apify節點中點擊新增憑證

步驟八:貼上 API Key

在跳出的憑證視窗中,將剛剛從 Apify 官網複製的 API Key 貼到「API Token」欄位裡,然後儲存。這樣就完成串接了!

在n8n憑證處貼上複製的Apify API Key

儲存憑證後,就能正常在n8n使用這些爬蟲節點了!

如果你是使用我的模板,記得把所有節點都要改一下,每次改完只會生效一個節點,務必都要檢查。

不會爬蟲的n8n不是好的自動化

恭喜你!你已經學會如何用 n8n 串接 Apify,實現多平台(像 Facebook、YouTube、LinkedIn)數據自動整合,為自己建立高效率、可延伸的內容流程。

自動化爬蟲將重複的資料蒐集、整理、轉存全部交給機器,你只需專注在策略和創作本身。

現在就馬上動手套用本教學的 n8n x Apify 工作流,把繁瑣例行事務一網打盡,高效解放你的時間和生產力!

如果你還不擅長n8n,能跟著我的學習筆記,一步步一起跟著做!

若你喜歡這類文章,歡迎追蹤我的FB帳號,觀看我每天更新的開發與學習分享

Q&A常見問題

如何用 n8n 和 Apify 設定 Facebook 貼文資料自動同步?

先到 Apify 市集搜尋「Facebook Profile & Posts Scraper」,複製你的 Facebook 個人主頁連結,啟動該爬蟲並取得 API Key,然後回到 n8n 選擇 Apify 節點,貼上 API Key 並串接資料流到 Notion、Google Sheets 等資料庫,就能每天自動更新所有貼文數據。

n8n 能夠自動爬哪些社群平台和資料?

只要 Apify 市集有對應爬蟲,n8n 就能自動抓取例如 Facebook 貼文、YouTube 字幕、LinkedIn 會員資料、Udemy 課程內容等多種資訊,並自動整理到你選擇的資料庫或應用服務。

n8n 自動化爬蟲與官方 API 有什麼差別?

Apify 第三方爬蟲不需申請官方 API、不用登入,流程更簡單,且有降低被封鎖的設計。官方 API 常有配額限制、權限繁瑣與資料保護門檻。n8n 結合 Apify 最大優點就是零門檻、一鍵串接各類網站資料。