COSCUP x UbuCon Asia 2026 標誌
  • 關於我們
  • 議程
  • 交通
  • 會場地圖
  • 社群
  • 贊助夥伴
    • 參與指南
    • 第一次參與
    • 活動參與
    • 講者參與
    • 前夜派對
    • 海外參與者
    • 開源社群、攤位及議程軌
    • 贊助夥伴
    • 邀請函申請指南
  • 工作人員
  • 周邊活動 / BoF
  • 部落格
  • 社群守則
English

網站改版了,然後你的 Spider 就壞了:Ruby 爬蟲維護的現實

時間
2026-08-08 10:10 ~ 10:40
講者
Lilith
位置
TR514
共筆
https://hackmd.io/Hy68xVgIGe
回饋表單
https://coscup.org/2026-feedback/?session=7VWJXN
Ruby Taiwan 中階中文

議程簡介

維護一個爬蟲不難,但維護超過 100 個、針對不同金融機構網站的爬蟲,是完全不同等級的挑戰。

這場分享來自真實的 production 系統——一個持續從日本各大基金公司抓取 PDF 月報的 Rails
專案。當目標網站從 REST API 悄悄遷移到 Nuxt.js SPA、當基金的列表頁因為
ReactVirtualized 只渲染可見列導致找不到目標基金、當PDF版月報突然只剩 HTML
版的月報——你的 spider 就這樣靜靜壞掉了。

我會分享三種最常見的「壞法」與對應的 Ruby 解法、如何用 Module / Concern 組織大量
spider 的共用邏輯,以及最重要的工程判斷:什麼時候該修,什麼時候該直接刪掉。

講者

Lilith

Lilith

Ruby 工程師,目前在5xruby開發團隊工作。日常工作橫跨後端 API、前端畫面渲染,對開發有趣又實用的工具這件事有偏執的興趣。

鑽石級

累計贊助4 年Canonical

黃金級

連續贊助2 年中華民國資訊經理人協會連續贊助2 年國泰金融控股公司連續贊助5 年玉山銀行累計贊助13 年MySQL累計贊助6 年華捷智能股份有限公司Nitra

白銀級

累計贊助16 年慧邦科技股份有限公司  Gamesofa Inc.累計贊助3 年Linux Professional Institute

青銅級

累計合作2 年華娛網路娛樂股份有限公司累計贊助3 年財團法人國家實驗研究院國家高速網路與計算中心ONLYOFFICE累計贊助6 年QNAP Systems, Inc. 威聯通科技連續贊助16 年祐生研究基金會源鋼技術顧問有限公司 SUN SQUARE Co., Ltd醫知彼

好朋友級

連續贊助3 年晶心科技股份有限公司累計贊助12 年沛星互動科技股份有限公司累計贊助3 年Geode Labs & ETHTaipei

特別感謝

連續贊助2 年臺北市政府資訊局累計合作3 年美商賽發馥股份有限公司臺灣分公司Ministry of Digital AffairsRozeta AIGrafana Labs麗陽商場【台灣科技大學活動中心第一餐廳】累計合作5 年三輪行動咖啡氣泡飲累計合作9 年Hackmd累計合作4 年天瓏書局累計合作3 年TapPay個人贊助

共同主辦單位

累計合作9 年臺灣科技大學 電子工程系

協辦單位

累計合作12 年開放文化基金會

COSCUP x UbuCon Asia 2026

Conference for Open Source Coders, Users, and Promoters | 亞洲最大開源年會,由社群自發舉辦。

聯絡我們

  • 會眾服務
  • 贊助合作
  • 議程投稿
  • 行銷方案

相關資源

  • COSCUP 部落格
  • 訂閱電子報
  • 活動照片

網站導覽

  • 首頁
  • 關於我們
  • 交通資訊
  • 贊助夥伴
20062007200820092010201120122013201420152016201720182019202020212022202320242025