在 上建置可擴展的 Web 爬取系統 AWS - AWS 方案指引

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

在 上建置可擴展的 Web 爬取系統 AWS

本節說明如何建置架構一節所述的 Web 爬蟲程式。它包含建立公司及其相關聯 Web 屬性之強大資料集的系統性方法。此資料集是爬蟲活動的基礎。然後,本節說明如何在 中建置符合道德的 Web 爬蟲程式Python。