阿正的工作筆記本
累積工作上的心得與解決問題的紀錄
顯示具有
crawler
標籤的文章。
顯示所有文章
顯示具有
crawler
標籤的文章。
顯示所有文章
2022年2月23日 星期三
[Proxy]資料蒐集與proxy使用by brightdata
最近因為工作上的需要,要爬取facebook,instagram之類的社群網站上的資料,但因為常常會遇到被網站方ban ip的問題,以往會使用假帳號取得資料,不過現在這些社群網站在導入AI抓假帳號跟爬蟲之後,假帳號越來越難取得,也越來越快會被ban掉,使得爬蟲的效率越來越低落。
閱讀更多 »
較舊的文章
首頁
訂閱:
文章 (Atom)
Google Analytics初學者入門簡介