#請益 關於爬蟲的問題
朝陽科技大學
最近想爬FB的粉絲團文章
參考了網路上以前的爬蟲教學似乎比較推薦selenium
但實際在測試時用了一些時間會被暫時封鎖
我有設置time.sleep並給予隨機秒數(至少5秒以上)
測試的時候我也只是把粉絲團前10個文章連結抓出來
由於想看留言需要登入
所以抓完文章連結會先去登入
在跳轉到文章連結網址再去一個一個點開留言
點擊方式是使用js去點開也是有給休息時間
想問版上爬蟲大大,有什麼好方法可以避免被封鎖或是其他爬蟲套件使用的
facebook graph api就先不考慮了
Please, thank you!~
