WechatScraper精品文章

• 

  WechatScraper ——基于搜狗搜索的微信公眾號爬蟲

  最近公司有這方面需求，在網(wǎng)上找了一些爬蟲，使用了一段時間之后發(fā)現(xiàn)很多沒解決驗證碼和cookie這兩個很頭疼的問題。 于是想到了PhantomJS和webdriver，Headless瀏覽器，雖然PhantomJS看不到顯示界面，但其實就是在一個瀏覽器內(nèi)...

  wemallshop 2019-07-30 14:25 評論0 收藏0
• 

  Linux上部署python+selenium+webdriver常見問題解決方案

  折騰了幾天的WechatScraper終于部署到Linux服務器上能生產(chǎn)使用了用篇文章來記錄下部署過程中遇到的各種bug和坑。 1. 運行問題 webdriver在有GUI界面的系統(tǒng)上運行是只需要下載chromedriver或者geckodriver等就能直接帶動瀏覽器運行，只...

  蘇丹 2019-07-30 14:30 評論0 收藏0