【Python 爬蟲】抓取 Google 搜尋結果的連結

woff

記錄一下批量抓取 Google 搜尋結果裡的連結的方法。


如果還沒有安裝以下，要先下載安裝：

1. pip install beautifulsoup4
   
2. pip install google

複製代碼

Code

1. from googlesearch import search
   
2. query = "cambridge"
   
3. for j in search(query, stop=5, pause=2.0):
   
4.         print(j)
   

複製代碼

Result



接下來設定排程

1. /usr/bin/python3 /home/xxx/public_html/seo_crawler.py > /dev/null 2>&2

複製代碼

文章出處