R语言中，RCurl优势在哪儿，做爬虫的话用Python还是RCurl效率高

Question

如题所述

Answer 1

Python 用requests + BeautifulSoup 很方便。
【Step1】获取html：
import requests
r = requests.get(‘’)
html = r.text #这样3行代码就把网页的html取出来了
【Step2】解析：
html用你喜欢的方式解析就可以了，牛逼的话可以直接正则。
from bs4 import BeautifulSoup
soup = BeautifulSoup(html) #这样2行就可以很方便的操作soup解析了

或者专业点的用scrapy爬虫框架，默认用xpath解析。