Python爬虫:利用JS逆向抓取携程网景点评论区图片的下载链接

**Python 爬虫: 利用 JS 逆向抓取携程网景点评论区图片的下载链接**

携程网是中国最大的旅游服务平台之一，提供酒店预订、景点门票、机票预订等多种旅游服务。携程网的评论区中包含了大量用户对各个景点的评价和照片，这些信息对于旅行者来说非常有价值。但是，由于携程网的图片下载链接是通过 JS 动态生成的，因此需要使用 Python 爬虫来逆向抓取这些链接。

**环境准备**

* Python3.7+
* requests库* beautifulsoup4库* selenium库**步骤一：获取携程网景点评论区页面源代码**

首先，我们需要使用requests库发送GET请求到携程网的景点评论区页面，获取其HTML源代码。

import requestsurl = " />headers = {
 'User-Agent': 'Mozilla/5.0 (Windows NT10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.169 Safari/537.3'
}

response = requests.get(url, headers=headers)
html = response.text

from bs4 import BeautifulSoupsoup = BeautifulSoup(html, 'lxml')
img_urls = []
for img in soup.find_all('img'):
 if img.get('src') and img.get('src').startswith('/images/'):
 img_url = " + img.get('src')
 img_urls.append(img_url)

from selenium import webdriverdriver = webdriver.Chrome()
driver.get(" />img_urls = []
for img in driver.find_elements_by_xpath('//img[@src]'):
 if img.get_attribute('src') and img.get_attribute('src').startswith('/images/'):
 img_url = " + img.get_attribute('src')
 img_urls.append(img_url)
driver.quit()

import osfor i, url in enumerate(img_urls):
 response = requests.get(url)
 if response.status_code ==200:
 with open(f"image_{i}.jpg", 'wb') as f:
 f.write(response.content)