前言
开发环境
python 3.8
pycharm 2021.2 专业版
代码实现
- 发送请求
- 获取数据
- 解析数据(筛选数据)
- 保存数据
- 连接数据库
开始代码
请求数据
获取数据
html_data = response.text
解析数据(筛选数据)
json_str = re.findall('g_page_config = (.*);', html_data)[0]
保存数据
with open('TB.csv', mode='a', encoding='utf-8', newline='') as f:
csv_writer =csv.writer(f)
csv_writer.writerow([raw_title, pic_url, detail_url, view_price, item_loc, view_sales, nick])
连接数据库
import pymysql
def save_sql(title, pic_url, detail_url, view_price, item_loc, view_sales, nick):
count = pymysql.connect(
host='xxx.xxx.xxx.xxx',
Original: https://www.cnblogs.com/qshhl/p/16073805.html
Author: 松鼠爱吃饼干
Title: Python requests 爬取淘宝商品数据，并连接数据库，保存数据
原创文章受到原创版权保护。转载请注明出处：https://www.johngo689.com/814582/
转载文章受原作者版权保护。转载请注明原作者出处！