【Python】抓取岭东资讯比赛成绩

【Python】抓取岭东资讯比赛成绩 import requests from bs4 import BeautifulSoup import csv import re base_url="http://china.530520.com.tw/msg/matchGameDetail.asp?Page={}&Ucgp=326&mID=431&mgID=1665" # 发送GET请求获取网页内容，mgid为比赛编号，ucgp&mid这二个数字为俱乐部或公棚编号，想获取哪个俱乐部的数据自己去查一下。 rows = [] for i in range(50): #这是成绩总页码，可以根据情况自己调整。 url = base_url.format(i) response = requests.get(url) response.encoding = 'utf-8' # 设置编码，避免中文乱码 # 使用BeautifulSoup解析HTML soup = BeautifulSoup(response.text, 'html.parser') # 找到包含数据的表格 table = soup.find(name="table",attrs={'border': '0','cellpadding':'3'}) # 提取数据行 if i==0: for tr in table.find_all('tr')[0:1]: # 跳过表头行 row=[] for td in tr.find_all('td'): # 移除括号中的内容 text = re.sub(r'\[.*?\]', '', td.text.strip()) row.append(text) if row: # 确保行不为空 rows.append(row) else: for tr in table.find_all('tr')[1:]: # 跳过表头行 row=[] for td in tr.find_all('td'): # 移除括号中的内容 text = re.sub(r'\[.*?\]', '', td.text.strip()) row.append(text) if row: # 确保行不为空 rows.append(row) # 将数据写入CSV文件 with open('比赛数据.csv', 'w', newline='', encoding='utf-8-sig') as f: writer = csv.writer(f) writer.writerows(rows) print("数据已成功抓取并保存到'比赛数据.csv'文件中。")