import?requests
from?lxml?import?etree
import?urllib.parse
headers?=?{
????‘User-Agent‘:‘Mozilla/5.0?（Windows?NT?10.0;?WOW64）?AppleWebKit/537.36?（KHTML?like?Gecko）?Chrome/64.0.3282.204?Safari/537.36‘
}
url?=?“https://www.aqistudy.cn/historydata/“
response?=?requests.get（url?headers=headers）
text?=?response.content.decode（‘utf-8‘）
html?=?etree.HTML（text）
city_set?=?list（）
citys?=?html.xpath（“//div[@class=‘all‘]/div/ul“）
for?city?in?citys:
????messages?=?city.xpath（“.//li“）
????for?message?in?messages:
????????city_name?=?message.xpath（“.//a/text（）“）
????????city_name?=?““.join（city_name）
????????city_set.append（city_name）
print（city_set）

import?time
from?urllib?import?parse
import?pandas?as?pd
from?selenium?import?webdriver
driver?=?webdriver.PhantomJS（r‘E:\\Tools\\phantomjs-2.1.1-windows\\bin\\phantomjs.exe‘）
base_url?=?‘https://www.aqistudy.cn/historydata/monthdata.php?city=‘
for?k?in?range（0len（city_set））:
????city?=?city_set[k]
????print（city）
????weburl?=?（‘%s%s‘?%?（base_url?parse.quote（city）））
????print（weburl）
????driver.get（weburl）
????time.sleep（1）
????dfs?=?pd.read_html（driver.page_sourceheader=0）[0]
????time.sleep（0.5）
????dfs.to_csv（r‘E:\\Data\\%s.csv‘%?（str（city））mode=‘a+‘encoding=‘utf_8_sig‘）
driver.quit（）
print?（‘done‘）

?屬性????????????大小?????日期????時間???名稱
-----------?---------??----------?-----??----
?????目錄???????????0??2020-09-04?22:31??空氣質量歷史數據\
?????文件??????????61??2020-09-04?21:36??空氣質量歷史數據\0萬寧.csv
?????文件??????????61??2020-09-04?21:27??空氣質量歷史數據\0東方.csv
?????文件??????????61??2020-09-04?21:31??空氣質量歷史數據\0臨高.csv
?????文件??????????61??2020-09-04?21:31??空氣質量歷史數據\0樂東.csv
?????文件??????????61??2020-09-04?21:37??空氣質量歷史數據\0五指山.csv
?????文件??????????61??2020-09-04?21:26??空氣質量歷史數據\0保亭.csv
?????文件??????????61??2020-09-04?21:28??空氣質量歷史數據\0儋州.csv
?????文件??????????61??2020-09-04?21:27??空氣質量歷史數據\0定安.csv
?????文件??????????61??2020-09-04?21:35??空氣質量歷史數據\0屯昌.csv
?????文件??????????61??2020-09-04?21:36??空氣質量歷史數據\0文昌.csv
?????文件??????????61??2020-09-04?21:27??空氣質量歷史數據\0昌江.csv
?????文件??????????61??2020-09-04?21:27??空氣質量歷史數據\0澄邁.csv
?????文件??????????61??2020-09-04?21:34??空氣質量歷史數據\0瓊中.csv
?????文件??????????61??2020-09-04?21:33??空氣質量歷史數據\0瓊海.csv
?????文件??????????70??2020-09-04?21:38??空氣質量歷史數據\0白沙.csv
?????文件??????????61??2020-09-04?21:32??空氣質量歷史數據\0陵水.csv
?????目錄???????????0??2020-09-05?11:10??空氣質量歷史數據\demo\
?????文件????????1298??2020-09-04?21:40??空氣質量歷史數據\demo\demo.py
?????文件????????1610??2020-09-04?21:35??空氣質量歷史數據\demo\ghostdriver.log
?????文件?????????126??2020-09-05?11:10??空氣質量歷史數據\demo\請先讀讀我QAQ.txt
?????文件????????3596??2020-09-04?21:34??空氣質量歷史數據\七臺河.csv
?????文件????????3301??2020-09-04?22:07??空氣質量歷史數據\三亞.csv
?????文件????????3504??2020-09-04?21:34??空氣質量歷史數據\三明.csv
?????文件????????4061??2020-09-04?22:07??空氣質量歷史數據\三門峽.csv
?????文件????????4121??2020-09-04?21:34??空氣質量歷史數據\上海.csv
?????文件????????2974??2020-09-04?22:07??空氣質量歷史數據\上饒.csv
?????文件????????4204??2020-09-04?21:27??空氣質量歷史數據\東莞.csv
?????文件????????4641??2020-09-04?21:28??空氣質量歷史數據\東營.csv
?????文件????????3091??2020-09-04?22:13??空氣質量歷史數據\中衛.csv
?????文件????????4107??2020-09-04?21:39??空氣質量歷史數據\中山.csv
............此處省略358個文件信息