作业
from bs4 import BeautifulSoup
import requests
import time
def parse_info(info_url):
info_data = requests.get(info_url)
info_soup = BeautifulSoup(info_data.text, 'lxml')
titles = info_soup.select(
'body > div.content > div > div.box_left > div.info_lubotu.clearfix > div.box_left_top > h1')
categories = info_soup.select('#nav > div > span > a')
prices = info_soup.select(
'body > div.content > div > div.box_left > div.info_lubotu.clearfix > div.info_massege.left > div.price_li > span > i')
zones = info_soup.select(
'body > div.content > div > div.box_left > div.info_lubotu.clearfix > div.info_massege.left > div.palce_li > span > i')
views = info_soup.select('body > div.content > div > div.box_left > div.info_lubotu.clearfix > div.box_left_top > p > span.look_time')
data = {
'title': titles[0].get_text(),
'category': categories[-1].get_text().strip(),
'price': prices[0].get_text(),
'zone': zones[0].get_text(),
'views': views[0].get_text()
}
print(data)
url = 'http://bj.58.com/pbdn/0/'
web_data = requests.get(url)
soup = BeautifulSoup(web_data.text, 'lxml')
sub_urls = soup.select('#infolist > div.infocon > table > tbody > tr.zzinfo > td.t > a.t')
for sub_url in sub_urls:
parse_info(sub_url.get('href'))
time.sleep(2)
"D:\Program Files\Python35\python.exe" F:/workspace-python/hw_02/hw_w1.py
{'title': '苹果平板2,最一开始的型号,功能都齐全,屏有点裂缝,不影响使用,低价转走,想用现钱买苹果7,有意的转走吧,', 'views': '6690次浏览', 'category': '北京平板电脑', 'price': '1080', 'zone': '北京-丰台'}
{'title': '华为', 'views': '10354次浏览', 'category': '北京平板电脑', 'price': '1000', 'zone': '北京-海淀'}
{'title': '台电p85九成新,九成新,九成新!!要是愿意你就去买新的,别再跟我说新的多少多少钱了,没怎么用过,反应流畅,带充电器,参数配置自己百度,有意私聊,不议价,不议价!', 'views': '9340次浏览', 'category': '北京平板电脑', 'price': '350', 'zone': '北京-丰台'}
{'title': 'ipad便槜式电脑(MC981CH/A)', 'views': '310次浏览', 'category': '北京平板电脑', 'price': '2288', 'zone': '北京-朝阳'}
{'title': 'piad4 16g,9成新,女孩用的,送保护套', 'views': '6659次浏览', 'category': '北京平板电脑', 'price': '1400', 'zone': '北京-朝阳'}
{'title': '#配件#ipadair多功能皮套水蓝色', 'views': '2654次浏览', 'category': '北京平板电脑', 'price': '35', 'zone': '北京-海淀'}
{'title': '平板电脑汇威fly one 安卓平板电脑', 'views': '3697次浏览', 'category': '北京平板电脑', 'price': '298', 'zone': '北京-通州'}
{'title': 'iPad mini2 32G', 'views': '7364次浏览', 'category': '北京平板电脑', 'price': '1499', 'zone': '北京-丰台'}
{'title': '全新(爱华)平板电话,电脑一体机', 'views': '2856次浏览', 'category': '北京平板电脑', 'price': '800', 'zone': '北京-朝阳'}
{'title': '自用闲置苹果ipad2平板电脑,4G版 wifi!', 'views': '4190次浏览', 'category': '北京平板电脑', 'price': '1050', 'zone': '北京-昌平'}
{'title': '小米平板', 'views': '1635次浏览', 'category': '北京平板电脑', 'price': '1300', 'zone': '北京-朝阳'}
{'title': '昂达平板', 'views': '1384次浏览', 'category': '北京平板电脑', 'price': '450', 'zone': '北京-朝阳'}
{'title': '诚心卖苹果平板电脑 mini 1. 16G 正品行货', 'views': '2137次浏览', 'category': '北京平板电脑', 'price': '1100', 'zone': '北京-昌平'}
{'title': '诺基亚N1 7.9平板一台,之前考试看过2个月时间教学视频, ,平时基本闲置,外观完好,800元售出!', 'views': '1405次浏览', 'category': '北京平板电脑', 'price': '800', 'zone': '北京-昌平'}
{'title': 'iPad一台,new ipad,wifi 16g,该机属于Wlan版本', 'views': '1579次浏览', 'category': '北京平板电脑', 'price': '1200', 'zone': '北京-顺义'}
{'title': '转一套别墅高端Boen平板太阳能热水器', 'views': '1015次浏览', 'category': '北京平板电脑', 'price': '2900', 'zone': '北京-延庆'}
{'title': 'ipad mini壳,没怎么用过,有卡位,可装卡名片等', 'views': '1157次浏览', 'category': '北京平板电脑', 'price': '30', 'zone': '北京-崇文'}
{'title': 'ipad mini壳', 'views': '1025次浏览', 'category': '北京平板电脑', 'price': '20', 'zone': '北京-崇文'}
{'title': '平板电脑,儿童学习机!', 'views': '2964次浏览', 'category': '北京平板电脑', 'price': '980', 'zone': '北京-通州'}
{'title': '三星 GalaxyTab P7300 3G版(16GB)', 'views': '5543次浏览', 'category': '北京平板电脑', 'price': '1500', 'zone': '北京-石景山'}
{'title': 'ipad 5 正品行货 128G内存 假一罚百 有正规发票 手续齐全 待机时间长 充满电 不玩 能放一星期没问题 因为不经常在线 真心需要的可以联系我13301220142', 'views': '2636次浏览', 'category': '北京平板电脑', 'price': '3000', 'zone': '北京-朝阳'}
{'title': '台电x98plus,win10单系统版', 'views': '3477次浏览', 'category': '北京平板电脑', 'price': '720', 'zone': '北京-西城'}
{'title': '转让自用ipad2 九成新 拒绝闲聊', 'views': '43次浏览', 'category': '北京平板电脑', 'price': '1150', 'zone': '北京-昌平'}
{'title': 'Thinkpad 8平板电脑', 'views': '8377次浏览', 'category': '北京平板电脑', 'price': '950', 'zone': '北京-房山'}
{'title': '智能学习机+价值999元学习套餐!甩卖!', 'views': '794次浏览', 'category': '北京平板电脑', 'price': '1099', 'zone': '北京-朝阳'}
{'title': '4月份iPad Air2金色64G国行在保Wi-Fi版', 'views': '7774次浏览', 'category': '北京平板电脑', 'price': '3000', 'zone': '北京-昌平'}
{'title': 'ipadmini3刚买不到一个月,因为太小了自己想换一个大点的,所以要给贱卖了,全新的,银灰色64G没有任何磕碰', 'views': '4284次浏览', 'category': '北京平板电脑', 'price': '2500', 'zone': '北京-丰台'}
{'title': 'ipad air2 64G', 'views': '4627次浏览', 'category': '北京平板电脑', 'price': '2400', 'zone': '北京-顺义'}
{'title': '戴尔合金本inspiron15-7537', 'views': '1954次浏览', 'category': '北京平板电脑', 'price': '3300', 'zone': '北京-海淀'}
{'title': '苹果 Apple iPad Air WIFI 32GB 苹果香港丰泽旗舰店带回~~', 'views': '3758次浏览', 'category': '北京平板电脑', 'price': '2800', 'zone': '北京-朝阳'}
{'title': '科诺平板电脑,500出售或换个电信智能手机', 'views': '759次浏览', 'category': '北京平板电脑', 'price': '500', 'zone': '北京-朝阳'}
{'title': 'mini216G', 'views': '742次浏览', 'category': '北京平板电脑', 'price': '1500', 'zone': '北京-丰台'}
{'title': 'thinkpad平板,型号是183825c', 'views': '1064次浏览', 'category': '北京平板电脑', 'price': '888', 'zone': '北京-朝阳'}
{'title': '三星P-600平板电脑Note10.1平板电脑全新没开封', 'views': '1425次浏览', 'category': '北京平板电脑', 'price': '2150', 'zone': '北京-海淀'}
{'title': 'thinkpad笔记本电脑E540', 'views': '579次浏览', 'category': '北京平板电脑', 'price': '2000', 'zone': '北京-崇文'}
{'title': 'ipad pro 带ipencil 4850', 'views': '3081次浏览', 'category': '北京平板电脑', 'price': '4850', 'zone': '北京-东城'}
{'title': '平板电脑。8寸', 'views': '1096次浏览', 'category': '北京平板电脑', 'price': '300', 'zone': '北京-通州'}
{'title': 'dobby 无人自拍飞行器 99999新', 'views': '261次浏览', 'category': '北京平板电脑', 'price': '1800', 'zone': '北京-朝阳'}
{'title': 'thinkpad的14寸背包', 'views': '698次浏览', 'category': '北京平板电脑', 'price': '67', 'zone': '北京-丰台'}
{'title': '国行surface pro3专业版 i7、8G、256G版,微软超极本,平板电脑置换macbook', 'views': '4014次浏览', 'category': '北京平板电脑', 'price': '7500', 'zone': '北京-通州'}
{'title': 'vx610w 豪华版昂达7寸电容平板8G低价处理', 'views': '1125次浏览', 'category': '北京平板电脑', 'price': '115', 'zone': '北京-昌平'}
{'title': 'ipad air2 64G插卡版,用了十个月左右,有保护壳,99新,无任何暗病,包装盒丢失,有平板、充电器、充电线、外壳。带保护壳2800,不议价!喜欢的来咨询', 'views': '2843次浏览', 'category': '北京平板电脑', 'price': '2800', 'zone': '北京-顺义'}
{'title': '清华同方平板电脑全新未用过,公司抽奖抽到的,因自己有一个了,现便宜卖了', 'views': '1874次浏览', 'category': '北京平板电脑', 'price': '1000', 'zone': '北京-丰台'}
{'title': '华为揽阅m2青春版10.1寸', 'views': '39次浏览', 'category': '北京平板电脑', 'price': '1100', 'zone': '北京-昌平'}
{'title': '卡登仕支架式蓝牙键盘自带皮套。非常好用。适合任何iPad,或安卓平板电脑,原价688买的。', 'views': '936次浏览', 'category': '北京平板电脑', 'price': '129', 'zone': '北京-丰台'}
{'title': 'iPadair2国行银白64g', 'views': '31次浏览', 'category': '北京平板电脑', 'price': '2688', 'zone': '北京-朝阳'}
{'title': '蓝牙平板电脑', 'views': '18次浏览', 'category': '北京平板电脑', 'price': '1500', 'zone': '北京-大兴'}
{'title': 'Apple/苹果 iPad Pro 9.7寸 32G 土豪金 95成新 转让', 'views': '22次浏览', 'category': '北京平板电脑', 'price': '3599', 'zone': '北京-昌平'}
{'title': '联想ThinkPad SL410', 'views': '46次浏览', 'category': '北京平板电脑', 'price': '600', 'zone': '北京-顺义'}
{'title': 'ipad air16G', 'views': '1307次浏览', 'category': '北京平板电脑', 'price': '1500', 'zone': '北京-怀柔'}
Process finished with exit code 0
- 备注:
- 详情页中的浏览量已经改为实时加载了,所以作业中要求的js异步加载部分未涉及。