定义类
class LianJia(object):
def init(self):
self.driver = webdriver.Chrome()
打开页面
self.driver.get(‘https://cs.fang.lianjia.com/loupan/’)
def clear_driver(self):
关闭驱动
self.driver.close()
self.driver.quit()
代码核心部分
def scroll(self):
while True:
滑动之前的页面高度
document = self.driver.execute_script(‘return document.body.scrollHeight;’)
time.sleep(2)
滑动页面
self.driver.execute_script(f’window.scrollTo(0,{document})')
time.sleep(2)
滑动之后的页面高度
document2 = self.driver.execute_script(‘return document.body.scrollHeight;’)
比较滑动前与滑动后的高度
if document == document2:
break
定义翻页函数
def up_page(self):
time.sleep(1)
点击下一页
self.driver.find_element(By.XPATH,‘//*[text()=“下一页”]’).click()
定义保存页面源码函数
def save_page(self, n=1):
time.sleep(2)
保存数据
with open(f’第{n}页.html’, ‘w’, encoding=‘utf-8’) as f:
f.write(self.driver.page_source)
定义总的执行函数
def run(self):
try:
self.save_page() # 第一页
for n in range(2, 6): # 第二三四五页
self.scroll()
self.up_page()
self.save_page(n)
except Exception as e:
print(e)
finally:
self.clear_driver()
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年Python开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上前端开发知识点,真正体系化!
由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新
如果你觉得这些内容对你有帮助,可以扫码获取!!!(备注Python)
体系化!**
由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新
如果你觉得这些内容对你有帮助,可以扫码获取!!!(备注Python)
精彩链接
发表评论