您当前的位置:首页 > IT编程 > python
| C语言 | Java | VB | VC | python | Android | TensorFlow | C++ | oracle | 学术与代码 | cnn卷积神经网络 | gnn | 图像修复 | Keras | 数据集 | Neo4j | 自然语言处理 | 深度学习 | 医学CAD | 医学影像 | 超参数 | pointnet | pytorch | 异常检测 | Transformers | 情感分类 | 知识图谱 |

自学教程:Python趣味爬虫之用Python实现智慧校园一键评教

51自学网 2021-10-30 22:37:10
  python
这篇教程Python趣味爬虫之用Python实现智慧校园一键评教写得很实用,希望能帮到您。

一、安装selenium库

问题1:什么是selenium模块?

  • 基于浏览器自动化的一个模块。

 问题2:selenium模块有什么作用呢?

  • 便捷地获取网站中动态加载的数据
  • 便捷地实现模拟登录

问题3:环境安装

pip install selenium

二、下载一个浏览器的驱动程序(谷歌浏览器)

1.下载路径

http://chromedriver.storage.googleapis.com/index.html

2.驱动程序和浏览器的映射关系(谷歌浏览器)

方法1:[不推荐]

在浏览器地址栏输入:chrome://version/

在这里插入图片描述

  • 复制版本号,只取前三节

示例:版本号为90.0.4430.212,只需复制90.0.4430

示例:https://chromedriver.storage.googleapis.com/LATEST_RELEASE_90.0.4430

博主尝试了没有成功

在这里插入图片描述

方法2:[推荐]

安装webdriver-manager

pip install webdriver-manager

运行如下代码

import timefrom selenium import webdriverfrom webdriver_manager.chrome import ChromeDriverManager# from webdriver_manager.microsoft import EdgeChromiumDriverManageroptions = webdriver.ChromeOptions()options.add_argument('--ignore-certificate-errors')driver = webdriver.Chrome(ChromeDriverManager().install(),chrome_options=options)# driver = webdriver.Edge(EdgeChromiumDriverManager().install())driver.get('https://www.baidu.com/s?wd=123')driver.close()

很简单,省很多事

三、智慧校园评教实现

1.新建python文件导入相关包

from selenium import webdriverimport timefrom lxml import etree

2. 使用selenium打开登录页面

# 实例化一个浏览器对象bro = webdriver.Chrome(executable_path='./chromedriver')# 驱动程序所在路径# 让浏览器发起一个指定url对应请求bro.get('http://sso.cqcet.edu.cn/login')

在这里插入图片描述

3.录入用户名密码,点击登录按钮实现登录

# 标签定位username_input = bro.find_element_by_id('username')password_input = bro.find_element_by_id('password')# 标签交互username_input.send_keys('**********')# 智慧校园账号password_input.send_keys('**********')# 智慧校园密码# 点击登入按钮btn = bro.find_element_by_class_name('logon-btn')btn.click()time.sleep(2)# 停顿2s

在这里插入图片描述

4.进入教学评价系统

# 点击学评教管理bro.get('http://ossc.cqcet.edu.cn/xg/teaching/student/index/teach')bro.find_element_by_class_name('nav-label').click()time.sleep(2)# 点击学生评教bro.get('http://ossc.cqcet.edu.cn/xg/teaching/student/xskb')# page_source获取浏览器当前页面的页面源码数据page_text = bro.page_source

在这里插入图片描述

5.实现评教操作

# 解析onclick里面的内容tree = etree.HTML(page_text)onclick_list = tree.xpath('//*[@id="bootstrap-table"]/tbody//a/@onclick')print(onclick_list)for onclick in onclick_list:    if onclick[0:15] != "checkEvaluation":        bro.execute_script(onclick)        time.sleep(1)        bro.find_element_by_class_name('layui-layer-btn0').click()    time.sleep(1)time.sleep(5)bro.quit()

在这里插入图片描述

6.完成效果图

在这里插入图片描述

四、附录

以下为实现谷歌无头浏览器和反检测代码,供参考

from selenium import webdriverfrom time import sleep#实现无可视化界面from selenium.webdriver.chrome.options import Options#实现规避检测from selenium.webdriver import ChromeOptions#实现无可视化界面的操作chrome_options = Options()chrome_options.add_argument('--headless')chrome_options.add_argument('--disable-gpu')#实现规避检测option = ChromeOptions()option.add_experimental_option('excludeSwitches', ['enable-automation'])#如何实现让selenium规避被检测到的风险bro = webdriver.Chrome(executable_path='./chromedriver',chrome_options=chrome_options,options=option)#无可视化界面(无头浏览器) phantomJsbro.get('https://www.baidu.com')print(bro.page_source)sleep(2)bro.quit()

到此这篇关于Python趣味挑战之用Python实现智慧校园一键评教的文章就介绍到这了,更多相关Python智慧校园一键评教内容请搜索51zixue.net以前的文章或继续浏览下面的相关文章希望大家以后多多支持51zixue.net!


Pytorch 如何加速Dataloader提升数据读取速度
pytorch锁死在dataloader(训练时卡死)
万事OK自学网:51自学网_软件自学网_CAD自学网自学excel、自学PS、自学CAD、自学C语言、自学css3实例,是一个通过网络自主学习工作技能的自学平台,网友喜欢的软件自学网站。