请选择 进入手机版|继续访问电脑版
发新帖

请教一个 Flask 控制 selenium 的思路

[复制链接]
6111 6

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
本人正在做一个练手的爬虫项目,主要是用 flask 充当 selenium 爬虫的控制面板,初步渣代码如下:
from flask import Flask,render_template,request,redirect,url_forfrom Control import control  ## selenium 的 classapp = Flask(__name__)app.secret_key = 'dqwer235r*tbqew4r1$1232~@'test = control()    ##启动后会启动两个 selenium 实例。。。@app.route('/dashboard/',methods=['GET','POST'])def dashboard():    if request.method == 'GET':        return render_template('dashboard.html')    elif request.method == 'POST':        if request.form['submit'] == 'Start':            msg = 'Started.'            qrSrc = test.qr()   ## 返回 selenium 中获取的二维码链接            return render_template('dashboard.html',msg=msg,qrSrc=str(qrSrc))        else:            msg = 'no'            return render_template('dashboard.html',msg=msg)if __name__ == '__main__':    app.run(host='0.0.0.0',port=80,debug=True)from selenium import webdriverimport timeclass control:    def __init__(self):        self.driver = webdriver.Chrome()    def qr(self):        self.driver.get('http://example.com')        time.sleep(2)        qr_src = self.driver.find_element_by_id('js_login_qrcode_img').get_attribute('src')        return qr_src   ##扫描二维码登陆if __name__ == '__main__':    test = control()    print(test.qr())想请教下如何实现 selenium 的持久化,即浏览器一直不关闭并且能接收 flask 传入的命令?感觉要把 flask 嵌入另一个 selenium 的 class 中,但我比较想把 flask 和爬虫两者分离。另外上面的代码会弄出两个浏览器实例,暂时未知道原因。。谢谢大家 :)

举报 使用道具

回复

精彩评论6

xuyl  新手上路  发表于 2018-1-31 15:14:42 | 显示全部楼层
这个时候就要用到 flask 的上下文机制了

举报 使用道具

回复
1314258  新手上路  发表于 2018-1-31 15:22:08 | 显示全部楼层
selenium 变成 http server,flask 发参数过去就可以了。

举报 使用道具

回复
tbag781623489  新手上路  发表于 2018-1-31 15:38:34 | 显示全部楼层
@1314258 多谢,selenium-rc 看起来不错,研究一下

@xuyl 多谢指点,不过这个有点复杂,可能我要理解一段时间,而且网上也搜不到上下文的应用例子。。

举报 使用道具

回复
zeq  新手上路  发表于 2018-1-31 16:19:59 | 显示全部楼层
两个实例的问题,你可以试一下 debug=False 或者 debug=True, use_reloader=False

举报 使用道具

回复
hareandlion  新手上路  发表于 2018-1-31 16:43:12 | 显示全部楼层
请问 selenium server 长期运行对硬件资源有限制吗?没看到这方面的资料

举报 使用道具

回复
tbag781623489  新手上路  发表于 2018-1-31 16:53:31 | 显示全部楼层
@zeq 谢谢,的确是 debug=False 后变回一个实例了。

举报 使用道具

回复
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表