一、分布式selenium
1、部署 docker-selenium
Github官方地址如下:
https://github.com/SeleniumHQ/docker-selenium?tab=readme-ov-file
执行安装指令:
1、这里可以将dashboard映射接口改为 14444(记得开放安全组)
docker run --rm -it -p 14444:4444 -p 7900:7900 --shm-size 2g selenium/standalone-chrome
2、UI界面
访问网址:
1、这里映射的是14444端口
http://127.0.0.1:14444/ui/
点击 《Session》tabs
点击摄像头按钮
默认密码:secret
可以看到模拟浏览器正在运行的效果
3、编程调用 docker-selenium
def login_get_cookie():# 配置浏览器选项chrome_options = webdriver.ChromeOptions()chrome_options.add_argument('--no-sandbox')chrome_options.add_argument('--disable-dev-shm-usage')# 连接到远程Selenium Chrome节点browser = webdriver.Remote("http://127.0.0.1:14444", options=chrome_options)try:browser.get("https://xxbb.com/Account/Login")# 输出网页标题print(browser.title)account_name = '123'passward = '456'# 找到用户名和密码输入框,并模拟输入账号密码(请替换为实际的元素定位方式)# driver.find_element(By.ID,"validemail2").send_keys(account_name)print("Waiting for element to be clickable...")element = WebDriverWait(browser, 20).until(EC.element_to_be_clickable((By.CSS_SELECTOR, '[id="validemail2"]')))element.send_keys(account_name)# print(browser.page_source)print("Element is clickable.")print("---------------获取到元素准备登录")browser.find_element(By.XPATH, '/html/body/div[1]/div/div/div/div[2]/div/form/div[2]/input').send_keys(passward)browser.find_element(By.ID, "button").click()# # 提交登录表单(如果需要点击登录按钮的话)# login_button = driver.find_element_by_css_selector('input[type="submit"]') # 或其他定位方式# login_button.click()# 等待页面加载完成(如果需要的话,可以使用WebDriverWait配合expected_conditions进行等待)# ...# print("----------", browser.get_cookies())# 获取当前页面的所有Cookiecookies = browser.get_cookies()# print(cookies)# 初始化一个空字符串,用于存储拼接后的cookie字符串cookie_string = ""for cookie in cookies:print(f"Name: {cookie['name']}, Value: {cookie['value']}")# 将每个cookie的name和value拼接成形如"name=value"的格式,并添加到cookie_string中cookie_string += f"{cookie['name']}={cookie['value']};"# 去除最后一个分号cookie_string = cookie_string[:-1]return cookie_stringfinally:browser.quit()