centos7无GUI情况安装Xvfb、selenium、chrome – linjin200的个人空间 – OSCHINA

  • A+
所属分类:其他杂项
本文信息本文由方法SEO顾问发表于2020-04-1100:44:00,共 1539 字,转载请注明:centos7无GUI情况安装Xvfb、selenium、chrome – linjin200的个人空间 – OSCHINA_【方法SEO顾问】,如果我网站的文章对你有所帮助的话,来百度口碑给个好评呗!

最近需要用到selenium浏览器抓取,在windows下对照chrome浏览器开发的代码,在linux服务器上换成phantomjs驱动后,却不能运行了,通过截图发现phantomjs渲染效果和chrome不同。于是考虑在centos上安装chrome浏览器。

下面是做的一些记录。

1,centos7 安装 google-chrome

(1) 添加chrome的repo源

 vi /etc/yum.repos.d/google.repo

[google]name=Google-x86_64baseurl=http://dl.google.com/linux/rpm/stable/x86_64enabled=1gpgcheck=0gpgkey=https://dl-ssl.google.com/linux/linux_signing_key.pub

(2)安装

yum update , 然后yum install google-chrome-stable

 

这时候在非root账号下运行google-chrome会输出没有显示器,无法启动之类的。

不知道为什么不能在root账号下运行。

 

2, 安装Xvfb

yum update

yum install Xvfb

yum -install libXfont

yum install xorg-x11-fonts*

 

3, 一个小测试

(1)安装selenium、pyvirtualdisplay

pip install selenium

pip install pyvirtualdisplay

(2)下载chromedriver

从https://sites.google.com/a/chromium.org/chromedriver/home下载chromedriver

配置在PATH路径或者在脚本中指定路径  

(3) demo

  vim test.py

 

 

 
  1. # -*- coding:utf-8 -*-

  2.  
 
  1. from selenium import webdriver

  2. from pyvirtualdisplay import Display

  3.  
  4.  
  5. display = Display(visible=0, size=(800,600))

  6. display.start()

  7. driver = webdriver.Chrome("./chromedriver")

  8. driver.get("http://www.baidu.com")

  9. print driver.page_source

 
  1. driver.quit()

  2. display.stop()

 

期望输出百度首页的html文档。

 

 

 

4 ,selenium server

1, nohup Xvfb -ac :7 -screen 0 1280x1024x8 > /dev/null 2>&1 &

2, export DISPLAY=:7

3, java -jar selenium-server-standalone-3.0.1.jar

4,

 
  1. <pre name="code" class="python"># -*- coding:utf-8 -*-

  2.  
  3.  
  4. from selenium import webdriver

  5. from selenium.webdriver.common.desired_capabilities import DesiredCapabilities

  6.  
  7.  
  8. driver = webdriver.Remote(

  9. command_executor='http://127.0.0.1:4444/wd/hub',

  10. desired_capabilities=DesiredCapabilities.CHROME)

  11.  
  12.  
  13. driver.get("http://www.baidu.com")

  14. print driver.page_source

  15. driver.quit()

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: