selenium和chromedriver做自动化爬虫的时候，如果你用到循环就恢复发现chromedriver.exe和浏览器进程越来越多，最后卡死，脚本停止运行。我每隔20分钟就要把脚本终止，然后再开始运行，只能达到“半自动”的效果。
我网上找了很多办法，有的用到JS，有的用kill去杀掉进程。最后发现有个最有效的办法就是调用refresh刷新一下即可，进程会自动消掉，内存也不会被吃完。脚本可以一直运行到天荒地老。
driver.refresh()
* Close the current window, quitting the browser if it's the last window currently open.
void close();
* Quits this driver, closing every associated window.
void quit();
通过查看以上官方声明文档，可以看出close
使用selenium和chromedriver组合爬虫时，如果爬取的页面数量巨多，会出现占用内存逐渐增大知道程序崩溃的情况。
解决方案：关闭当前的窗口（注意，phantomjs中的窗口其实就是chrome里的标签页，phantomjs是无界面浏览器，不需要像chrome那样可以把几个标签页放在不同的“窗口”显示），打开一个新的窗口请求页面
from bs4 import Bea...
已经过去几天，没有保存当时的截图，简单通过文字还原一下场景系统：linuxchromedriver版本：105selenium-java版本：3.9.1java日志信息：使用try语句包围这行代码，代码输出finally块中的日志，但未输出后续代码的日志，且未抛出任何异常，无法获知报错原因。
可以更新Path系统变量以将完整目录路径添加到可执行文件
您可以使用System.setProperty（“ webdriver.gecko.driver”，“ path \ geckodriver.exe”）;
您可以像我一样将文件放在项目的同一目录中。
在开始我尝试打开谷歌，并检查网页标题是否等于谷歌
在使用python进行爬虫的时候，使用selenium进行爬取的时候经常会出现已缓存过大的情况，如果缓存出现过大之后再次执行的话就会计算机拒绝，但是这个时候我们的内存又有很多空间可以使用，一开始我以为是占用文件过多然后点360的那个进行文件整理和清理垃圾，结果效果一样还是无法使用，再买一个内存条的话又不想花钱了，一番检查后发现是这个已缓存占用过大也就是备用内存。......
2018年通过Selenium能够抓取微博、微信数据及其他网站数据，用的是GeckoDriver驱动firefox进行抓取，在使用的过程中经常遇到内存使用过多的问题，排查的过程让我非常痛苦。
在几年以前我也同时使用chrome跟firefox作为自己日常工作中的浏览器，那时候firefox就经常因为内存问题崩溃，所以firefox给我的印象不是太好。
通过Selenium框架爬虫我为什么使用f...
在linux上面通过selenium的webdriver抓取数据的时候需要正确的关闭浏览器，不然就会出现内存泄漏的问题,注意下面的close和quir都需要加上去，其中close是关闭chromium，而quit则是关闭chromedriver的例如:simulated_browser = webdriver.Chrome()
simulated_browser.get("www.baidu.com
C:\Users\XXXX\AppData\Local\Temp\anonymous7822503.webdriver-profile.
这个地址就是我的本地临时文件夹中seleniumdriver的位置。今天早上，来了之后开始运行，发现只执行了3个，就开始出现问题了，提示磁盘空间不足。使用360的释放磁盘空间，还是没什么效果。记得半个月前还有8G空间，现在还不到1G了。肯定是有大量生成临时文件...
`driver.close()`改为`driver.quit()`。
close()方法：可能是只关闭了当前网页，而未关闭crome，导致大量crome并发，占用内存直至卡死。
quit()方法：关闭当前页面并退出浏览器和退出webdriver驱动。
解决二：程序产生大量缓存（或是其他文件）导致磁盘存储空间...
driver_service = Service( 'chromedriver.ext') #括号内填写 驱动路径
driver_service.command_...
