从硒导入webdriver 从selenium.webdriver.common.keys导入密钥 导入时间表，时间，时间 随机导入 导入getpass 而True：     userEmail = raw_input（“请输入电子邮件。\ n”）     userPass = getpass.getpass（“请输入密码。\ n”）     userTarget = raw_input（“请输入您要定位的用户的Facebook用户名。\ n”）     userQuantity = input（“请输入...

我现在正在使用通过Beautifulsoup和Selenium从Web抓取信息的代码中工作。我必须从18.000个网站上获取信息。 我已经有获取信息的代码，但是在速度处理方面存在一些问题。为此，我尝试对代码的一部分进行线程化，但有时会卡住并且计算机停止运行。我也尝试在另一个线程中做线程，但是没有用。想想我的代码实现中可能有一些问题。 这是我想要线程化的函数，里面有一个线程： def url_search(url): try: page_1 = requests.get(url) ...

经过深思熟虑，最终决定将我的问题冒一个愚蠢的问题而被禁止的风险：D 因此提前致歉 因此，我使用带硒的Java编写了自动化测试。 目的-比较网站不同页面上的评论值。 但是当我需要通过find.Element / s获得此值时，有很多重复的代码 我做了一个单独的方法，但是对于主页，有一个例外-我必须搜索某些webElement / s（在这种情况下-可变文章），这与我只能使用driver.find的其他页面不同。 所以我想知道使用我的commentsAvailabilityAndValue（）;最有效的方法是什...

我知道这已经有很多话题了，但是我已经遍历了所有话题，这是我第三天试图突破并且没有任何改进。情况如下： I'm trying to use this https://github.com/tejavoo/GooglePlayReviewScraper/blob/master/scraper.py to create a google play review scraper for my research, but continue recieving the following error: Conda3 ...

I want to scrape information in the "Experience Section" of LinkedIn Page. Here is an example website: https://www.linkedin.com/in/jeffweiner08/ Scarping Process sketch 如图所示，我要： 1.检查是否有“显示*更多体验”按钮。 2.如果是这样，请首先单击“显示更多”按钮，然后收集信息。 3.如果没有，请直接收集信息。 for index, r...