Gibt es eine Möglichkeit, PhantomJS in Python zu verwenden?

Ich möchte PhantomJS in Python verwenden . Ich habe dieses Problem gegoogelt, konnte aber keine richtigen Lösungen finden.

Ich finde os.popen() vielleicht eine gute Wahl. Aber ich konnte einige Argumente nicht weitergeben.

Die Verwendung subprocess.Popen()kann vorerst eine geeignete Lösung sein. Ich möchte wissen, ob es eine bessere Lösung gibt oder nicht.

Gibt es eine Möglichkeit, PhantomJS in Python zu verwenden?

Der einfachste Weg, PhantomJS in Python zu verwenden, ist über Selen. Die einfachste Installationsmethode ist

1. Installieren Sie NodeJS
2. Installieren Sie mit dem Paketmanager von Node Phantomjs: npm -g install phantomjs-prebuilt
3. Installieren Sie Selen (in Ihrer virtuellen Umgebung, wenn Sie diese verwenden).

Nach der Installation können Sie Phantom so einfach verwenden wie:

from selenium import webdriver

driver = webdriver.PhantomJS() # or add to your PATH
driver.set_window_size(1024, 768) # optional
driver.get('https://google.com/')
driver.save_screenshot('screen.png') # save a screenshot to disk
sbtn = driver.find_element_by_css_selector('button.gbqfba')
sbtn.click()

Wenn Ihre Systempfad-Umgebungsvariable nicht richtig festgelegt ist, müssen Sie den genauen Pfad als Argument für angeben webdriver.PhantomJS(). Ersetzen Sie dies:

driver = webdriver.PhantomJS() # or add to your PATH

... mit den folgenden:

driver = webdriver.PhantomJS(executable_path='/usr/local/lib/node_modules/phantomjs/lib/phantom/bin/phantomjs')

Verweise:

• http://selenium-python.readthedocs.io/
• Wie setze ich einen Proxy für Phantomjs / Ghostdriver in Python Webdriver?
• https://dzone.com/articles/python-testing-phantomjs

PhantomJS hat kürzlich die Python-Unterstützung ganz eingestellt. PhantomJS bettet jetzt jedoch Ghost Driver ein .

Seitdem ist ein neues Projekt hinzugekommen, um die Lücke zu füllen: ghost.py . Sie möchten das wahrscheinlich stattdessen verwenden:

from ghost import Ghost
ghost = Ghost()

with ghost.start() as session:
    page, extra_resources = ghost.open("http://jeanphi.me")
    assert page.http_status==200 and 'jeanphix' in ghost.content

Seit der GhostDriver im Lieferumfang des PhantomJS enthalten ist, ist die Verwendung über Selenium noch komfortabler geworden.

Ich habe die Node-Installation von PhantomJS ausprobiert, wie von Pykler vorgeschlagen, aber in der Praxis war sie langsamer als die eigenständige Installation von PhantomJS. Ich denke, die eigenständige Installation hat diese Funktionen früher nicht bereitgestellt, aber ab Version 1.1 ist dies sehr wichtig.

1. Installieren Sie PhantomJS ( http://phantomjs.org/download.html ) (Wenn Sie unter Linux arbeiten, helfen die folgenden Anweisungen https://stackoverflow.com/a/14267295/382630 )
2. Installieren Sie Selen mit pip.

Jetzt können Sie so verwenden

import selenium.webdriver
driver = selenium.webdriver.PhantomJS()
driver.get('http://google.com')
# do some processing

driver.quit()

So teste ich Javascript mit PhantomJS und Django:

mobile / test_no_js_errors.js :

var page = require('webpage').create(),
    system = require('system'),
    url = system.args[1],
    status_code;

page.onError = function (msg, trace) {
    console.log(msg);
    trace.forEach(function(item) {
        console.log('  ', item.file, ':', item.line);
    });
};

page.onResourceReceived = function(resource) {
    if (resource.url == url) {
        status_code = resource.status;
    }
};

page.open(url, function (status) {
    if (status == "fail" || status_code != 200) {
        console.log("Error: " + status_code + " for url: " + url);
        phantom.exit(1);
    }
    phantom.exit(0);
});

mobile / tests.py :

import subprocess
from django.test import LiveServerTestCase

class MobileTest(LiveServerTestCase):
    def test_mobile_js(self):
        args = ["phantomjs", "mobile/test_no_js_errors.js", self.live_server_url]
        result = subprocess.check_output(args)
        self.assertEqual(result, "")  # No result means no error

Führen Sie Tests durch :

manage.py test mobile

Die Antwort von @Pykler ist großartig, aber die Knotenanforderung ist veraltet. Die Kommentare in dieser Antwort deuten auf die einfachere Antwort hin, die ich hier eingefügt habe, um anderen Zeit zu sparen:

1. Installieren Sie PhantomJS

   Wie @ Vivin-Paliath betont, handelt es sich um ein eigenständiges Projekt, das nicht Teil von Node ist.

   Mac:

   brew install phantomjs

   Ubuntu:

   sudo apt-get install phantomjs

   etc

2. Richten Sie eine ein virtualenv(falls Sie dies noch nicht getan haben):

   virtualenv mypy  # doesn't have to be "mypy". Can be anything.
   . mypy/bin/activate

   Wenn Ihr Computer sowohl über Python 2 als auch über Python 3 verfügt, müssen Sie möglicherweise ausführen virtualenv-3.6 mypyoder ähnliches.

3. Selen installieren:

   pip install selenium

4. Versuchen Sie einen einfachen Test, wie diesen aus den Dokumenten entlehnt :

   from selenium import webdriver
   from selenium.webdriver.common.keys import Keys
   
   driver = webdriver.PhantomJS()
   driver.get("http://www.python.org")
   assert "Python" in driver.title
   elem = driver.find_element_by_name("q")
   elem.clear()
   elem.send_keys("pycon")
   elem.send_keys(Keys.RETURN)
   assert "No results found." not in driver.page_source
   driver.close()

das ist was ich tue, python3.3. Ich habe große Listen von Websites verarbeitet, daher war es wichtig, dass das Zeitlimit nicht eingehalten wurde, damit der Job die gesamte Liste durchlaufen konnte.

command = "phantomjs --ignore-ssl-errors=true "+<your js file for phantom>
process = subprocess.Popen(command, shell=True, stdout=subprocess.PIPE)

# make sure phantomjs has time to download/process the page
# but if we get nothing after 30 sec, just move on
try:
    output, errors = process.communicate(timeout=30)
except Exception as e:
    print("\t\tException: %s" % e)
    process.kill()

# output will be weird, decode to utf-8 to save heartache
phantom_output = ''
for out_line in output.splitlines():
    phantom_output += out_line.decode('utf-8')

Wenn Sie Anaconda verwenden, installieren Sie mit:

conda install PhantomJS

in Ihrem Skript:

from selenium import webdriver
driver=webdriver.PhantomJS()

funktioniert perfekt.

Falls Sie verwenden Buildout , können Sie einfach die Installationsprozesse automatisieren , dass Pykler das beschreibt die Verwendung von gp.recipe.node Rezept.

[nodejs]
recipe = gp.recipe.node
version = 0.10.32
npms = phantomjs
scripts = phantomjs

Dieser Teil installiert node.js als Binärdatei (zumindest auf meinem System) und verwendet dann npm, um PhantomJS zu installieren. Schließlich wird ein Einstiegspunkt erstellt bin/phantomjs, mit dem Sie den PhantomJS-Webdriver aufrufen können. (Um Selenium zu installieren, müssen Sie es in Ihren Ei-Anforderungen oder in der Buildout-Konfiguration angeben.)

driver = webdriver.PhantomJS('bin/phantomjs')