헤드리스 서버에서 웹사이트의 작업을 자동화하세요

Question 1

WWW::Mechanize를 살펴보십시오(예는 다음 위치에 있습니다).http://search.cpan.org/dist/WWW-Mechanize/lib/WWW/Mechanize/Examples.pod). 이는 웹 페이지를 객체로 취급하고 메소드를 통해 모든 요소에 액세스할 수 있도록 합니다.

예를 들어

$m->get("https://lists.ccs.neu.edu/bin/admindb/$listname");
$m->set_visible( $password );
$m->click;

(적어도) Ruby 및 Python용 포트도 있습니다.

Answer

WWW::Mechanize를 살펴보십시오(예는 다음 위치에 있습니다).http://search.cpan.org/dist/WWW-Mechanize/lib/WWW/Mechanize/Examples.pod). 이는 웹 페이지를 객체로 취급하고 메소드를 통해 모든 요소에 액세스할 수 있도록 합니다.

예를 들어

$m->get("https://lists.ccs.neu.edu/bin/admindb/$listname");
$m->set_visible( $password );
$m->click;

(적어도) Ruby 및 Python용 포트도 있습니다.

Question 2

당신은 실행할 수 있습니다셀렌예를 들어 Python을 사용하여 작업을 프로그래밍하여 서버에 헤드리스 설치py 가상 디스플레이.

pyvirtualdisplayxvfb, xepher또는 screen을 사용하여 xvnc스크린샷을 찍을 수 있습니다(또는 진행 상황을 원격으로 볼 수 있습니다).

우분투 12.04에 설치:

sudo apt-get install python-pip tightvncserver xtightvncviewer
sudo pip install selenium pyvirtualdisplay

다음 명령을 실행합니다(이것은 최신 Selenium2 API를 사용하고 있으며 이전 API는 계속 사용할 수 있습니다).

import subprocess
from pyvirtualdisplay import Display
from selenium import webdriver

def browse_it(port=None):
    browser = webdriver.Firefox()
    page = browser.get('http://unix.stackexchange.com/questions')
    for question in browser.find_elements_by_class_name('question-hyperlink'):
        print question.text
    if port:
        print '--------\nconnect using:\n  vncviewer ' + \
          'localhost:{}\nand click the xmessage to quit'.format(port)
        subprocess.call(['xmessage', 'click to quit'])
    browser.quit()

def browse_it_hidden(rfbport=5904):
    with Display(backend='xvnc', rfbport=str(rfbport)) as disp:
        browse_it(rfbport)

if __name__ == '__main__':
    browse_it_hidden()

이렇게 하면 xmessage테스트 환경에서 원하지 않는 브라우저 종료가 방지됩니다. browse_it()프런트엔드 테스트를 직접 호출 할 수도 있습니다 .

Selenium의 결과는 find_element.....()방금 찾은 요소의 상위 요소를 선택하는 등의 기능을 제공하지 않습니다. HTML 구문 분석 패키지에서 기대할 수 있는 것입니다(어딘가에서 이것이 의도적인 것이라고 읽었습니다). 통제할 수 없는 페이지를 크롤링하는 경우 이러한 제한은 다소 문제가 될 수 있습니다. 자신의 웹사이트를 테스트할 때 id테스트하려는 모든 요소를 사용하거나 고유하게 생성하여 class쉽게 선택할 수 있는지 확인하세요 .

Answer