Hente informasjon fra andre sider

[Nickless]

Hei.

 

Har sett på en side som skriver informasjon som er hentet fra andre sider. Man klikker på forskjellige knapper, deretter tar siden automatisk og viser resultatet (ved hjelp av Ajax).

Hva kalles denne metoden for å ta inn søkeord og deretter sende søkeordet videre til en helt annen side for så å ta svaret å vise det på din side?

 

Ser ikke på dette som det samme som webcrawling, mulig jeg tar feil.

 

EDIT: Fant noe som heter CURL, tipper det er det som brukes?

Endret 13. november 2010 av Nickless

[snippsat]

Jeg skrev litt om hvordan jeg gjør det i denne posten.

https://www.diskusjon.no/index.php?showtopic=1263992

EDIT: Fant noe som heter CURL, tipper det er det som brukes?

Ja curl kan brukes,jeg har bruk pycurl litt(python sin curl version)

Verktøy jeg bruker for og ta ut info fra websider i python.

 

* urllib,urllib2, og 3 parts urllib3

 

* Scrapy et web crawling framework

 

* BeautifulSoup og lxml

 

* PycURL er nyttig for folk som allerede vant til å bruke libcurl, eksponerer flere av lavnivå detaljer om HTTP, pluss det gevinster eventuelle reparasjoner eller forbedringer som brukes på libcurl.

 

* Mechanize brukes til vedvarende drive en tilkobling mye som en nettleser ville.

 

* Selenium automatisere web app testing på tvers av mange plattformer.

 

* Lære seg Regular expression finnes i alle språk

Endret 13. november 2010 av SNIPPSAT