Sťahovanie web stránky do txt súboru

Pasquali · Napísal **Pasquali**: 13.11.2017 16:12

Vedel by mi niekto pomôcť s automatickým sťahovaním web stránok do txt súboru? Jedná sa o základnú web stránku (nie podstránky).
Manuálne to sťahujem napr. cez mozillu ale potreboval by som to automatizovať keďže chcem pracovať s dátami v danom čase.
Je na to nejaký program, alebo vie mi niekto pomôcť? Ďakujem

void · Napísal **void**: 13.11.2017 18:54

Su na to skripty.
ja na to pouzivam wget

Pasquali · Napísal autor témy **Pasquali**: 13.11.2017 20:21

Konkrétne potrebujem stiahnuť túto web stránku do txt
http://www.stats.betradar.com/s4/index.php?clientid=259&language=en&icon=stats#2_1,3_1,22_1,5_40942,9_overview,25_1

Stiahol som si wget do pc. Aký je presný formát na stiahnutie tejto stránky do txt súboru.

Vopred ďakujem

void · Napísal **void**: 13.11.2017 20:29

Kód:

wget http://www.example.com/page.html

hodis to do cronu s adekvatny nastavenim frekvencie opakovania a je to.

Pasquali · Napísal autor témy **Pasquali**: 13.11.2017 21:02

Nejak som stále mimo

čo musím napísať do riadku ak chcem z tejto stránky

http://www.stats.betradar.com/s4/index.php?clientid=259&language=en&icon=stats#2_1,3_1,22_1,5_40942,9_overview,25_1

urobiť txt súbor a nahrať ho do adresára c:\a

Prosím ťa napíš mi konkrétny kód

unset(array[0]) · Napísal **unset(array[0])**: 13.11.2017 23:47

zo stranky textovy subor nespravis. teda spravis ale nema to ziaden vyznam kedze data pre koncoveho uzivatela budu necitatelne.

naco potrebujes tu stranku? chces ju mat k dispozicii offline?

Pasquali · Napísal autor témy **Pasquali**: 14.11.2017 0:32

Z tej stránky potrebujem vytiahnuť dáta. Ak to urobím v mozille firefox manuálne tak mi ju stiahne do txt súboru a dáta viem pekne vytiahnuť.
Problem je však v tom, že tých stránok potrebujem asi 150 konvertovať do txt a to je už časový problém.
To je celé.

BX · Napísal BX: 14.11.2017 7:37

To čo chceš v tomto prípade asi nepôjde úplne jednoducho. Tá stránka si načíta dáta cez javascript, takže uloženie jej kódu ti nič nedá. Cez firefox ti to funguje preto, že stiahneš stránku celú a už vyrendrovanú. To hlúpy wget nevie urobiť.
Takže musíš nájsť program, ktorý počká aj na javascript a to už nemusí byť úplne jednoduché (ja poznám phantom.js, alebo php-v8js, ale možno je aj niečo jednoduchšie pre windows, hľadaj).

Sťahovanie web stránky do txt súboru

Podobné témy