Kategorija - duomenu-surinkimas
Būdai norimai informacijai surinkti ir analizuoti. Taip vadinami scrapperiai, crawleriai, bet tuo pačiu ir nebūtinai tradiciniai scenarijai jiems panaudoti.
Info surinkimas iš "giliojo" interneto 1 dalis
Šios video pamokos metu skaitysime iš "giliojo" interneto. Paviršinis internetas, kuriame karaliauja paieškos varikliai (Google, Bing ir kiti), sudaro tik maždaug 4% viso interneto turinio. 90% norimo turinio guli būtent "giliajame", į ką fokusuota ši pamoka. Rinksime filmų komentarus iš Linkomanijos
Info surinkimas iš "giliojo" interneto 2 dalis
Šios video pamokos metu skaitysime iš "giliojo" interneto. Paviršinis internetas, kuriame karaliauja paieškos varikliai (Google, Bing ir kiti), sudaro tik maždaug 4% viso interneto turinio. 90% norimo turinio guli būtent "giliajame", į ką fokusuota ši pamoka. Rinksime filmų komentarus iš Linkomanijos
Info surinkimas iš web puslapio
Programavimo video. Šiandien mokomės perskaityti informaciją esančią web puslapyje ir įkelti ją į kodą, kur jau fantazijos reikalas ką su ja nuveikt... :) PDF'as, dominantis skyrius: "Python Aplinka" https://www.griaustinis.lt/python_receptai_short.pdf
Python info surinkimas iš dinaminių (JavaScript) puslapių
Šios programavimo pamokos metu, skaitysime turinį iš dinaminių puslapių. Iki šiol mes gaudavom statinį turinį, tą kuris yra iškart atvertus puslapį, tačiau, dalis turinio gali būti sukurta jau atvertus puslapį, su JavaScript pagalba. Tai sukuria keblumų naudojant tradicinius metodus, taigi apžvelgsime būdus su tuo kovoti.