Tahame videa z flashovych prehravacov

Pred istym casom som narazil na stranku minuscule.tv a dost sa mi zapacilo video, ktore tam viselo. Chcel som si ho teda stiahnut k sebe pre pripad, ze by sa so strankou v buducnosti cokolvek stalo - odstranili by z nej video, pripadne by cela prestala existovat, clovek nikdy nevie.

Stranka je vsak flashova a po lusteni zdrojakov sa clovek dostane maximalne k nejakym flashovym embedom, v URL ktorych nie su ziadne uzitocne informacie. Rovnaka situacia je aj na vsetkych video hosting serveroch - YouTube, metacafe a ostatnych, ktore ma v tejto chvili nenapadli. Na nich je tiez len nejaky flashovy prehravac, ktory dostane nejaky identifikator videa a dalej uz taha na vlastnu past, takze prostym nakuknutim do zdrojakov nevykutrame nic.

Celkom prijemne je vsak zistenie, ze aj tieto flashove prehravace tahaju to, co maju prehravat, obycajnym http protokolom. Nasadime totiz na ne wireshark a ideme sledovat, co sa na drote deje. Na tento ucel som si vybral Free Song interpretovanu panom Richardom Stallmanom.

V prvom rade treba zmazat cache prehliadaca (to je snad jasne). Potom nastavime wireshark, aby chytal http packety. V Capture Options do kolonky Capture Filter vpiseme tcp port http, spustime chytanie a do svojho oblubeneho browsera (hodilo by sa, keby podporoval flash) pastneme linku na Free Song. Nechame par sekund tahat, potom mozeme capturing packetov zastavit a zavriet browser. Chvilku sa pokochame utesenym poctom packetov, ktore sme chytili, a potom mozeme zavriet statistiky a prejst do hlavneho okna wiresharku.

V nom si mozeme vsimnut kopu http queries, ktore boli od nas odosielane - tahali sa html dokumenty, obrazky, flashove embedy, ale ich velkost je mala v porovnani s velkostou videa, ktore sa stahovalo. Preto vacsina packetov patri prave tomuto videu. Zvolime si teda jeden z packetov od konca a v kontextovom menu vyberieme Follow TCP Stream.

Ak mame stastie (co pravdepodobne mame, subor je velky), v modrej casti konverzacie uvidime Content-Type: video/flv, co znaci, ze je to prave ten flv stream, ktory chceme. Vacsina flashovin pouziva flv format, film na minuscule.tv je vsak napriklad ulozeny v 36 megabajtovom swf-ku, takze tu je priestor na improvizaciu. :)

Nas zaujima predovsetkym ta cervena cast, tj. query, ktora sla od nas. Preco? Aj keby sa mohlo zdat, ze uz staci ulozit odpoved od servera (ktora je nekompletna jednak pretoze sme zastavili stahovanie pred stiahnutim celeho videa), skusil som to spravit takto (po downloade celeho videa), ale v subore s odpovedou nebolo cele video, ale iba cca jedna jeho tretina. Nespiritizujem velmi nad pricinou, mozno sa to taha po castiach a resumuje sa to... bohvie. Sejvneme teda cervenu cast konverzacie do suboru (povedzme query.txt) a mozeme wireshark pokojne zavriet.

Prejdeme do shellu a posleme celu query netcatom na prislusny server, http port. Skusal som aj wget na cisto URL z tejto query, ale to samozrejme neslo kvoli kope stavovych (a zrejme aj autentifikacnych) premennych v nej obsiahnutych. Preto to napchame do netcatu a nestarame sa.

Tuto si trosku pockame, pripadne mozeme na dotycny subor pustit watch ls -lh, aby sme videli, ako nam utesene rastie pred ocami.

Po stiahnuti si zistime, kolko riadkov zabera http hlavicka odpovede a zmazeme ju (rurou cez sed do ineho suboru alebo povedzme cez sed -i).

Ostava nam uz iba pokochat sa dokonalou zhodou cisel v poli Content-Length http responsu a skutocnou velkostou suboru a postvat na nas cerstvucko stiahnuty flv subor mplayer, pripadne mencoder; podla gusta a osobnych preferencii.

--

Par poznamok pre chronickych rypacov. Ano, viem, ze existuje milion pluginov do firefoxu, ktore dokazu tahat videa z youtube, metacafe, bla bla bla..., na jedno kliknutie, bla bla, bez namahy, bla bla. Na to, aby som to riesil takouto cestou, som mal par dovodov:

• Vymyslal som sposob, ako stiahnut video z uz spomenuteho minuscule.tv, ktory nie je sajta na videa typu youtube, navyse nepouziva flv, takze pre to ani nie su pluginy do FF.
• Nepouzivam FF, ale Operu, pre ktoru takto pluginy nejestvuju (pokial viem). FF nainstalovany mam, ale zase pren nemam prehlad o pluginoch. Musel by som googlit, hladat, zhanat... Aj ked by to asi zabralo menej casu, predsa len zazivnejsie sa mi vidi zistit, ako to funguje vnutri.

A nie, nemam potrebu drsne sa tvarit a nemyslim si, ze toto je strasna h4x0rina, ako ktosi kdesi spomenul. Riesil som tento problem a zdalo sa mi to zaujimave, tak o tom pisem.