Client HTTP e Proxy web

Transcript

1 Client HTTP e Prxy web Crs di laurea in Cmunicazine Digitale Labratri di Reti di calclatri A.A Simne Bassis bassis@dsi.unimi.it Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. Diversi livelli di astrazine le infrmazini inviate dal server tramite HTTP sn mlte di più di quant ci aspettavam L access a tali infrmazini avviene in mdalità diverse Raw (scket) URL, URLCnnectin, Ad alt livell (Prtcl e Cntent Handler) La stessa csa succede per Prxy Gestine dei ckie Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

2 Prxy In generale un prxy (persna entità che ci sta vicin) si ccupa di: Facilitare l access ai dati tramite perazini di caching Fare da intermediari per un servizi Miglirand le prestazini di una sttrete Effettuare dei cntrlli su un fluss di infrmazini Sicurezza: per assicurare che l hst remt nn cnsca i dettagli della sttrete Filtraggi: per prevenire l access a siti pribiti Mnitraggi: per cntrlli statistici sul traffic Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 398 Web Prxy Cerchiam di sddisfare le richieste del client senza interessare il server Occrre fare una impstazine sul brwser Il brwser effettua tutte le richieste vers il prxy client Prxy server rigin server Se il prxy pssiede già l ggett allra ci pensa lui Diversamente l richiede al server e l restituisce al client mantenendne una cpia client rigin server Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

3 Perché fare caching su web Diminuisce il temp di rispsta Generalmente una istituzine se ne crea un sulla rete interna Risparmiare banda Un numer inferire di richieste esce dalla mia rete interna Risparmiare sldi Se pag il traffic effettuat Generalmente un prxy viene installat da chi gestisce la rete (ISP, università, azienda) per miglirare il servizi e per diminuire i csti Se Internet fsse disseminata di prxy, allra aumenterebbe la scalabilità di internet la perfrmance nell access alle risrse Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 400 Operativamente La csa nn è per niente cmplicata Dbbiam fare la richiesta al prxy anziché al server che spita i dati Nella richiesta dbbiam specificare l URI in frma cmpleta Quindi ccrre scrivere anziché sl / Ptremm dver gestire dei messaggi in più aggiunti dal prxy Ad es. linee di intestazine specifiche Sprattutt di cntrll sulla gestine della cache da parte del prxy Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

4 Richiesta sbagliata $ telnet squid.divtlc.unimi.it 8080 Trying Cnnected t squid.divtlc.unimi.it. Escape character is '^]'. GET / HTTP/1.0 HTTP/ Bad Request Server: squid/2.5.stable13 Mime-Versin: 1.0 Date: Sun, 12 Nv :24:32 GMT Cntent-Type: text/html Cntent-Length: 1185 Expires: Sun, 12 Nv :24:32 GMT X-Squid-Errr: ERR_INVALID_URL 0 X-Cache: MISS frm squid.divtlc.unimi.it Prxy-Cnnectin: clse Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 402 Richiesta crretta $ telnet squid.divtlc.unimi.it 8080 Trying Cnnected t squid.divtlc.unimi.it. Escape character is '^]'. GET HTTP/1.0 HTTP/ OK Date: Sun, 12 Nv :26:29 GMT Server: Apache Pragma: N-cache Cache-Cntrl: n-cache Expires: Thu, 01 Jan :00:00 CET ETag: W/" " Last-Mdified: Sat, 11 Nv :31:33 GMT Cntent-Length: Cntent-Type: text/html X-Cache: MISS frm squid.divtlc.unimi.it Prxy-Cnnectin: clse La sintassi e semantica di tutti gli header http standard è dispnibile su Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

5 I sliti prblemi Il prxy nn è trasparente all applicazine Nel mment in cui cambia dbbiam mdificare il cdice Abbiam un parametr in più nella cstruzine della stringa di richiesta E ver, ci sn i transparent prxy, ma: Trasparente significa che nn mdifican la richiesta e la rispsta http Trasparente nn significa che il prxy si autcnfigura Cn HttpURLCnnectin siam in grad di istruire la Java Virtual Machine che qualunque richiesta va effettuata via prxy Il rest del cdice rimane asslutamente identic Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 404 Impstazine del prxy Tramite prprietà di sistema nella JVM http.prxyhst il nme del prxy http.prxyprt la prta su cui rispnde il prxy http.nnprxyhsts lista di hst per cui si accede direttamente alla rete ne esistn anche per imprt java.util.prperties; ftp, https, scks... Prperties systemsettings = System.getPrperties(); systemsettings.put("http.prxyhst", squid.divtlc.unimi.it"); systemsettings.put("http.prxyprt", "8080"); System.setPrperty("http.nnPrxyHsts", netdev.usr.dic.unimi.it laren.dsi.u nimi.it"); System.setPrperties(systemSettings); Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. Un server SOCKS è un particlare tip di prxy che permette di effettuare cnnessini TCP dirette tutti i client che si trvan dietr ad un SOCKS server tterrann un pien access ad internet tutti gli accessi nn autrizzati prvenienti da internet vers 405 l'intern verrann blccati 5

6 Un Prxy per cnnessine Le prprietà di sistema ci stann un p strette Per gni cnnessine dev usare l stess prxy Ma la URLCnnectin ci viene incntr URLCnnectin pencnnectin(prxy prxy) Insieme alla classe Prxy ScketAddress address = new InetScketAddress("squid.divtlc.unimi.it", 8080); Prxy prxy = new Prxy(Prxy.Type.HTTP, address); Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. DIRECT, HTTP, SOCKS 406 E si trna indietr fin alle Scket Se esistn Una classe Prxy La pssibilità di settare prxy per cnnessini TCP grezze (SOCKS) La pssibilità di definire cnnessini che faccian us di un prxy Perché nn applicare quant dett alle scket? // cn prxy ScketAddress addr = new InetScketAddress(prxyhst, prxyprt); Prxy prxy = new Prxy(Prxy.Type.SOCKS, addr); Scket scket = new Scket(prxy); InetScketAddress dest = new InetScketAddress(hstname, hstprt); scket.cnnect(dest); // e senza prxy Scket scket = new Scket(Prxy.NO_PROXY); scket.cnnect(new InetAddress(hstname2, hstprt2)); Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

7 PrxySelectr Ptremm vler usare un prxy dinamicamente sulla base di lad balancing destinazine Prtcll rari frnisce maggir flessibilità e trasparenza E sufficiente specializzare java.net.prxyselectr ridefinend i metdi public abstract List<Prxy> select(uri uri) public vid cnnectfailed(uri uri, ScketAddress address, IOExceptin ex) Far capire a java che abbiam un nuv prxy selectr PrxySelectr selectr = new MyPrxySelectr( ); PrxySelectr.setDefault(selectr); Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 408 Una nta su Handler, Selectr, Manager, Ridefinire il cmprtament di un gestre significa definirne alcuni metdi chiave La scelta dell implementazine interna di tali metdi è arbitraria Purchè ne venga mantenuta la segnatura È pssibile definire ulteriri classi e metdi di appggi Gli esempi fatti a lezine: Frniscn un template di massima sull implementazine di tali metdi L implementazine interna nn è cmpleta e può far us di ulteriri classi che il prgrammatre deve definire Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

8 PrxySelectr.select() public class MyPrxySelectr extends PrxySelectr { PrxySelectr defsel = null; MyPrxySelectr(PrxySelectr def) { defsel = def; public java.util.list<prxy> select(uri uri) { if (uri == null) { thrw new IllegalArgumentExceptin("URI can't be null."); String prtcl = uri.getscheme(); if ("http".equalsignrecase(prtcl)) { ArrayList<Prxy> prxylist = new ArrayList<Prxy>(); // ppla l ArrayList seguend la plitica scelta Metd richiamat dal prtcl handler prima di cnnettersi ad una destinazine return prxylist; if (defsel!= null) { return defsel.select(uri); else { ArrayList<Prxy> prxylist = new ArrayList<Prxy>(); prxylist.add(prxy.no_proxy); return prxylist; Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 410 public vid cnnectfailed(uri uri, ScketAddress sa, IOExceptin ie) { if (uri == null sa == null ie == null) { thrw new IllegalArgumentExceptin("Arguments can't be null."); PrxySelectr: installazine Sempre nella sttclasse di PrxySelectr // intraprendi un azine dettata dalla plitica adttata InnerPrxy p = prxies.get(sa); if (p!= null) { if (p.failed() >= 3) prxies.remve(sa); else { if (defsel!= null) defsel.cnnectfailed(uri, sa, ie); Classe e metdi interni al nstr PrxySelectr cntenente altre strutture dati e inf nn bbligatrie definite dal prgrammatre (da vi) public static vid main(string[] args) { MyPrxySelectr ps = new MyPrxySelectr(PrxySelectr.getDefault()); PrxySelectr.setDefault(ps);... Installazine nel main Metd richiamat dal prtcl handler in cas di errre nel cnnettersi all URI uri attravers il prxy cn indirizz sa Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

9 Sui PrxySelectr PrxySelectr di default In sstanza usa i prxy definiti nelle prprietà di sistema e nient altr Viene mantenut per retrcmpatibilità Ma vlend Pss assciare prxy diversi a URL diversi Orari differenti Pss mdificare la lista di prxy Rirdinandla in md da mettere ai primi psti i prxy più affidabili quelli men carichi Cancelland i prxy che sllevan più eccezini Ad esempi quand nn ci si riesce a cnnettere per più di t vlte Il cdice riprtat è prttipale Manca la definizine di classi e metdi interni Serve sl per cmprendere i meccanismi Per maggiri inf Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I. 412 Esercizi 37 Si recuperi nuvamente l URL in md tale da utilizzare il prxy di atene nn attravers le prprietà di sistema, bensì avvalendsi della classe Prxy. Si rislva l esercizi sia usand URLCnnectin che la classe Scket. Attenzine. Per chi vlesse può usare un Open Prxy, ad esempi tra quelli dispnibili al link: Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I

10 Esercizi 38 Si mdifichi il cdice sviluppat per l Esercizi 37 in md da utilizzare la classe PrxySelectr. Per i più temerari. Eventualmente ptreste aggiungere più funzinalità: definire più prxy per tiplgie di prtcll diverse L applicazine li prva in sequenza Tenere memria dell ultim prxy funzinante per gni prtcll E metterl in cima alla lista dei prxy Cancellare il prxy dalla lista se si verifican 3 errri cnsecutivi Labratri di sistemi e reti (Cmunicazine Digitale) - A.A Università di Milan D.S.I