Kalmarų talpykla - 2 dalis

„Squid“ yra ne tik tarpinio serverio ir talpyklos paslauga, ji gali padaryti daug daugiau: valdyti acl (prieigos sąrašus), filtruoti turinį, jis netgi gali atlikti ssl filtravimą net skaidriu režimu (tarpinio serverio metodas - nereikia konfigūruoti pagalbinio serverio nustatymuose iš jų naršyklių tai tarsi žmogus per vidurį, niekas nežino, kad ten yra). Taigi dažnai matau, kaip išeikvojamas visas šios programos potencialas, nežinant, kaip sukonfigūruoti kiekvieną jos dalį.

Dabar įdomus dalykas, kurį daro kalmarai, yra talpykla (mano nuomone). Jūs man pasakysite, kodėl talpykla? Priežastis yra paprasta, geriau valdykite savo greičio ir pralaidumo naudojimą, tai yra pagrindinis dalykas. Gerai pagalvokite, 1000 žmonių jūsų įmonėje kas 5 minutes konsultuojasi, įprastus puslapius, „Google“, „Hotmail“, „Gmail“ ir kt., Kad vėl ir vėl atsisiųstumėte vaizdus, ​​reklamjuostes, reklamą, HTML turinį, visa tai yra statiška dalykai, ne. Jie keičiasi taip dažnai, geriau juos laikyti savo vietiniame tinkle ir jūs pristatysite kopiją, kurią laikote naujausia pagal jūsų svarstytas konfigūracijas.

Kaip tai padaryti? Paprasta su šiuo sakiniu:

refresh_pattern [-i] regex min percent max [options]

Kaip visada sakau, netikėkite viskuo, todėl raginu skaityti oficialius šaltinius. Rekomenduoju perskaityti šio nutarimo vadovą ČIA.

„refresh_pattern“ teiginys visada bus mūsų žymė, skirta naujiems parametrams į talpyklą pridėti.

Svarbu, kad jūsų talpyklos sąrašai turi būti nuoseklūs, nes kai jis atitiks pirmąjį objektą atitinkantį sąrašą, jis nebeskaitys kitų jūsų taisyklių.

Reguliarūs reiškiniai yra didžiųjų ir mažųjų raidžių jautrios, todėl flv nėra tas pats, kas FLV, bet galite to išvengti, jei norite, naudodami parametrą -i . Tada jis atrodytų taip: refresh_pattern -i

„Min“: tai laikas (minutėmis), kai objektas bus laikomas „nauju“, jei jis neturi aiškios žymės „pasibaigęs“. Pagal numatytuosius nustatymus „Squid“ rekomenduoja 0, nes kai kurios dinaminės programos gali elgtis keistai. Ši reikšmė turėtų būti skaičius, kurį laikote naudingu ir efektyviu elementams, kuriuos norite kaupti talpykloje. Pavyzdžiui, 1440 minučių (viena diena) man atrodo tinkama JPG formatui; ​​tai ne tas pats, kas svetainės įrašo vaizdai keičiasi kas 5 minutes.

„Procentas“ – tai objekto amžiaus procentinė dalis (nuo paskutinio pakeitimo), kuri bus laikoma „nauja“ arba „šviežia“. Pavyzdžiui, jei nuolat perkraunate arba atnaujinate tinklalapį, kad pamatytumėte naujausius pakeitimus, „Squid“ gali manyti, kad jei objektas pasiekė, tarkime, 50 % laiko tarp minimalios ir maksimalios vertės , jis vėl atsisiųs tą objektą iš interneto ir pateiks jums naują kopiją.

„Max“ yra riba, viršijanti arba lygi „Min“, kiek laiko objektas laikomas „nauju arba gaiviu“. Tarkime, kad paveikslėlį puslapyje vartotojas peržiūrėjo tik vieną kartą; tas objektas jau pasiekė savo minimalų laiką , bet ne maksimalų laiką . Taigi, kai jis bus peržiūrimas dar kartą, bus pateikta talpykloje saugoma kopija.

Options:
override-expire
override-lastmod
reload-into-ims
ignore-reload
ignore-no-store
ignore-private
max-stale=NN
refresh-ims
store-stale

Šios galimybės dažniausiai buvo skirtos ignoruoti iš anksto nustatytą elgesį kalbomis ir protokolais, siekiant garantuoti efektyvų talpyklos naudojimą.

override-expire

Tai užtikrina minimalų objekto laiką, net jei serveris išsiuntė trumpesnį galiojimo laiką (pvz., Antraštės arba „Cache-Control“: max-age). Jei tai padarysime, pasirodys „perspėjimas“, sakantis tokius dalykus kaip „Pažeidžia HTTP standartą“, bet tai tik įspėjimai, kurių galime nepaisyti. Jei laikas, kurį serveris siunčia, yra ilgesnis, kalmarai užtruks serverio laiką (galiojimo laiką)

override-lastmod

Sustiprina minimalų daikto laiką, net jei tas elementas buvo neseniai modifikuotas.

reload-into-ims

Trumpas paaiškinimas yra tas, kad jis neleidžia, kad paspaudus atnaujinimo mygtuką arba pateikus užklausą be talpyklos, kalmarai pateiks talpyklą, jei ji nebuvo „modifikuota“ ir (arba) jei puslapyje nebus „antraščių“.

ignore-reload

Nepaisykite naudotojų veiksmų, norėdami paspausti mygtuką iš naujo arba atnaujinti

ignore-no-store

Nepaisykite jokių antraštėse esančių taisyklių, kad nebūtų talpinama, pvz., Vaizdo įrašai

ignore-private

Nepaisykite jokių taisyklių privataus turinio antraštėse, kurių nereikėtų laikyti talpykloje, pavyzdžiui: „facebook“ turinys.

refresh-ims

Kalmarai susisiekia su serveriu, norėdami įsitikinti, ar objektas yra naujausias. Jei taip, tai pateiks talpyklą

store-stale

Kalmarai išsaugos visus tuos atsakymus, net jei jie neturi galiojimo pabaigos datos, tai yra labai nepraktiška, nes paprastai jų negalima pakartotinai naudoti. Jei nuspręsite jį įjungti, turite deklaruoti max-stale = NN

max-stale=NN

Jei įgalinote tai, kas išdėstyta pirmiau, turite deklaruoti maksimalų to atsako ar veiksnio tarnavimo laiką. Kalmarai nepateikia šio stiliaus objektų, tačiau gali patvirtinti juos naudodami šaltinį

Čia pateikiama lentelė, kaip veikia šviežia „ŠVIEŽI“ būsena pagal mūsų aptartas vertybes:

• ŠVEIKAS, jei pasibaigs galiojimo laikas> dabar, kitu atveju PABAIGA
• STALE, jei amžius> maks
• ŠVIEŽI, jei lm koeficientas <procentų, dar PABAIGAS
• ŠVIEŽI, jei amžius <min. KITAS PABAIGAS

Čia pateikiamas konkrečios įmonės, kurioje yra daug vietos diske, gera įranga ir didelis pralaidumas, konfigūracijos pavyzdys

refresh_pattern -i \.(3gp|7z|ace|asx|bin|deb|divx|dvr-ms|ram|rpm|exe|inc|cab|qt)$ 43200 99% 43200 ignore-no-store ignore-must-revalidate override-expire override-lastmod reload-into-ims

refresh_pattern -i \.(rar|jar|gz|tgz|bz2|iso|m1v|m2(v|p)|mo(d|v)|arj|lha|lzh|zip|tar)$ 43200 99% 43200 ignore-no-store ignore-must-revalidate override-expire override-lastmod reload-into-ims

refresh_pattern -i \.(jp(e?g|e|2)|gif|pn[pg]|bm?|tiff?|ico|swf|dat|ad|txt|dll)$ 43200 99% 43200 ignore-no-store ignore-must-revalidate override-expire override-lastmod reload-into-ims

refresh_pattern -i \.(avi|ac4|mp(e?g|a|e|1|2|3|4)|mk(a|v)|ms(i|u|p)|og(x|v|a|g)|rm|r(a|p)m|snd|vob)$ 43200 99% 43200 ignore-no-store ignore-must-revalidate override-expire override-lastmod reload-into-ims

refresh_pattern -i \.(pp(t?x)|s|t)|pdf|rtf|wax|wm(a|v)|wmx|wpl|cb(r|z|t)|xl(s?x)|do(c?x)|flv|x-flv)$ 43200 99% 43200 ignore-no-store ignore-must-revalidate override-expire override-lastmod reload-into-ims

cache_mem 8092 MB

Dabar kaupimas talpykloje atliekamas ne tik standžiajame diske; galime kaupti ir RAM atmintyje. Ši vertė priklauso kiekvienam „Squid“ procesui, todėl turėtumėte į ją atsižvelgti naudodami peradresavimo priemones, tokias kaip „SquidGuard“.

maximum_object_size_in_memory 1024 KB

Maksimalus atmintyje esančio objekto, kurį kalmarai išsaugos RAM, dydis. Taip pat galite deklaruoti minimumą.

memory_replacement_policy heap GDSF
cache_replacement_policy heap GDSF

Kaip matote, viena yra talpyklos pakeitimo RAM atmintyje politika, kita - kietajame diske. Yra 2 GDSF ir LFUDA strategijos. Pirmasis siekia pagerinti talpyklos paspaudimų procentą, turėdamas daug mažų objektų, antrasis siekia priešingai, objektus laiko talpykloje, neatsižvelgiant į jų dydį.

Įsivaizduoju, kad šiuo metu manęs klausiate, klausimas, ką aš naudoju? Na, jei manote, kad jūsų aplinkoje jie atlieka daugybę užklausų ir mažai atsisiuntimų naudoja GDSF, priešingai, jie atsisiunčia daug ir mažai LFUDA užklausų . Jei rekomenduoju LFUDA, kai ketinate tai padaryti, aš nežinau, talpyklą 1 TB diske, tai yra efektyviau.

maximum_object_size 4 MB

Maksimalus objekto dydis gali būti saugomas

cache_dir aufs /media/proxy249/cache 100 16 256

Kur bus saugoma talpykla, čia atkreipkite dėmesį, svarbu, jei naudojate uf, aufs ar diskd, visi 3 veikia daugmaž vienodai, skirtumas tas, kad auf ir diskas dirba su atskirais procesais, kad atliktų įvesties / išvesties operacijas kietajame diske. diską ir venkite, kad kalmarų procesai pakibtų atliekant šias operacijas. Be to, diskd galite nurodyti siūlų, kurias turėsite atlikti šią užduotį, skaičių. Aš rekomenduoju aufs, jei turite gerą komandą.

100 dydis (megabaitai), galite įdėti 100000 100, yra beveik 16 GB, priklauso nuo jūsų prieinamumo. 256 yra aplankų skaičius, o XNUMX - antrinių aplankų skaičius. Galite žaisti naudodamiesi abiem vertybėmis, priklausomai nuo to, kaip greitai veikia jūsų diskai ir kiek turite išteklių.

cache_swap_low 90
cache_swap_high 95

Šios parinktys yra objekto pakeitimo vertės, tai yra mažiausia ir didžiausia vertė kaip vandens ženklas pagal kalmarus, kur šie skaičiai yra procentais (%), o labai mažoje talpykloje dabar tokie 5% būtų, tarkime, 300 objektų per sekundę, tačiau labai didelėse talpyklose kalbėtume apie tūkstančius MB

Na, kol kas tiek. Komentuokite ir atsižvelkite į tuos, kurie man sakė, kad jie negali kaupti talpykloje ir filtruoti HTTPS (SSL) puslapių „Squid 3.5“ ar naujesnėse versijose; netrukus jums tai parodysiu, tad sekite naujienas šiame tinklaraštyje.