જો ત્યાં પ્રતિબંધો હોય તો પણ વિજેટ સાથે એક સંપૂર્ણ સાઇટ ડાઉનલોડ કરો

શું છે?

કરતાં વધુ સારું કંઈ નથી વિકિપીડિયા આ સાધનમાં શું શામેલ છે તે સમજાવવા માટે:

GNU Wget એક મફત સ softwareફ્ટવેર ટૂલ છે જે વેબ સર્વર્સમાંથી સામગ્રીને સરળ રીતે ડાઉનલોડ કરવાની મંજૂરી આપે છે. તેનું નામ વર્લ્ડ વાઇડ વેબ (ડબલ્યુ) પરથી આવ્યું છે, અને "ગેટ" (અંગ્રેજીમાં મળે છે) માંથી, આનો અર્થ છે: ડબલ્યુડબલ્યુડબલ્યુથી મેળવો.

હાલમાં તે HTTP, HTTPS અને FTP પ્રોટોકોલનો ઉપયોગ કરીને ડાઉનલોડ્સને સપોર્ટ કરે છે.

તે તક આપે છે તે સૌથી બાકી સુવિધાઓ પૈકી વેગ જટિલ અરીસાઓનું વારંવાર ડાઉનલોડ કરવાની શક્યતા છે, એચટીએમએલ સામગ્રી સ્થાનિક રીતે પ્રદર્શિત કરવા માટે લિંક્સનું રૂપાંતર, પ્રોક્સીઓ માટે સપોર્ટ ...

De વેગ અમે પહેલાથી જ અહીં પૂરતી વાત કરી છે DesdeLinux. હકિકતમાં ya અમે જોયું હતું કે કેવી રીતે વિજેટ સાથે સંપૂર્ણ વેબસાઇટ ડાઉનલોડ કરવી, સમસ્યા એ છે કે આજકાલ સંચાલકો હંમેશાં કોઈને પણ તેમની આખી વેબસાઇટ ડાઉનલોડ કરવાની મંજૂરી આપતા નથી, તે એવું નથી કે તેઓ ખરેખર પસંદ કરે છે ... અને, દેખીતી રીતે હું સમજી શકું છું. સાઇટ ઇન્ટરનેટ પર તેની સલાહ લેવા માટે છે, વાચક રુચિની સામગ્રીને sesક્સેસ કરે છે અને સાઇટ એડમિનિસ્ટ્રેટરને મુલાકાત, વગેરે જેવા આર્થિક (જાહેરાત દ્વારા) સારી રીતે ફાયદો થાય છે. જો વાચક તેના કમ્પ્યુટર પર સાઇટ ડાઉનલોડ કરે છે, તો તેને પાછલી પોસ્ટની સલાહ લેવા માટે onlineનલાઇન જવું પડશે નહીં.

વિજેટ સાથે કોઈ સાઇટ ડાઉનલોડ કરવી તેટલી સરળ છે:

wget -r -k http://www.sitio.com

• -r : આ સૂચવે છે કે સંપૂર્ણ વેબસાઇટ ડાઉનલોડ કરવામાં આવશે.
• -k : આ સૂચવે છે કે ડાઉનલોડ કરેલી સાઇટની લિંક્સ ઇન્ટરનેટ વિના કમ્પ્યુટર પર જોવા માટે રૂપાંતરિત થશે.

હવે જ્યારે સાઇટ એડમિનિસ્ટ્રેટર અમને મુશ્કેલ બનાવે છે ત્યારે વસ્તુઓ જટિલ બને છે ...

કયા પ્રતિબંધો હોઈ શકે?

અમને જોવા મળતા સૌથી સામાન્ય એ છે કે જો તમારી પાસે માન્ય યુઝર એજન્ટ હોય તો જ સાઇટની .ક્સેસની મંજૂરી છે. બીજા શબ્દોમાં કહીએ તો, આ સાઇટ માન્ય કરશે કે યુઝર એજન્ટ કે જે ઘણા બધા પૃષ્ઠોને ડાઉનલોડ કરે છે તે "સામાન્ય" પૈકીનું એક નથી અને તેથી closeક્સેસ બંધ કરશે.

રોબોટ્સ.ટી.ટી.એસ.ટી. ફાઇલ દ્વારા પણ તમે તે વિજેટને સ્પષ્ટ કરી શકો છો (ટોળું વધુ સમાન એપ્લિકેશન્સ જેવા) તમે ક્લાયંટની ઇચ્છા મુજબ ડાઉનલોડ કરવા માટે સમર્થ હશો નહીં, સારું ... સાઇટ સંચાલક તે ઇચ્છે છે, સમયગાળો 😀

આ પ્રતિબંધોને કેવી રીતે અટકાવવું?

પ્રથમ કેસમાં આપણે યુગેજન્ટ માટે વિજેટ સ્થાપિત કરીશું, આપણે વિકલ્પ સાથે આ કરી શકીએ છીએ -વપરાશકર્તા એજન્ટ, અહીં હું તમને બતાવીશ કે કેવી રીતે:

wget --user-એજન્ટ = "મોઝિલા / 5.0 (એક્સ 11; લિનક્સ એએમડી 64; આરવી: 32.0 બી 4) ગેકો / 20140804164216 આર્કલિંક્સ કે.ડી. ફાયરફોક્સ / 32.0b4" -r http://www.site.com -k

હવે, રોબોટ્સ.ટીએસટીએસટી મેળવવા માટે, ફક્ત તે ફાઇલને બાકાત રાખો, એટલે કે, વિજેટ સાઇટ ડાઉનલોડ કરીએ અને રોબોટ્સ.ટીક્સ્ટ શું કહે છે તેની કાળજી લેતા નથી:

wget --user-એજન્ટ = "મોઝિલા / 5.0 (X11; લિનક્સ amd64; rv: 32.0b4) Gecko / 20140804164216 આર્કલિંક્સ કે.ડી. ફાયરફોક્સ / 32.0b4" -r http://www.site.com -k -e રોબોટ્સ = બંધ

હવે ... ત્યાં અન્ય વિકલ્પો અથવા પરિમાણો છે જેનો ઉપયોગ આપણે સાઇટને વધુ છેતરવા માટે કરી શકીએ છીએ, ઉદાહરણ તરીકે, સૂચવે છે કે આપણે ગૂગલથી સાઇટ દાખલ કરીએ છીએ, અહીં હું દરેક વસ્તુ સાથે અંતિમ વાક્ય છોડીશ:

wget --header = "સ્વીકારો: લખાણ / html" --user-એજન્ટ = "મોઝિલા / 5.0 (X11; લિનક્સ amd64; rv: 32.0b4) Gecko / 20140804164216 આર્કલિંક્સ કેડીએ ફાયરફોક્સ / 32.0b4" --referr = http: / /www.google.com -r http://www.site.com -e રોબોટ્સ = બંધ -કે

શું આ કરવું બરાબર છે?

તે નિર્ભર કરે છે ... તમારે હંમેશાં તે સાઇટના સંચાલક દ્વારા પણ વાચક તરફથી બંને દૃષ્ટિકોણથી જોવું પડશે.

એક તરફ, એડમિનિસ્ટ્રેટર તરીકે, મને નથી ગમતું કે તેઓ મારી સાઇટની એચટીએમએલ ક copyપિ તે જ રીતે લઈ રહ્યાં છે, તે અહીં આનંદ માટે નથી, બધાના આનંદ માટે છે ... અમારું લક્ષ્ય રસપ્રદ સામગ્રી છે તમારા માટે ઉપલબ્ધ છે, કે જે તમે શીખી શકો છો.

પરંતુ, બીજી તરફ ... એવા વપરાશકર્તાઓ છે કે જેમની પાસે ઘરે ઇન્ટરનેટ નથી, જેઓ અહીં આપેલા સંપૂર્ણ ટ્યુટોરિયલ્સ વિભાગને ગમશે ... મેં મારી જાતને તેમની જગ્યાએ મૂકી (હકીકતમાં હું છું, કારણ કે ઘરે મારી પાસે ઇન્ટરનેટ નથી) અને કમ્પ્યુટર પર રહેવું આનંદદાયક નથી, સમસ્યા છે અથવા કંઇક કરવાની ઇચ્છા છે અને સક્ષમ ન હોવાને લીધે કારણ કે તમને નેટવર્કનાં નેટવર્કમાં પ્રવેશ નથી.

તે યોગ્ય છે કે ખોટું તે દરેક સંચાલક પર છે, દરેકની વાસ્તવિકતા ... મને સૌથી વધુ ચિંતા થાય તેવું તે સ્રોતનો વપરાશ હશે જે સર્વર પરના વિજેટનું કારણ બને છે, પરંતુ સારી કેશ સિસ્ટમ સાથે તે સર્વર માટે પૂરતું હોવું જોઈએ નહીં. સહન.

તારણો

હું તમને હવે ડાઉનલોડ કરવાનું શરૂ ન કરવા કહું છું. DesdeLinux હા હા હા!! ઉદાહરણ તરીકે, મારી ગર્લફ્રેન્ડે મને કેટલીક જિયોમેટ્રી ડૅશ ચીટ્સ ડાઉનલોડ કરવાનું કહ્યું (કંઈક જેમ કે જીઓમેટ્રી ડૅશ ચીટ્સ), હું આખી વેબસાઇટ ડાઉનલોડ કરીશ નહીં, પરંતુ હું ફક્ત ઇચ્છિત પૃષ્ઠ ખોલીશ અને તેને પીડીએફ અથવા એચટીએમએલ અથવા કંઈકમાં સાચવીશ, તે આ છે. હું તમને શું ભલામણ કરીશ.

જો તમારી પાસે કોઈ ટ્યુટોરીયલ છે DesdeLinux જેને તમે સાચવવા માંગો છો, તેને તમારા બુકમાર્ક્સમાં HTML અથવા PDF તરીકે સાચવો... પરંતુ, એક કે બે ટ્યુટોરિયલ્સ માટે સર્વર પર અતિશય ટ્રાફિક અને વપરાશ જનરેટ કરવો જરૂરી નથી 😉

સારું કંઈ નથી, હું આશા રાખું છું કે તે ઉપયોગી છે ... શુભેચ્છાઓ