የፊት ፕሮክሲ ለጠሳሽ robots.txt ን ያስፈጽማል?
የrobots ፖሊሲውን በጠሳሹ ውስጥ ያቆዩ፤ በፊት ፕሮክሲ ላይ ሲፈጸም ያለውን ገደብ ይረዱ።
ለጠሳሽ የHTTP ፕሮክሲ መስጠት ጥያቄዎቹ ወደ ድረ-ገጹ የሚደርሱበትን መንገድ ይለውጣል። ፕሮክሲው robots.txt እንዲያመጣ፣ የጠሳሹን የህግ ቡድን እንዲመርጥ ወይም ጥያቄዎቹን በትህትና እንዲያቅድ አያደርግም።
Robots Exclusion Protocol ለጠሳሾች ህጎችን ይገልጻል። ማዛመጃን፣ በማምጣት ላይ የሚፈጠሩ ውድቀቶችን፣ ማዞሪያዎችን እና የመሸጎጫ ባህሪን ያካትታል። የተጠየቀውን ሰነድ በቀላሉ የሚያስተላልፍ ፕሮክሲ ያንን ፖሊሲ በጠሳሹ ስም አልተግባራዊ አድርጎም።
የህጉን ውሳኔ ከጠሳሹ የጥያቄ ወረፋ አጠገብ ያቆዩት። ስራ ከመላኩ በፊት የታሰበው ማንነት፣ የዒላማው URI እና የጊዜ ሰሌዳ ሁኔታ የሚገኙት እዚያ ነው።
በፕሮክሲ በኩል ያለ ማጣሪያ ከሚመስለው የበለጠ አስቸጋሪ የሆነው ለምንድን ነው
ለተራ HTTP፣ በልዩ ሁኔታ የተገነባ ማጣሪያ የዒላማውን መንገድና User-Agent ማየት ይችላል። አሁንም እውነተኛ የህግ ትግበራና የrobots ፋይሉን ለማምጣት፣ ለማሸጎጥና ለማዘመን የተወሰነ ፖሊሲ ይፈልጋል። ጥቂት የDisallow መስመሮችን ወደ ቋሚ የURL እገዳዎች መቀየር ሙሉው ፕሮቶኮል አይደለም።
በተራ CONNECT በኩል ለሚሄድ HTTPS፣ የፊት ፕሮክሲው የቱኒሉን መዳረሻ እንጂ እያንዳንዱን የተመሰጠረ ገጽ መንገድና ውስጣዊውን User-Agent አያይም። ሌላ ሆን ተብሎ የተዘጋጀ አማራጭ ካልሰጠው በስተቀር በመንገድ ደረጃ የrobots ውሳኔ ለማድረግ የሚያስፈልገው መረጃ የለውም።
የመውጫውን IP መቀየርም የተከለከለውን መንገድ ወደ የተፈቀደ አይለውጠውም። የጠሳሹን እንቅስቃሴ በሚጋሩ ሰራተኞች መካከል ፍጥነቱን ያስተባብሩ፤ መንገዶችን ማሽከርከር የዚያ ፖሊሲ ምትክ አይደለም።
በመጨረሻም፣ የrobots ህጎች የመዳረሻ ፈቃድ አይደሉም። የተፈቀደ መንገድ ማረጋገጫን ወይም የጣቢያውን ሌሎች የመዳረሻ መስፈርቶች አይሽርም፤ ህዝባዊ የrobots ፋይልም የግል ይዘትን አያስጠብቅም።