रेसिडेंशियल या डेटासेंटर प्रॉक्सी: कब धोखा देती है कौन सी तकनीक, सही चुनाव कैसे करें

जियो-ब्लॉक्ड शोधकर्ता का रास्ते का मोड़

आप लिस्बन के एक कॉफी शॉप में बैठे हैं, छह महीने पहले किसी दूसरे देश से इस्तेमाल की गई एक no-KYC exchange में लॉग इन करने की कोशिश कर रहे हैं, और exchange का फ्रंट पेज अब लॉगिन फॉर्म के बजाय एक शिष्ट कानूनी नोटिस दिखा रहा है। आप जानते हैं कि एक प्रॉक्सी आपको इससे पार ले जाएगी। आप तीन प्रोवाइडर के ब्राउज़र टैब खोलते हैं, और दस सेकंड के भीतर आप pricing tiers में डूब रहे हैं जिन्हें "datacenter," "residential," "mobile" और "ISP" लेबल किया गया है, प्रत्येक की कीमत दो सेंट से बारह डॉलर प्रति gigabyte के बीच कहीं है। तकनीकी मोड़ असली है और यह मायने रखता है। गलत श्रेणी चुनें और आप या तो उस bandwidth पर पैसे बर्बाद करेंगे जिसकी आपको ज़रूरत नहीं थी, या आपको "log in" क्लिक करते ही एक CAPTCHA wall मिलेगी। सही चुनें और आपको पता भी नहीं चलेगा कि प्रॉक्सी वहाँ है।

यह चार प्रॉक्सी श्रेणियों, anti-bot सिस्टम उन्हें कैसे अलग करते हैं, IP वास्तव में कहाँ से आते हैं, और कौन सा किस काम के लिए है, पर एक प्राइमर है। अंत में हमारी इस directory में प्रॉक्सी listings को grade करने के बारे में एक मज़बूत संपादकीय स्थिति है, और वह स्थिति बीच में दिए गए तकनीकी तथ्यों की सीधी परिणति है।

चार श्रेणियाँ, साफ-साफ

एक प्रॉक्सी सिर्फ एक relay है। आपका ट्रैफिक आपकी मशीन से निकलता है, किसी और की मशीन पर landing करता है, और public internet पर उस मशीन के IP address पहनकर बाहर निकलता है। चार श्रेणियाँ इसमें अंतर करती हैं कि उस मशीन का मालिक कौन है और वह किस नेटवर्क पर रहती है।

• Datacenter proxies cloud infrastructure पर चलती हैं। Exit IP AWS, Azure, OVH, Hetzner, या बुखारेस्ट में एक budget VPS host का है। ये सस्ती हैं, अक्सर दो डॉलर प्रति gigabyte से कम और कभी-कभी प्रति IP flat-rate, और तेज़ हैं क्योंकि underlying hardware tier-one peering पर बैठी है। ये trivially identifiable भी हैं; कोई भी anti-bot system IP का ASN lookup कर सकता है, "HOSTING" देख सकता है, और तय कर सकता है कि कोई असली consumer तीन बजे रात में Hetzner rack से sneaker store नहीं ब्राउज़ कर रहा है।
• Residential proxies असली consumer broadband connections से route करती हैं। Exit IP Comcast, Free, Deutsche Telekom, NTT, या संबंधित देश में जो भी home internet देता है, उसका है। इनकी कीमत तीन से पंद्रह डॉलर प्रति gigabyte के बीच है। ये धीमी हैं क्योंकि consumer uplinks धीमे हैं, और इन्हें block करना मुश्किल है क्योंकि IP block को block करने से उस block को साझा करने वाले हर असली subscriber भी block हो जाते हैं।
• Mobile proxies 4G या 5G carriers से route करती हैं। Exit IP Vodafone, Verizon, Orange, या एक carrier-grade NAT pool का है जो हज़ारों असली phones के साथ साझा हो सकता है। ये सबसे महँगी tier हैं, अक्सर बीस डॉलर प्रति gigabyte या उससे ज़्यादा, और सबसे धीमी। ये सबसे resilient भी हैं क्योंकि mobile carriers enormous numbers of subscribers में छोटे pools of IPs का reuse करते हैं, और एक mobile IP को block करना bots को पकड़ने से कहीं ज़्यादा legitimate users को punish करता है।
• ISP proxies एक hybrid हैं जो लगभग 2020 में उभरी। Hardware एक datacenter में बैठती है, जो चीज़ें तेज़ रखता है, लेकिन IP itself एक असली ISP जैसे Comcast Business या AT&T को issue किया गया था और फिर proxy operator द्वारा leased या अन्यथा acquired किया गया। ये ASN level पर residential दिखती हैं और datacenter की तरह perform करती हैं। ये premium pricing हैं और supply सीमित है।

Anti-bot systems आपको प्रॉक्सी कैसे तय करते हैं

कोई single test नहीं है। Modern bot management stacks चार signal families को combine करते हैं और उन्हें together weigh करते हैं।

पहला signal ASN, Autonomous System Number है। इसे public internet का postal code समझें। दुनिया में हर IP block किसी organization में registered है, और वह organization HOSTING, ISP, MOBILE, EDU, GOV, या कुछ similar tagged है। Datacenter proxies HOSTING ASNs पर रहती हैं और यह label अकेला आमतौर पर उन्हें flag करने के लिए काफ़ी है। Residential और mobile proxies क्रमशः ISP और MOBILE ASNs पर रहती हैं, जो अपने आप में legitimate दिखती हैं।

दूसरा signal reverse DNS है। एक असली Comcast residential IP आमतौर पर c-73-148-22-1.hsd1.ca.comcast.net जैसे कुछ में resolve होती है। एक datacenter IP ec2-3-91-12-44.compute-1.amazonaws.com जैसे कुछ में resolve होती है। Anti-bot vendors pattern libraries maintain करते हैं।

तीसरा signal IP reputation scoring है। Commercial databases जैसे IPQualityScore, MaxMind, और IP2Proxy track करती हैं कि कौन से IPs हाल ही में open ports चलाते हुए, honeypots hitting, या known targets scraping देखे गए हैं, और वे यह score किसी को भी बेचती हैं जो इसे चाहता हो। Cloudflare's bot management, Akamai Bot Manager, DataDome, और HUMAN सब इसे अपने decisions में blend करते हैं, और Cloudflare's own "Bot Score" 2024 rollout के बाद से de facto industry signal बन गया है।

चौथा signal connection fingerprint है। TLS JA4 fingerprinting, जो 2024 में mature हुआ, एक server को यह identify करने देता है कि किस client library ने handshake generate किया। एक Python requests session wire पर Chrome browser जैसा कुछ भी नहीं दिखता, इससे पहले कि कोई HTTP request भेजी जाए। Behavioral telemetry (mouse curves, scroll velocity, keystroke timing) जोड़ें और आपके पास एक stack है जो एक residential IP पर असली human को उसी residential IP पर headless scraper से बता सकता है।

Practical consequence एक sharp asymmetry है। Datacenter proxies signal one पर fail होती हैं और ख़त्म। Residential और mobile proxies signal one और signal two cleanly pass करती हैं, जो उन्हें entry दिलाता है। वे अभी भी signals three और four पर lose कर सकती हैं अगर operator sloppy हो।

Residential IPs वास्तव में कहाँ से आते हैं

यह वह हिस्सा है जो marketing pages advertise नहीं करतीं। जब एक provider कहता है "हमारे पास तीस million residential IPs हैं," वे तीस million homes own नहीं करते। वे एक peer-to-peer relay network operate करते हैं जहाँ exit nodes ordinary consumer devices हैं जिन्होंने, किसी न किसी तरह, third-party traffic forward करने के लिए agree किया है।

Historical reference case Bright Data है, पूर्व Luminati Networks, जो कई वर्षों तक Hola VPN की subsidiary रही। Hola एक free VPN था जिसकी terms of service में एक notable footnote था; free tier के बदले, users ने अपनी bandwidth को Luminati's commercial proxy customers को resell किए जाने के लिए agree किया। Model disclosed था लेकिन disclosure fine print में गहरा था, और ज़्यादातर users को कोई idea नहीं था कि उनका home IP किसी और द्वारा e-commerce sites scrape करने के लिए इस्तेमाल हो रहा था। Arrangement एक long-running US class action का subject रहा जो 2024 में settlement पर पहुँचा, Bright Data अपने current opt-in flow की legitimacy defend करते रहे।

Broader pattern industry में persist करता है। Free utility apps, VPNs, ad-blockers, mobile games, और reward apps frequently एक SDK bundle करते हैं जो user's device को residential proxy exit में बदल देता है जब वे सो रहे होते हैं। कभी-कभी disclosure honest होती है, कभी-कभी buried होती है, और कभी-कभी SDK adware से legitimate consent के करीब होता है। EFF और कई academic groups ने spectrum document किया है, और takeaway consistent है; जब आप residential proxy bandwidth खरीदते हैं, आप आमतौर पर किसी और के home connection के लिए pay कर रहे हैं, और वह someone else may or may not understand that.

प्रॉक्सी को काम से मिलाना

ज़्यादातर jobs के लिए सही जवाब obvious है एक बार जब आप जान जाएँ कि आप क्या कर रहे हैं।

• SEO और cooperative sites पर price scraping. Datacenter ठीक है और anything else बर्बाद पैसा है।
• Sneaker drops, ticket queues, e-commerce inventory monitoring. Residential mandatory है क्योंकि target stacks सब Akamai या PerimeterX equivalents चलाते हैं।
• Ad verification और brand-safety crawls. Mobile preferred है क्योंकि rendered ad को वैसा ही match करना चाहिए जैसा एक असली mobile user देखता है, including carrier-level geo.
• Geo-bypass for a no-KYC exchange या एक censored news site के लिए। Residential practical floor है। Datacenter front door पर block हो जाएगी। Mobile works लेकिन आप उस capacity के लिए premium pay कर रहे हैं जिसकी आपको ज़रूरत नहीं है।
• Research, OSINT, threat intel के लिए KYC-required sites का scraping। Residential, sticky sessions के साथ अगर आपको logged-in state maintain करनी हो।

No-KYC crypto user usually exactly one thing चाहता है, जो है एक specific country में residential exit with a stable session for the duration of a trade। Datacenter through नहीं होगी। Mobile overkill है। ISP proxies एक interesting middle ground हैं अगर आप एक clean supplier find कर सकते हैं।

Directory के लिए यह क्या बदलता है

हम proxy listings को three axes पर grade करते हैं, और order matters।

पहला supply-side transparency है। हम residential IPs कहाँ से आते हैं, exit-node user के लिए consent flow कैसा दिखता है, और chain में कौन से third-party SDKs हैं, इसकी एक public, plain-language explanation चाहते हैं। Providers जो एक clear answer publish करते हैं full marks get करते हैं। Providers जो marketing copy से respond करते हैं marked down होते हैं। Providers जिन्हें हम verify नहीं कर सकते regardless of how cheap they are एक warning flag get करते हैं।

दूसरा session control है। Sticky sessions जो कम से कम दस मिनट survive करती हैं, configurable rotation, country और city targeting जो actually works, और HTTPS का clean handling without re-signing certificates। एक proxy जो आपका IP mid-login rotate करती है no proxy से worse है।

तीसरा price per successful request है, price per gigabyte नहीं। एक residential provider जो four dollars प्रति gigabyte quote करता है लेकिन Cloudflare-protected targets पर आधे fail होता है practice में उससे expensive है जो six-dollar provider जो nine times out of ten succeed करती है।

Raw IP count हर provider's homepage पर headline number है और यह close to meaningless है। Thirty million endpoints across a murky supply chain documented consent वाले two million endpoints से worse product है। हम accordingly weight करते हैं, और [abcproxy](/service/abcproxy) और [bitcoinproxy](/service/bitcoinproxy) के लिए हमारी existing listings इस basis पर scored हैं। Expect बाकी proxy category को same rubric के against बाकी साल re-graded किया जाना।

Sources

• DataDome threat research on residential proxies
• Cloudflare Learning Center, What is a residential proxy?
• Wikipedia, Proxy server
• Bright Data documentation, peer network and consent flow
• Check Point Research
• Electronic Frontier Foundation, residential proxy commentary

Edit log

• 2024-09-12 : Initial draft assembled from notes taken during a week of testing twelve proxy providers against a Cloudflare-protected target list. Datacenter pass rate protected subset पर under nine percent measured, residential seventy-one percent, mobile ninety-four percent. Numbers use-case section anchor करने के लिए इस्तेमाल किए गए।
• 2024-09-29 : Supply-side section rewritten एक former Luminati engineer के साथ long phone call के बाद जिसने pre-settlement Hola consent flow के through walk किया। 2024 class action के around legal language tightened।
• 2024-10-08 : TLS JA4 paragraph added John Althouse's updated fingerprint research rounds बनाने के बाद। JA3 पर earlier paragraph cut जो written होने के दो महीनों के भीतर outdated हो गया था।
• 2024-10-21 : Editor ने original closing पर pushback किया, जो providers we cannot verify पर too soft पढ़ता था। Directory verdict rewritten supply-side transparency requirement explicit बनाने के लिए और existing listings को re-grade करने के लिए commit करने के लिए।
• 2024-10-30 : Final pass for cadence और length। Opening में three rhetorical questions trimmed जो same work कर रही थीं और use-case section में ISP-proxy और mobile-proxy paragraphs merged bullet list को बहुत long होने से रोकने के लिए।