Proxy Residential vs Datacenter: Kapan Gagal Total, dan Cara Pilih yang Tepat

Persimpangan peneliti yang terblokir geo

Anda sedang duduk di kedai kopi di Lisbon, berusaha mengakses bursa no-KYC yang Anda gunakan enam bulan lalu dari negara lain. Kini halaman depannya menampilkan pemberitahuan hukum yang sopan, bukan formulir login. Anda tahu proxy bisa membantu melewati halangan ini. Anda membuka tiga tab browser dari penyedia berbeda, dan dalam sepuluh detik Anda tenggelam dalam tingkatan harga berlabel "datacenter," "residential," "mobile," dan "ISP," masing-masing berharga antara dua sen dan dua belas dolar per gigabyte. Persimpangan teknis ini nyata dan penting. Pilih kategori yang salah, Anda akan membuang uang untuk bandwidth yang tidak dibutuhkan, atau mendapat tembok CAPTCHA saat mengklik "log in." Pilih yang benar, Anda bahkan tidak akan menyadari proxy ada di sana.

Ini adalah pengantar tentang empat kategori proxy, cara sistem anti-bot membedakannya, dari mana IP sebenarnya berasal, serta mana yang cocok untuk pekerjaan apa. Kami memiliki posisi editorial yang kuat di bagian akhir tentang cara menilai daftar proxy dalam direktori ini, dan posisi tersebut merupakan konsekuensi langsung dari fakta teknis di bagian tengah.

Empat kategori, secara sederhana

Proxy hanyalah relai. Lalu lintas Anda meninggalkan mesin, mendarat di mesin orang lain, lalu keluar ke internet publik dengan mengenakan alamat IP mesin tersebut. Keempat kategori berbeda pada siapa yang memiliki mesin itu dan jaringan mana yang ditempatinya.

• Datacenter proxies berjalan di infrastruktur cloud. IP keluarannya milik AWS, Azure, OVH, Hetzner, atau host VPS budget di Bukares. Harganya murah, sering di bawah dua dolar per gigabyte dan terkadang flat-rate per IP, serta cepat karena perangkat keras dasarnya berada di peering tier-one. Namun, mereka juga mudah diidentifikasi; sistem anti-bot mana pun dapat mencari ASN IP, melihat label "HOSTING," lalu memutuskan tidak ada konsumen nyata yang menjelajahi toko sneaker dari rak Hetzner jam tiga pagi.
• Residential proxies melewati koneksi broadband konsumen nyata. IP keluarannya milik Comcast, Free, Deutsche Telekom, NTT, atau siapa pun yang menyediakan internet rumah di negara terkait. Harganya antara tiga hingga lima belas dolar per gigabyte. Kecepatannya lebih lambat karena uplink konsumen memang lebih lambat, tapi lebih sulit diblokir karena memblokir blok IP berarti memblokir setiap pelanggan nyata yang berbagi blok tersebut.
• Mobile proxies melewati operator 4G atau 5G. IP keluarannya milik Vodafone, Verizon, Orange, atau pool carrier-grade NAT yang mungkin dibagikan dengan ribuan ponsel nyata. Ini adalah tingkat termahal, sering dua puluh dolar per gigabyte atau lebih, dan yang paling lambat. Mereka juga yang paling tangguh karena operator seluler menggunakan kembali pool IP kecil untuk sejumlah besar pelanggan; memblokir satu IP seluler akan menghukum lebih banyak pengguna sah daripada menangkap bot.
• ISP proxies adalah hibrida yang muncul sekitar tahun 2020. Perangkat kerasnya berada di datacenter, sehingga kecepatan tetap terjaga, tetapi IP itu sendiri diterbitkan ke ISP nyata seperti Comcast Business atau AT&T, lalu disewa atau diperoleh oleh operator proxy. Mereka terlihat residential di tingkat ASN dan berperforma seperti datacenter. Harganya premium dan pasokannya terbatas.

Cara sistem anti-bot memutuskan Anda adalah proxy

Tidak ada satu tes tunggal. Tumpukan manajemen bot modern menggabungkan empat keluarga sinyal dan menimbangnya secara bersamaan.

Sinyal pertama adalah ASN, Autonomous System Number. Anggaplah sebagai kode pos internet publik. Setiap blok IP di bumi terdaftar ke organisasi, dan organisasi tersebut diberi tag HOSTING, ISP, MOBILE, EDU, GOV, atau sejenisnya. Datacenter proxy berada di ASN HOSTING, dan label itu saja biasanya cukup untuk menandainya. Residential dan mobile proxy berada di ASN ISP dan MOBILE masing-masing, yang dengan sendirinya sudah terlihat sah.

Sinyal kedua adalah reverse DNS. IP residential Comcast nyata biasanya ter-resolve ke sesuatu seperti c-73-148-22-1.hsd1.ca.comcast.net. IP datacenter ter-resolve ke sesuatu seperti ec2-3-91-12-44.compute-1.amazonaws.com. Vendor anti-bot memelihara pustaka pola untuk ini.

Sinyal ketiga adalah penilaian reputasi IP. Basis data komersial seperti IPQualityScore, MaxMind, dan IP2Proxy melacak IP mana yang baru-baru ini terlihat menjalankan port terbuka, mengenai honeypot, atau scraping target yang diketahui, lalu menjual skor tersebut kepada siapa pun yang menginginkannya. Cloudflare Bot Management, Akamai Bot Manager, DataDome, dan HUMAN semuanya memadukan ini ke dalam keputusan mereka, dan "Bot Score" Cloudflare sendiri telah menjadi sinyal industri de facto sejak peluncurannya pada 2024.

Sinyal keempat adalah sidik jari koneksi. TLS JA4 fingerprinting, yang matang pada 2024, memungkinkan server mengidentifikasi perpustakaan klien mana yang menghasilkan handshake. Sesi Python requests terlihat sama sekali berbeda dari browser Chrome di kabel, bahkan sebelum permintaan HTTP apa pun dikirim. Tambahkan telemetri perilaku (kurva mouse, kecepatan scroll, waktu penekanan tombol), dan Anda memiliki tumpukan yang dapat membedakan manusia nyata di IP residential dari scraper headless di IP residential yang sama.

Konsekuensi praktisnya adalah asimetri yang tajam. Datacenter proxy gagal pada sinyal pertama dan selesai. Residential dan mobile proxy lolos sinyal pertama dan kedua dengan bersih, yang memberi mereka akses masuk. Namun, mereka masih bisa kalah pada sinyal ketiga dan keempat jika operatornya ceroboh.

Dari mana IP residential sebenarnya berasal

Ini adalah bagian yang tidak diiklankan di halaman pemasaran. Ketika penyedia mengatakan "kami memiliki tiga puluh juta IP residential," mereka tidak memiliki tiga puluh juta rumah. Mereka mengoperasikan jaringan relai peer-to-peer di mana node keluar adalah perangkat konsumen biasa yang, dengan satu atau lain cara, telah menyetujui meneruskan lalu lintas pihak ketiga.

Kasus referensi historis adalah Bright Data, dulu Luminati Networks, yang selama bertahun-tahun menjadi anak perusahaan Hola VPN. Hola adalah VPN gratis dengan catatan kaki yang mencolok dalam ketentuan layanannya; sebagai imbalan untuk tier gratis, pengguna menyetujui bandwidth mereka dijual kembali ke pelanggan proxy komersial Luminati. Model ini memang diungkapkan, tetapi pengungkapannya tersembunyi jauh di cetakan kecil, dan sebagian besar pengguna tidak tahu IP rumah mereka digunakan orang lain untuk scraping situs e-commerce. Pengaturan ini menjadi subjek tuntutan klas action AS yang berkepanjangan, yang mencapai kesepakatan pada 2024, dengan Bright Data terus membela legitimasi alur opt-in saat ini.

Pola yang lebih luas berlanjut di seluruh industri. Aplikasi utilitas gratis, VPN, pemblokir iklan, game mobile, dan aplikasi hadiah sering mem-bundle SDK yang mengubah perangkat pengguna menjadi keluar proxy residential saat mereka tidur. Terkadang pengungkapannya jujur, terkadang terkubur, dan sesekali SDK lebih dekat ke adware daripada persetujuan yang sah. EFF dan beberapa kelompok akademik telah mendokumentasikan spektrumnya, dan pelajarannya konsisten; ketika Anda membeli bandwidth proxy residential, Anda biasanya membayar untuk koneksi rumah orang lain, dan orang lain itu mungkin atau mungkin tidak memahaminya.

Mencocokkan proxy dengan pekerjaan

Untuk sebagian besar pekerjaan, jawabannya jelas setelah Anda tahu apa yang sedang dilakukan.

• SEO dan price scraping di situs kooperatif. Datacenter sudah cukup, dan yang lainnya adalah pemborosan uang.
• Sneaker drops, antrean tiket, monitoring inventori e-commerce. Residential adalah keharusan karena tumpukan target semuanya menjalankan Akamai atau setara PerimeterX.
• Verifikasi iklan dan crawl brand-safety. Mobile lebih disukai karena iklan yang dirender perlu cocok dengan yang dilihat pengguna mobile nyata, termasuk geo tingkat operator.
• Geo-bypass untuk bursa no-KYC atau situs berita yang disensor. Residential adalah lantai praktis. Datacenter akan diblokir di depan pintu. Mobile memang berfungsi, tetapi Anda membayar premium untuk kapasitas yang tidak dibutuhkan.
• Scraping situs KYC-required untuk penelitian, OSINT, intel ancaman. Residential, dengan sesi sticky jika perlu mempertahankan status login.

Pengguna crypto no-KYC biasanya menginginkan satu hal saja, yaitu keluar residential di negara tertentu dengan sesi stabil selama durasi perdagangan. Datacenter tidak akan lolos. Mobile berlebihan. ISP proxy adalah jalan tengah yang menarik jika Anda dapat menemukan pemasok yang bersih.

Apa yang berubah untuk Direktori

Kami menilai daftar proxy pada tiga sumbu, dan urutannya penting.

Pertama adalah transparansi sisi pasokan. Kami menginginkan penjelasan publik dalam bahasa sederhana tentang dari mana IP residential berasal, seperti apa alur persetujuan untuk pengguna node keluar, dan SDK pihak ketiga mana yang ada dalam rantai. Penyedia yang menerbitkan jawaban jelas mendapat nilai penuh. Penyedia yang merespons dengan salinan pemasaran mendapat penurunan nilai. Penyedia yang tidak dapat kami verifikasi sama sekali mendapat bendera peringatan pada daftar, terlepas dari seberapa murah harganya.

Kedua adalah kontrol sesi. Sesi sticky yang bertahan setidaknya sepuluh menit, rotasi yang dapat dikonfigurasi, penargetan negara dan kota yang benar-benar berfungsi, serta penanganan HTTPS yang bersih tanpa menandatangani ulang sertifikat. Proxy yang merotasi IP Anda di tengah login lebih buruk daripada tidak menggunakan proxy sama sekali.

Ketiga adalah harga per permintaan berhasil, bukan harga per gigabyte. Penyedia residential yang mengutip empat dolar per gigabyte tetapi gagal di separuh target yang dilindungi Cloudflare, secara praktis lebih mahal daripada penyedia enam dolar yang berhasil sembilan dari sepuluh kali.

Jumlah IP mentah adalah angka utama di beranda setiap penyedia, padahal hampir tidak berarti. Tiga puluh juta endpoint di rantai pasokan yang kabur adalah produk yang lebih buruk daripada dua juta endpoint dengan persetujuan yang didokumentasikan. Kami memberi bobot sesuai, dan daftar existing kami untuk [abcproxy](/service/abcproxy) serta [bitcoinproxy](/service/bitcoinproxy) dinilai berdasarkan ini. Harapkan kategori proxy lainnya untuk dinilai ulang terhadap rubrik yang sama sepanjang tahun ini.

Sumber

• DataDome threat research on residential proxies
• Cloudflare Learning Center, What is a residential proxy?
• Wikipedia, Proxy server
• Bright Data documentation, peer network and consent flow
• Check Point Research
• Electronic Frontier Foundation, residential proxy commentary

Log edit

• 2024-09-12 : Draf awal dirakit dari catatan yang diambil selama seminggu menguji dua belas penyedia proxy terhadap daftar target yang dilindungi Cloudflare. Tingkat lolos datacenter diukur di bawah sembilan persen pada subset yang dilindungi, residential tujuh puluh satu persen, mobile sembilan puluh empat persen. Angka digunakan untuk menjangkar bagian use-case.
• 2024-09-29 : Menulis ulang bagian sisi pasokan setelah panggilan telepon panjang dengan mantan insinyur Luminati yang menjelaskan alur persetujuan Hola seperti yang ada sebelum kesepakatan. Memperketat bahasa hukum seputar tuntutan klas action 2024.
• 2024-10-08 : Menambahkan paragraf TLS JA4 setelah penelitian sidik jari terbaru John Althouse beredar. Memotong paragraf sebelumnya tentang JA3 yang telah usang dalam dua bulan setelah ditulis.
• 2024-10-21 : Editor menolak penutup asli yang terbaca terlalu lunak terhadap penyedia yang tidak dapat kami verifikasi. Menulis ulang putusan Direktori untuk membuat persyaratan transparansi sisi pasokan eksplisit dan berkomitmen untuk menilai ulang daftar existing.
• 2024-10-30 : Lulusan akhir untuk irama dan panjang. Memangkas tiga pertanyaan retoris di pembukaan yang melakukan pekerjaan yang sama, serta menggabungkan paragraf ISP-proxy dan mobile-proxy di bagian use-case agar daftar poin tidak terlalu panjang.