Kumpulan proxy: struktur, jenis, akses

penutup kumpulan proxy

Apa itu proxy pool?

A Kumpulan proksi adalah istilah untuk sejumlah besar alamat IP yang disediakan oleh penyedia proxy secara bersamaan. Alih-alih menggunakan satu IP proksi tetap, digunakan akses dinamis yang secara otomatis menetapkan IP berbeda dari kumpulan untuk setiap koneksi.

Istilah “proxy pool” digunakan hampir secara eksklusif sehubungan dengan proxy yang berputar digunakan – yaitu sistem yang alamat IP-nya berubah secara berkala. Sasarannya: untuk mendistribusikan sejumlah besar permintaan ke banyak IP berbeda untuk menghindari pemblokiran, captcha, atau batasan kecepatan.

Bergantung pada penyedianya, kumpulan proksi dapat terdiri dari IP dari pusat data, rumah tangga, jaringan seluler, atau penyedia internet. Ukuran, komposisi dan kualitas kolam ini memiliki dampak besar pada kinerja sistem.

 

Bagaimana cara kerja proxy pool secara teknis?

Secara teknis, kumpulan proxy didasarkan pada apa yang disebut Sistem sambung balik. Pengguna tidak terhubung langsung ke alamat IP tertentu, tetapi ke titik akses tetap – biasanya nama host dengan port (misalnya de.proxyanbieter.com:10000). Ini bertindak sebagai Gerbang ke seluruh infrastruktur kolam renang.

struktur kumpulan proxy

Di latar belakang, penyedia memilih dan meneruskan lalu lintas melalui salah satu dari banyak server proxy, yang masing-masing memiliki alamat IP sendiri. Penetapan IP dilakukan secara dinamis – baik secara otomatis atau berdasarkan parameter tertentu.

Metode rotasi IP umum:

  • Rotasi per permintaan: IP baru ditetapkan untuk setiap koneksi. Ideal untuk pengikisan agresif atau akses terdistribusi.

  • Rotasi yang dikontrol waktu: IP tetap aktif selama jangka waktu tertentu (misalnya 5-10 menit) sebelum diubah.

  • Sesi lengket: Dengan menggunakan ID sesi (misalnya dalam nama pengguna), IP dapat dipertahankan di beberapa permintaan.

  • Kontrol berbasis port: Port yang berbeda mewakili jenis rotasi yang berbeda. Contoh: Pelabuhan 10000 = Rotasi, Port 10001 = Lengket.

  • Prinsip round robin atau acak: IP didistribusikan secara siklis atau acak, sering kali mengecualikan IP yang baru saja digunakan.

Kontrol melalui data akses:

Banyak pemasok mengkodekan parameter kontrol langsung ke dalam Nama belakang:

  • kunde123-country-us-session-abc123 → IP AS + Sesi Lengket

  • kunde123-session-random → Rotasi acak pada setiap akses

  • kunde123-const → Sesi tidak boleh berubah jika terjadi kegagalan IP (opsional)

Autentikasi bergantung pada penyedia:

  • Otentikasi Dasar HTTP dengan nama pengguna/kata sandi

  • atau Daftar putih IP (misalnya dengan proxy khusus)

Contoh format proksi:

Fitur lanjutan dari penyedia perusahaan:

  • Mekanisme failover untuk IP yang diblokir

  • Penyematan IP untuk sesi yang konsisten meskipun ada rotasi

  • Penargetan geografis dan ASN melalui nama pengguna atau API

  • akses API untuk mengelola ID sesi, batasan atau aturan filter

Gerbang proksi bertindak sebagai pengatur cerdas: seluruh kerumitan peralihan IP, pemilihan, penyaringan, dan penanganan kesalahan berjalan di latar belakang di sisi penyedia.

Apa saja jenis kumpulan proxy yang ada?

Tidak semua kumpulan proksi itu sama. Bergantung pada sumber alamat IP dan bagaimana akses diatur, struktur, opsi kontrol, dan stabilitasnya sangat bervariasi. Berikut ini adalah deskripsi realistis dari jenis kolam yang paling umum:

1. Kumpulan pusat data

Kumpulan pusat data terdiri dari ribuan atau bahkan puluhan ribu IP yang dioperasikan melalui mesin virtual (VPS) di pusat data di seluruh dunia. Server ini biasanya dikonfigurasikan secara seragam, beroperasi sepanjang waktu dan memberikan kecepatan koneksi tinggi secara konsisten. Pengguna terhubung melalui gateway – IP tetap atau domain dengan port – dan diberi IP acak dari kumpulan.

Beberapa penyedia mengizinkan Anda memengaruhi server target melalui parameter. Misalnya, Anda dapat menentukan:

  • Di mana negara di mana IP harus ditempatkan

  • Yang protokol (HTTP/SOCKS5) diperlukan

  • Bagaimana panjang IP harus dipertahankan (kontrol sesi lengket)

Perbedaan antar IP sangat minimal – semuanya kuat secara teknis, tetapi juga memiliki kelemahan: banyak situs web mengenali IP ini sebagai buatan (lingkungan hosting), yang dapat menyebabkan pemblokiran. Seringkali tidak dapat digunakan, terutama pada halaman login, fungsi pembayaran, atau sistem yang sensitif terhadap perilaku.

2. Kumpulan ISP

Proksi ISP ditawarkan oleh penyedia yang memiliki kontrak dengan penyedia internet nyata – misalnya B. Telekom, Vodafone, Orange atau Comcast. IP secara resmi berasal dari ISP ini, tetapi dihosting di server di pusat data. Artinya koneksi tersebut secara fisik berjalan melalui server hosting, tetapi dari luar terlihat seperti koneksi rumah.

Ini merupakan keuntungan bagi pengguna: Saat membuat koneksi, dia tidak hanya dapat wilayah memilih, tetapi sering juga yang diinginkan ISP Contoh: Pengguna hanya menginginkan IP yang berasal dari penyedia Jerman seperti Telekom atau Vodafone – ia dapat memilihnya secara khusus.

Akses lagi melalui gerbang pusat dengan nama pengguna dan kata sandi. Parameter sesi tambahan memungkinkan IP disimpan selama beberapa menit. Stabilitasnya tinggi, tetapi ada risiko tertentu bahwa penyedia IP (misalnya ISP) sendiri akan mengubah IP setelah beberapa waktu – tanpa campur tangan penyedia proxy.

Kasus Penggunaan: Jika Anda ingin membangun sistem yang hanya terlihat seperti itu, misalnya B. dari Jerman melalui Vodafone atau O2 berfungsi – tanpa nama host atau perilaku IP yang merusak kesan ini – kumpulan ISP adalah pilihan yang tepat.

3. Kolam renang perumahan

Segala sesuatunya menjadi sangat rumit dengan kolam renang perumahan. Ini terdiri dari IP yang berjalan melalui koneksi rumah tangga nyata – sering kali melalui perangkat yang memiliki VPN, aplikasi dengan SDK terintegrasi, atau plugin browser yang terpasang. IP berasal dari ratusan negara, penyedia, jenis koneksi, dan bahkan jenis koneksi yang berbeda (serat optik, DSL, seluler).

Oleh karena itu kolam renang adalah campuran global, yang terus berubah. IP yang Anda dapatkan hari ini mungkin tidak tersedia besok. Dan setiap IP memiliki karakteristiknya sendiri: kecepatan, ping, stabilitas, status daftar hitam.

Yang membuat kolam renang rumah tinggal istimewa adalah penyaringannya. Penyedia yang baik memperbolehkan penargetan dengan:

  • Negara, wilayah, kota

  • ISP

  • Jenis perangkat atau jenis koneksi

  • ASN (misalnya hanya rumah tangga dengan Vodafone di Berlin)

Namun, “10 juta IP” yang disebutkan dalam teks iklan tersebut menyesatkan. Angka tersebut sering mengacu pada total historis (misalnya IP yang online sekali dalam sebulan terakhir). Apa sebenarnya tersedia sekarang juga hanya dapat diketahui melalui pengujian aktif – banyak penyedia tidak menawarkan angka atau daftar sebenarnya.

Kekurangan: Anda tidak pernah tahu secara pasti Berapa lama IP tetap tersedia. Koneksi bisa tidak stabil atau lambat menjadi. Dan: Tidak ada jaminan bahwa Anda akan mendapatkan IP dengan properti yang Anda inginkan pada permintaan berikutnya.

4. Kolam renang bergerak

Di sektor seluler, ada dua kelas penyedia yang sangat berbeda:

Opsi A – Infrastruktur modem sendiri
Penyedia itu sendiri mengoperasikan modem 3G/4G/5G (misalnya stik Huawei atau router LTE) yang di dalamnya dimasukkan kartu SIM asli dari berbagai operator jaringan. Sistem ini terletak di rak dan dikontrol oleh perangkat lunak: Pengguna dapat API mengubah IP, menetapkan batas waktu sesi, atau bahkan secara khusus menghentikan perubahan selama IP yang sama akan dipertahankan.

Kolam seperti itu biasanya hanya terdiri dari beberapa ratus hingga seribu IP, tetapi secara teknis sepenuhnya terkendali. Pilihan ideal untuk proyek dengan toleransi kesalahan rendah dan visibilitas tinggi (misalnya Google Ads, TikTok, platform tiket).

Varian B – IP Seluler dari kumpulan perumahan
Penyedia hanya mengekstrak IP yang telah diidentifikasi sebagai “mobile” di jaringan rumah – misalnya, dari telepon pintar dengan koneksi LTE yang telah terintegrasi ke dalam sistem melalui VPN atau SDK. IP ini kurang stabil, dapat hilang kapan saja dan sering kali tidak menawarkan kontrol.

Kolam renang seperti itu lebih murah dan terlihat “mobile” di atas kertas – tetapi dalam praktiknya, kontrolnya terbatas atau bahkan tidak ada.

fiturpusat dataPerumahanselulerISP (Res. Statis)
Sumber IPPusat data, awanRumah tangga melalui SDK, VPN, P2PPerangkat seluler (4G/5G, modem sendiri atau P2P)Disewa dari ISP, ditugaskan secara permanen
KoneksiServer virtualPerangkat pengguna di rumahPonsel pintar, router LTE, dongleServer dengan IP ISP asli
Rotasi IPDikendalikan secara manual atau backconnectSecara otomatis, dengan pergantian rekanSangat umum, terkait jaringanDiukur oleh penyedia atau ISP
Sesi LengketMungkinMungkin (selama rekan aktif)Mungkin, tapi seringkali tidak stabilSangat stabil dengan IP statis
Ukuran kolamRibuan hingga >100.000 IP10–100 juta (tetapi sangat bervariasi)Ratusan ribu, namun seringkali dinamisBeberapa ribu hingga maksimal 100.000
anonimitasRendah, mudah dikenaliTinggi, sulit dilihatSangat tinggi, jarang diblokirTinggi, karena alokasi perumahan riil
stabilitasSangat tinggiSedang, tergantung pada rekanRendah hingga sedang, tergantung jaringan dan peruteanTinggi, sebanding dengan server khusus
BiayaJumlah kecilSedang hingga tinggi (menurut GB)Sangat tinggi (berdasarkan lalu lintas atau per pelabuhan)Tinggi (biasanya per IP + mungkin GB)
Area aplikasiPengikisan cepat, volume tinggiUniversal, ideal untuk penargetan geografisVerifikasi iklan, media sosial, target sensitifLogin, sesi stabil, pekerjaan jangka panjang
JenisProksi Pusat Data
Sumber IPPusat data, awan
KoneksiServer virtual
Rotasi IPDikendalikan secara manual atau backconnect
Sesi LengketMungkin
Ukuran kolamRibuan hingga >100.000 IP
anonimitasRendah, mudah dikenali
stabilitasSangat tinggi
BiayaJumlah kecil
Area aplikasiPengikisan cepat, volume tinggi
JenisProksi Perumahan
Sumber IPRumah tangga melalui SDK, VPN, P2P
KoneksiPerangkat pengguna di rumah
Rotasi IPSecara otomatis, dengan pergantian rekan
Sesi LengketMungkin (selama rekan aktif)
Ukuran kolam10–100 juta (tetapi sangat bervariasi)
anonimitasTinggi, sulit dilihat
stabilitasSedang, tergantung pada rekan
BiayaSedang hingga tinggi (menurut GB)
Area aplikasiUniversal, ideal untuk penargetan geografis
JenisProksi Seluler
Sumber IPPerangkat seluler (4G/5G, modem sendiri atau P2P)
KoneksiPonsel pintar, router LTE, dongle
Rotasi IPSangat umum, terkait jaringan
Sesi LengketMungkin, tapi seringkali tidak stabil
Ukuran kolamRatusan ribu, namun seringkali dinamis
anonimitasSangat tinggi, jarang diblokir
stabilitasRendah hingga sedang, tergantung jaringan dan perutean
BiayaSangat tinggi (berdasarkan lalu lintas atau per pelabuhan)
Area aplikasiVerifikasi iklan, media sosial, target sensitif
JenisProksi ISP (Residensial Statis)
Sumber IPDisewa dari ISP, ditugaskan secara permanen
KoneksiServer dengan IP ISP asli
Rotasi IPDiukur oleh penyedia atau ISP
Sesi LengketSangat stabil dengan IP statis
Ukuran kolamBeberapa ribu hingga maksimal 100.000
anonimitasTinggi, karena alokasi perumahan riil
stabilitasTinggi, sebanding dengan server khusus
BiayaTinggi (biasanya per IP + mungkin GB)
Area aplikasiLogin, sesi stabil, pekerjaan jangka panjang

Kesimpulan

Kumpulan proksi merupakan tulang punggung infrastruktur proksi modern. Alih-alih bekerja dengan IP individual yang tetap, pengguna mendapatkan akses ke rentang IP yang dikelola secara dinamis – dikontrol melalui gateway pusat. Bergantung pada jenisnya (pusat data, perumahan, seluler atau ISP), struktur, perilaku, opsi kontrol, dan biaya sangat bervariasi. Siapa pun yang memahami cara kerja kumpulan dan memfilter secara khusus (misalnya berdasarkan lokasi geografis, penyedia, atau durasi sesi) dapat bekerja dengan efisiensi tinggi dan secara khusus menghindari pemblokiran. Faktor penentu di sini adalah bukan hanya jenis IP saja yang diperhitungkan, tetapi juga implementasi teknis oleh penyedia.

Satu catatan akhir yang penting: Jangan begitu saja mengandalkan angka dan janji di situs web penyedia. Istilah seperti “10 juta IP” sering kali merupakan nilai pemasaran yang tidak memiliki arti apa pun untuk pengaturan spesifik Anda. Selalu uji akses sebelum membeli – meskipun tidak ada opsi uji coba yang ditentukan. Banyak penyedia masih menyediakan akses uji coba berdasarkan permintaan melalui formulir kontak atau dukungan.

Nama saya Kadek dan saya seorang pelajar dari Indonesia dan sedang belajar ilmu komputer di Jerman. Blog ini berfungsi sebagai platform di mana saya dapat berbagi pengetahuan tentang topik-topik seperti web scraping, screen scraping, penambangan data web, pengumpulan web, ekstraksi data web, dan penguraian data web.