Veri Analizi ve Pazar Gözlemi için Mobil Proxy

Bir ürün ekibi, sektördeki ortalama fiyatın son üç ayda nasıl değiştiğini görmek isteyebilir. Bir pazarlama ekibi, rakip kategorilerdeki ürün sayısının hangi dönemlerde arttığını merak edebilir. Bir araştırmacı ise mobil ve masaüstü kullanıcılara farklı içerik sunulup sunulmadığını inceleyebilir. Hepsinin ortak noktası, kamuya açık bilgiyi düzenli toplayıp bir eğilime dönüştürmektir.

Burada proxy, analizin kendisi değil, gözlem noktasını belirleyen bir araçtır. Asıl iş, hangi sorunun yanıtlanacağını, hangi verinin buna yettiğini ve sonucun nasıl doğrulanacağını önceden tanımlamaktır. Veri toplamanın teknik tarafı için kamuya açık web verilerinin toplanması sayfasına bakabilirsiniz.

• Mobil gözlem noktası. Bazı siteler mobil ziyaretçilere farklı sayfa düzeni, ürün sıralaması ya da kampanya alanı gösterebilir. Mobil operatör hattından çıkış, bu görünümü incelemenize yardım eder.
• Ağ türü karşılaştırması. Aynı sayfanın mobil operatör ağından ve sabit bir bağlantıdan nasıl göründüğünü yan yana koymak, farkın ağ türüyle ilişkili olup olmadığını anlamaya yardım eder.
• Türkiye bakış açısı. Türkiye paketleri İstanbul lokasyonlu 4G/LTE hatlardır. Türkiye'deki bir mobil kullanıcının gördüğüne yakın bir gözlem için kullanılabilir; belirli bir şehir ya da semt temsil edilmez.
• Ayrı tutulmuş bir çıkış. Gözlem trafiğini ofis bağlantınızdan ayırmak, kayıtları ve kotayı ayrı yönetmenizi kolaylaştırır.

Proxy, analizin doğruluğunu tek başına artırmaz. Mobil operatör adresleri genellikle CGNAT arkasında paylaşımlıdır ve bu adreslerden çıkarılan konum kabadır; ayrıntı için CGNAT rehberine bakın. Bu nedenle her ölçümü “o hattın o andaki bir örneği” olarak değerlendirin.

1. Soruyu yazın

   “Kategori X'te ortalama fiyat aylık nasıl değişiyor?” gibi tek cümlelik bir soru belirleyin. Soru netleşmeden toplanan veri çoğunlukla kullanılmaz.

2. Örneklemi sabitleyin

   Hangi sayfaların, hangi sıklıkla ve hangi cihaz profiliyle okunacağını belirleyin. Örneklem sık değişirse eğilimle yöntem değişikliğini ayıramazsınız.

3. Proxy'yi bağlayın ve test edin

   Bağlantıyı Proxy Kontrol aracıyla deneyin. Ayar adımları için Mobil proxy nasıl kullanılır rehberine bakın.

4. Her ölçümle birlikte bağlamı kaydedin

   Değerin yanında tarih ve saat, sayfa adresi, çıkış IP'si, paket ve cihaz profilini saklayın. Bu alanlar sonradan sapmaları açıklamanın tek yoludur.

5. Temizleyin ve doğrulayın

   Eksik ya da hatalı okumaları işaretleyin, tekrar eden kayıtları ayıklayın ve ani sapmaları ikinci bir ölçümle doğrulayın.

6. Eğilimi yorumlayın

   Tek bir noktaya değil, zaman serisine bakın. Sonucu yöntemin sınırlarıyla birlikte raporlayın.

Aşağıdaki Python örneği önce proxy'nin çıkış IP'sini öğrenir, sonra hedef sayfayı okur ve sonucu bir CSV dosyasına ekler. Sayfanın içinden değeri çıkarma kısmı her sitede farklı olduğu için yalnızca durum kodu ve boyut kaydedilir. Yer tutucuları kendi bilgilerinizle değiştirin.

import csv
from datetime import datetime, timezone

import requests

PROXY = "http://KULLANICI_ADI:SIFRE@proxy.example.com:PORT"
proxies = {"http": PROXY, "https": PROXY}
TARGET = "https://www.example.com/kategori/ornek"

exit_ip = requests.get("https://api.ipify.org", proxies=proxies, timeout=30).text.strip()
page = requests.get(TARGET, proxies=proxies, timeout=30)

with open("gozlem.csv", "a", newline="", encoding="utf-8") as f:
    csv.writer(f).writerow([
        datetime.now(timezone.utc).isoformat(timespec="seconds"),
        TARGET,
        exit_ip,
        "mobil-proxy-tr",
        page.status_code,
        len(page.content),
    ])

Rotating Mobil Proxy'de, sağlayıcı beyanına göre varsayılan davranışta her istek farklı bir IP'den çıkabilir. Bu durumda yukarıdaki örnekte çıkış IP'sini soran istek ile sayfayı okuyan istek farklı adreslerden gidebilir; kaydı buna göre yorumlayın ya da aynı adresi korumak için sağlayıcının belirttiği isteğe bağlı oturum özelliğini kullanın. Ayrıntılar Sticky Session sayfasında.

• Kamuya açık veri. Giriş gerektiren alanlar, kişisel profiller ve iletişim bilgileri kapsam dışıdır.
• Ölçülü tempo. Gözlem sıklığını sorunun gerektirdiği kadar tutun; günlük bir eğilim için dakikada bir ölçüm gerekmez.
• Rekabet hukuku. Rakip fiyatlarını izlemek, fiyatları birlikte belirlemek anlamına gelmemelidir; bu konuda kurumunuzun hukuk birimine danışın.
• Kota. Kotalı paketlerde gereksiz dosyaları indirmeyin. Sınırsız ifadesi veri kotası içindir, hız için değildir.

Fiyat odaklı izleme için e-ticaret fiyat izleme, daha geniş araştırma senaryoları için pazar araştırması ve veri toplama sayfalarına bakabilirsiniz.