Hirdetés

2024. május 2., csütörtök

Gyorskeresés

Hozzászólások

(#1) futár


futár
aktív tag

Üdv. mindenkinek?
Adott egy Python Web Scraping script, amit a szerverünkön futtatunk. Feladata, hogy 2-3 oldalon a termékek elérhetőségét monitorozza és a Webshopunkban a vásárolható termékek elérhetőségét ennek megfelelően átállítja. A lényeg, hogy maga a Web Scraping publikus adatokat gyűjt, ezért ez teljesen szabad felhasználás. Viszont a 2 - 3 nagykereskedő, akiktől a termékeket vásároljuk, ők nem IT szakemberek és ezért nem is avattuk be őket a megoldásba. Az egyik ilyen nagyker, mivel saját IP címünkkel látszunk a neten, kitiltott bennünket. Nem csinál a script nagy adatforgalmat és nagy terhelést sem. Ezért a webfejlesztőnk Proxy-t javasol, hogy a folyamat tovább működhessen, hiba nélkül. Várom az ötleteket.
Köszi előre is!

[ Szerkesztve ]

Ha hallgattál volna, bölcs maradtál volna.

(#2) futár


futár
aktív tag

Valaki esetleg?

Ha hallgattál volna, bölcs maradtál volna.

(#3) 4Grider válasza futár (#1) üzenetére


4Grider
nagyúr

Sokkal egyszerűbb, ha a nagykerrel és a fejlesztőddel egyeztetsz. Mi az egyeztetés nélküli és egyszerre sok kérést küldő ip-ket tiltjuk. Senki nem akarja a szolgáltatását olyan ügyfél felé fenntartani, aki elviszi az erőforrások nagy részét napi X alkalommal. Ha pedig konkurencia vagy, jogos a tiltás.

(#4) Fecogame válasza futár (#1) üzenetére


Fecogame
veterán

Hálózatokról alaposan

Lassú a mobilinterneted? 4G/LTE antennák, közvetlenül raktárról ---> http://bit.ly/LTE_Antennak

Copyright © 2000-2024 PROHARDVER Informatikai Kft.