Új hozzászólás Aktív témák

• #20505 Taci addikt nevemfel #20504

  Új Válasz 2021-03-28 17:17:10 #20505

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  Taci

  addikt

  válasz nevemfel #20504 üzenetére

  Na visszamentem szinte nullára, teljesen más irányból közelítettem, de a vége így is ugyanaz:
  az Index-től csak 21 link tartalmát tudom leszedni egyszerre. Az Origo-tól az összeset.

  Egy kicsit részletesebben:
  Az Index RSS feed-je 60 elemet tartalmaz, az Origoé 50-et. Ezeken én egyesével végigmegyek, a file() funkcióval pedig mindegyiknek a tartalmán.
  Na az Origo az hagyja mind az 50 link megnyitását és szétszedését, de az Index 21 után "letilt".

  Bele raktam ezért 20-hoz egy 60 mp-es várakozást (sleep(60)), és utána hagytam folytatni. Ekkor már 26-ig ment el az Indexnél.
  Aztán ezt a várakozást átállítottam 120 mp-re, és így végig ment az összes Indexes elemen is.

  Szóval a legtöbb problémát ez okozta, 1 teljes napom ráment ezt az Indexes "limitet" felderíteni.

  Ezt hogyan lehet a legjobban kezelni? Van rá mód megállapítani, hogy hol van ez az Indexes "határ", hogy ki tudjam centizni?

Új hozzászólás Aktív témák