"Liikaa tilastopyyntöjä"

Sivustoon liittyvä keskustelu, parannusehdotukset, risut ja ruusut...
Avatar
Forestress
Viestit: 174
Liittynyt: La 17.09.2011 12:20

"Liikaa tilastopyyntöjä"

Viesti Kirjoittaja Forestress » Ma 20.03.2023 17:35

"Ole hyvä ja yritä hetken päästä uudelleen."
Niinpä niin.

Kun geenit ja ympäristö ovat antaneet kieroutuneen luonteen, joka kannustaa runsaaseen haasteiden suorittamiseen, on geocache.fi:n tilastoanti perussivuineen varsin vajavainen. En kuitenkaan toivo, että tilastojen variaatioita alettaisiin julkaisemaan automaattisesti yhtään sen enempää kuin nyt. Olen jo aikaa sitten askarrellut itselleni webbisivuston, joka luo kullekin keskeneräiselle haasteelle oman nettisivun, josta voin seurata, mitä kukin haastekätkö vielä vaatisi. Jo jonkin aikaa sivuston tyypillisin tilasto on ollut "Liikaa tilastopyyntöjä" -sivu, jonka logiikan haluaisin maksavana asiakkaana ymmärtää.

Kuinka monta tilastopyyntöä voi tehdä? Kuinka kauan homma jumittaa? Onko ilmoitus henkilökohtainen (mulla vaan paukkuvat queryt yli) vai geneerinen (koko .fi:stä on haettu liikaa tilastoja)? Eikö vapaata tilastojen hakumäärää voi antaa edes turboille ja eeppisille? Löytyykö tästä jo jotain keskusteluketjua (en löytänyt). Ja mitä muuta keksisinkään kysyä?

Tässäpä täydellinen räntäsateisen päivän pohdintacase. :wink:
--- Forestress - Forest is my Fortress ---

Avatar
Salaneuvos
Viestit: 416
Liittynyt: Pe 11.05.2007 16:02
Paikkakunta: Lempäälä

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja Salaneuvos » Ma 20.03.2023 19:51

" Sivuston käyttö on sallittua vain henkilökohtaisesti omalla selaimella. Minkäänlainen koneellinen (robotti) lukeminen ei ole sallittua. " https://www.geocache.fi/terms/kayttoehdot.php
Fortuna Favet Fortibus

anna.s
Viestit: 85
Liittynyt: La 18.06.2016 21:42
Paikkakunta: Jyväskylä

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja anna.s » Ma 20.03.2023 20:45

No, eilen tuli tuo vastaus kun tein ensimmäistä tilastohakua koko päivän aikana.. eli liittyykö siihen myös se että jos toiset tekee hakuja samaan aikaan vai onko tuo todellakin henkilökohtainen rajoitin? Vai uskoisinko olevani niin suosittu henkilö että monet muut haluavat katsella spesifimpejä tilastojani :lol:

Avatar
geocache.fi
Geocache.fi
Geocache.fi
Viestit: 761
Liittynyt: To 27.09.2012 23:47

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja geocache.fi » Ma 20.03.2023 21:19

Forestress kirjoitti:
Ma 20.03.2023 17:35
"Ole hyvä ja yritä hetken päästä uudelleen."
Niinpä niin.

Kun geenit ja ympäristö ovat antaneet kieroutuneen luonteen, joka kannustaa runsaaseen haasteiden suorittamiseen, on geocache.fi:n tilastoanti perussivuineen varsin vajavainen. En kuitenkaan toivo, että tilastojen variaatioita alettaisiin julkaisemaan automaattisesti yhtään sen enempää kuin nyt. Olen jo aikaa sitten askarrellut itselleni webbisivuston, joka luo kullekin keskeneräiselle haasteelle oman nettisivun, josta voin seurata, mitä kukin haastekätkö vielä vaatisi. Jo jonkin aikaa sivuston tyypillisin tilasto on ollut "Liikaa tilastopyyntöjä" -sivu, jonka logiikan haluaisin maksavana asiakkaana ymmärtää.

Kuinka monta tilastopyyntöä voi tehdä? Kuinka kauan homma jumittaa? Onko ilmoitus henkilökohtainen (mulla vaan paukkuvat queryt yli) vai geneerinen (koko .fi:stä on haettu liikaa tilastoja)? Eikö vapaata tilastojen hakumäärää voi antaa edes turboille ja eeppisille? Löytyykö tästä jo jotain keskusteluketjua (en löytänyt). Ja mitä muuta keksisinkään kysyä?

Tässäpä täydellinen räntäsateisen päivän pohdintacase. :wink:
Lämmin kiitos kysymyksestä!

Kysymyksesi perusteella löytyi tieto että 9.1.2023 alkaen kuvien välimuistitus on epäonnistunut ja tästä syystä kuvat turhaan luotiin aina uusiksi (tästä löytyikin samalla selitys seurantaselvityslistalla olleisiin kuormitushyppyihin). Kyseisenä päivänä tilastokuviin tuli täysin uudet optiot ja näiden lisäys yhdistettynä yhdestä paikasta puuttumaan jääneeseen optiolisäykseen aiheutti tämän valitettavan tapahtuman.

Nyt asia on korjattu ja tilastojen rajoitus alkaa viimeistään vuorokauden vaihduttua toimimaan kuten on tarkoitettu; toivottavasti ei käyttäjille ongelmia aiheuttavasti mutta silti riittävästi estäen koneellisia latauksia yms. Mikäli kuitenkin tuntuu että esto hyppää silmille niin tässä ketjussa voi kertoa. Nykyiset rajoitukset olen päätellyt tutkien paljonko väki kuviaan maksimissaan lataa ja siihen lisännyt sopivan lisämäärän ettei esto haittaisi.

Vaikka yleensä olen hyvin avoin niin rajoituksen tarkempaa rakennetta en ala avaamaan, sallittakoon jotain salaisuuksiakin :) Mutta sen verran voin todeta että rajoitus ei ole koko geocache.fi:tä koskeva vaan teoriassa tiettyä käyttäjää koskeva vaikkei suoraan niinkään, toisaalta myös teoriassa tietyn käyttäjän tekemä mutta ei silti suoraan niinkään. Rajoitus pohjautuu sekä lyhyt- että pitkäaikaisiin latausmääriin.

Rajoituksen on tarkoitus olla normaalikäyttäjälle täysin huomaamaton eli määrät tosiaan olen säätänyt niin että ne riittäisivät. Valitettavasti täysin vapaata hakumäärää ei ole turboille ja eeppisille mahdollista luoda koska rajoitus on toteutettu siten, että se ei käytä tietokantaa ollenkaan (eikä näin ollen periaatteessa ole tietoa kuka yrittää kuvaa latata). Vasta jos lataus sallitaan mennään kantaan. Tämä toteutus on siksi että tällä tavoin on mahdollista estää latauksia ilman että määrävalvonta itsessään aiheuttaisi kuormaa joka pahimmillaan kaataisi palvelun.

Pahoittelen tapahtunutta ongelmaa ja mahdollisia tulevia ongelmia. Valitettavasti nykytilanteessa kuitenkin on rajoitettava yksittäisiä asioita jotta koko sivuston toimivuus ei vaarannu vaan sivusto on mahdollisimman hyvin ja luotettavasti käytettävissä.

// haksu10
Kattava ohje tilasto-ongelmien ratkaisemiseen
Kaikki ohjeet * Yhteydenotot (Yhteydenotot vain ko. sivun ohjeistuksen mukaan)

Avatar
Forestress
Viestit: 174
Liittynyt: La 17.09.2011 12:20

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja Forestress » Ma 20.03.2023 22:50

Kiitos kaunis, Haksu, vastauksestasi. :D Ja pahoittelut, että en voinut auttaa ongelman analysoinnissa, kun en muistanut, missä kohtaa tuo selvä muutos taulukoiden latautumisessa tapahtui. Mutta hyvä jos edes joskus suun avaaminen kannattaa!

Kyllä se kevät sieltä tulla jolkottaa, joten hyvä on taas mennä kohti uusia haasteita/haastepurkkeja! :wink:
--- Forestress - Forest is my Fortress ---

JassuL
Viestit: 33
Liittynyt: Ma 18.07.2022 8:56

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja JassuL » Ti 21.03.2023 8:33

Tämä selvitti omankin ihmetyksen. Koneellisesti en ole koittanut käyttää koskaan, mutta silti aika usein (varsinkin iltaisin) on saanut tuota ilmoitusta että tilastopyyntöjä liikaa. Katsotaan josko vaiva vähenisi.

Avatar
Forestress
Viestit: 174
Liittynyt: La 17.09.2011 12:20

Re: "Liikaa tilastopyyntöjä"

Viesti Kirjoittaja Forestress » Ti 21.03.2023 19:30

Vuorokauden testailun jälkeen: Tämähän toimii kuin junan vessa tai itse asiassa paljon paremmin! :lol:
--- Forestress - Forest is my Fortress ---

Vastaa Viestiin

Palaa sivulle “Sivustoon liittyvät ehdotukset ja kommentit”