Kityurpot kysyvät ja kityurpot vastaavat, osa 2

[urpiainen]

Onko kitinässä tavallista enemmän crawler-botteja? Vai onko joku postaus päätynyt hakukoneeseen korkealle? Paljon käyttäjiä selaamassa. Tällä hetkellä 34 vierailijaa.

Nyt on yli 5 000 vierailijaa.

[Bhven]

Tiedon pallonpinta laajenee taas hieman. Tekoäly oppii puhumaan rubiininpunaista.

[Bluntly]

Tai sitten on palvelunestohyökkäys.

[James Potkukelkka]

Onko kitinässä tavallista enemmän crawler-botteja? Vai onko joku postaus päätynyt hakukoneeseen korkealle? Paljon käyttäjiä selaamassa. Tällä hetkellä 34 vierailijaa.

Nyt on yli 5 000 vierailijaa.

Aasi voi alkaa valmistelemaan IPOa. Tai ehkä nyt se vaihe, jossa otetaan yhteyttä Peter Thieliin.

[aasi]

Tai sitten on palvelunestohyökkäys.

Jos, niin olisi todella heikko.

Tää vaikuttaa siltä että Kitinää crawlataan jonkun epämääräisen hajautetun proxy-verkon kautta - logeissa näkyy että samalla sessiolla on koitettu useasta eri osoitteesta ympäri maailmaa.

[James Potkukelkka]

Tai sitten on palvelunestohyökkäys.

Jos, niin olisi todella heikko.

Tää vaikuttaa siltä että Kitinää crawlataan jonkun epämääräisen hajautetun proxy-verkon kautta - logeissa näkyy että samalla sessiolla on koitettu useasta eri osoitteesta ympäri maailmaa.

Mistähän tuossa on kyse?

[James Potkukelkka]

Chatgpt5:

Sisällönkeruu tekoäly- tai hakukonedatalle

Monet AI-datankerääjät (esim. “CCBot”, “GPTBot”, “Google-Extended”, “Amazonbot”) crawlavat laajasti nettiä.

Ne saattavat käyttää proxyjä tai CDNiä, mikä voi näyttää hajautetulta.

Aggressiivinen scraper tai kopiosivusto

Joku voi yrittää kopioida koko sivuston sisällön (“mirror site”).

Usein tunnistaa siitä, että kaikki sivut käydään läpi järjestyksessä.

DDoS-testailu tai haavoittuvuuden etsintä

Joissain tapauksissa bottiverkko käy läpi pieniä sivuja testatakseen reaktiota (kuinka nopeasti palvelin hyytyy, mitä vastauksia se antaa, yms.).

Väärin konfiguroitu välimuisti tai palvelu (esim. Cloudflare, uptime-robotit)

Jos käytätte jotain ulkoista valvontaa tai välimuistipalvelua, sekin voi moninkertaistaa pyyntöjen määrän.

[aasi]

Maailmalla on tuommoisia proxy-palveluita myyviä tahoja, jotka siis ovat jotenkin ujuttaneet softaansa kuluttajille ajettavaksi ja joilta voi ostaa liikennöintiä näiden kuluttajakoneiden kautta. Oletan että nyt joku koulutusdataa kaipaava taho haluaa joko kiertää perinteisempiä estoja tai salata identiteettinsä reitittämällä liikenteen proxyjen kautta.

Tässä on vielä sellainen foorumisoftan erikoisuus että jos selain ei lähetä sessiota kekseissä, se pyörii urlissa ("sid=xxxx"), ja toisaalta sessio on kiinnitetty yhteen ip-osoitteeseen. Tuollainen hajautettu haku eri ip-osoitteista tehtynä luo jatkuvasti uusia sessiota,ja huonosti koodattu crawler voi vielä luulla että eri sessio-rimpsun sisältävät urlit tarkoittavat vielä oikeasti eri sivuja.

[James Potkukelkka]

^

[James Potkukelkka]

^^Oletko kysynyt tekoälyltä? Vai eikö se sulle tuo apua?

Chatgpt5:

Jos haluat, voin auttaa analysoimaan liikennettä tarkemmin — esimerkiksi jos lähetät muutaman rivin anonyymejä logimerkintöjä (IP:t voi peittää), voin kertoa, minkä tyyppistä bottia tai verkkoa ne todennäköisesti ovat.

[James Potkukelkka]

Ehkä parin vuoden päästä ihmiskunnan tuhoaa gattaca-botti, joka haluaa kloonata triljoonaa teinipystytisua.

Botin voi kuitenkin kaataa kysymällä, mitä rubiininpunainen tarkoittaa.

[aasi]

^^Oletko kysynyt tekoälyltä? Vai eikö se sulle tuo apua?

En mä näe oikein mitään varsinaista ongelmaa sen lisäksi että yksi luku ei oikein vastaa totuutta. Vähän normaalia enemmän liikennettä.

Logiriveissähän ei hirveästi tietoa ole mistä mikään llm saisi kiinni, vain tavalllisiksi selaimiksi feikatut user-agentit, tyyliin:

Koodi: Valitse kaikki

201.35.178.107 - - [21/Oct/2025:11:05:54 +0300] "GET /viewtopic.php?sid=78a875933348dd5f63230a67a29002d0&start=3625&t=1754&view=print HTTP/2.0" 200 2990 "-" "Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36" 0.054

[James Potkukelkka]

^^Oletko kysynyt tekoälyltä? Vai eikö se sulle tuo apua?

En mä näe oikein mitään varsinaista ongelmaa sen lisäksi että yksi luku ei oikein vastaa totuutta. Vähän normaalia enemmän liikennettä.

Kyllähän tämä pitää selvitää!11111

[James Potkukelkka]

Tämä oli varmaan sulle selvää jo etukäteen:

Automaattinen scraper / indeksoija: view=print, start=3625, peräkkäiset offsetit ja pieni vastekoko viittaavat siihen, että joku “kävelee” läpi kirjoituksia ja kerää tekstiä.

Rotating proxy / hajautettu verkko: aiemman kuvauksesi mukaan sama sessio näkyy monista eri IP:istä — tämä on tyypillistä, kun scraper käyttää rotatoivia proxy-palveluja (residential/VPN/proxy pool) piilottaakseen tai skaalataakseen toimintaansa. Sid-parametrin välittäminen URL:ssä voi selittää "sama istunto eri IP:stä" -ilmiön.

User-Agentin spoofaus: UA näyttää “normaalilta”, mutta koska se on vanha ja referer puuttuu sekä view=print käytössä, todennäköisyys, että kyseessä on botti, on korkea.

Ei heti DDoS mutta aggressiivinen scraping: yksi rivi ei vielä DDoS:ia kerro — mutta jos useita tällaisia pyyntöjä tulee monesta IP:stä lyhyessä ajassa, palvelin kuormittuu / content copypasta -riski on todellinen.

[aasi]

Tämä oli varmaan sulle selvää jo etukäteen:

Joo.

Opin tässä samalla että koska crawleria ei tunnisteta botiksi, sille näytetään linkki tuohon view=print - Tulostusnäkymään mikä on tavallaan ihan turhaa crawlausta kun lähes identtinen sisältö on jo pitänyt ladata.

[James Potkukelkka]

Tämä oli varmaan sulle selvää jo etukäteen:

Joo.

[aasi]

Okei, tuli tästä vähän ongelmaakin, yöllä oli crawlauksen määrä lisääntynyt sen verran että Kitinä oli aamulla jumissa. Laitoin tuon kirjautumisesta tutun ihmistsekkauksen päälle kaikille kaukomaista (Etelä-Amerikka, Aasia, Afrikka) tuleville hauille, loppui siihen.

[James Potkukelkka]

^Joo. Nyt yksi.

[Bhven]

Joko Al Gore on vetänyt Bill Gatesia turpaan?

[James Potkukelkka]

Gatesin mukaan "be rigorous about measuring impact "


https://www.gatesnotes.com/work/save-li ... ut-climate


Ei noin voi tehdä! Jokainen teko on yhtä arvokas!

[James Potkukelkka]

here’s a doomsday view of climate change that goes like this:

In a few decades, cataclysmic climate change will decimate civilization. The evidence is all around us—just look at all the heat waves and storms caused by rising global temperatures. Nothing matters more than limiting the rise in temperature.

Fortunately for all of us, this view is wrong. Although climate change will have serious consequences—particularly for people in the poorest countries—it will not lead to humanity’s demise. People will be able to live and thrive in most places on Earth for the foreseeable future. Emissions projections have gone down, and with the right policies and investments, innovation will allow us to drive emissions down much further.

Unfortunately, the doomsday outlook is causing much of the climate community to focus too much on near-term emissions goals, and it’s diverting resources from the most effective things we should be doing to improve life in a warming world.

It’s not too late to adopt a different view and adjust our strategies for dealing with climate change. Next month’s global climate summit in Brazil, known as COP30, is an excellent place to begin, especially because the summit’s Brazilian leadership is putting climate adaptation and human development high on the agenda.

This is a chance to refocus on the metric that should count even more than emissions and temperature change: improving lives. Our chief goal should be to prevent suffering, particularly for those in the toughest conditions who live in the world’s poorest countries.

Although climate change will hurt poor people more than anyone else, for the vast majority of them it will not be the only or even the biggest threat to their lives and welfare. The biggest problems are poverty and disease, just as they always have been. Understanding this will let us focus our limited resources on interventions that will have the greatest impact for the most vulnerable people.

[James Potkukelkka]

Siirrän tämän asianmukaiseen ketjuun

[Homeboy65]

Kun läheinen kuolee kuinka kauan kestää ennen kuin saan perintöä?

[James Potkukelkka]

Kun läheinen kuolee kuinka kauan kestää ennen kuin saan perintöä?

Perunkirjoituksen pitää valmistua. Muutamia kuukausia.

[Homeboy65]

Kun läheinen kuolee kuinka kauan kestää ennen kuin saan perintöä?

Perunkirjoituksen pitää valmistua. Muutamia kuukausia.

Kiitos tiedosta.