Skip to content
  • Categories
  • Recent
  • Tags
  • Popular
  • World
  • Users
  • Groups
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Default (No Skin)
  • No Skin
Collapse

FòrumCAT

  1. Home
  2. Uncategorized
  3. Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

Scheduled Pinned Locked Moved Uncategorized
amazonscrapingbotsxafarders
14 Posts 5 Posters 0 Views
  • Oldest to Newest
  • Newest to Oldest
  • Most Votes
Reply
  • Reply as topic
Log in to reply
This topic has been deleted. Only users with topic management privileges can see it.
  • spla@mastodont.catS This user is from outside of this forum
    spla@mastodont.catS This user is from outside of this forum
    spla@mastodont.cat
    wrote last edited by spla@mastodont.cat
    #1

    Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

    Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

    #scraping #BotsXafarders

    lapesanta@mastodont.catL jolupa@misskey.canpavon.catJ xorsch@mastodont.catX mestretites@mastodont.catM 4 Replies Last reply
    0
    • spla@mastodont.catS spla@mastodont.cat

      Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

      Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

      #scraping #BotsXafarders

      lapesanta@mastodont.catL This user is from outside of this forum
      lapesanta@mastodont.catL This user is from outside of this forum
      lapesanta@mastodont.cat
      wrote last edited by
      #2

      @spla És una situació insostenible, on es malbaraten recursos a tort i a dret.

      1 Reply Last reply
      0
      • spla@mastodont.catS spla@mastodont.cat

        Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

        Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

        #scraping #BotsXafarders

        jolupa@misskey.canpavon.catJ This user is from outside of this forum
        jolupa@misskey.canpavon.catJ This user is from outside of this forum
        jolupa@misskey.canpavon.cat
        wrote last edited by
        #3

        @spla@mastodont.cat potser la zipbomb que deien no fa gaire és l'única manera de parar aquest sense sentit...

        spla@mastodont.catS 1 Reply Last reply
        0
        • jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat

          @spla@mastodont.cat potser la zipbomb que deien no fa gaire és l'única manera de parar aquest sense sentit...

          spla@mastodont.catS This user is from outside of this forum
          spla@mastodont.catS This user is from outside of this forum
          spla@mastodont.cat
          wrote last edited by
          #4

          @jolupa és millor impedir que agafin res amb un 444, no consumeixes recursos de màquina.

          jolupa@misskey.canpavon.catJ 1 Reply Last reply
          0
          • spla@mastodont.catS spla@mastodont.cat

            @jolupa és millor impedir que agafin res amb un 444, no consumeixes recursos de màquina.

            jolupa@misskey.canpavon.catJ This user is from outside of this forum
            jolupa@misskey.canpavon.catJ This user is from outside of this forum
            jolupa@misskey.canpavon.cat
            wrote last edited by
            #5

            @spla@mastodont.cat Merda! ara he mirat els meus logs i aquests d'Amazon volen escanejar tot el Fediverse!!

            spla@mastodont.catS 1 Reply Last reply
            0
            • jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat

              @spla@mastodont.cat Merda! ara he mirat els meus logs i aquests d'Amazon volen escanejar tot el Fediverse!!

              spla@mastodont.catS This user is from outside of this forum
              spla@mastodont.catS This user is from outside of this forum
              spla@mastodont.cat
              wrote last edited by
              #6

              @jolupa sí, sembla que tenen indexat tot el fedivers ☹️

              1 Reply Last reply
              0
              • spla@mastodont.catS spla@mastodont.cat

                Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

                Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

                #scraping #BotsXafarders

                xorsch@mastodont.catX This user is from outside of this forum
                xorsch@mastodont.catX This user is from outside of this forum
                xorsch@mastodont.cat
                wrote last edited by
                #7

                @spla

                Em fas enveja. T'admiro per la paciència que tens administrant el servidor i escoltant les meves tonteries.

                Però també em fas enveja de no tenir el meu servidor i saber gestionar-lo. I ja posats conèixer un grup hacker on ens divertissim aolicant tècniques per putejar els bots de meta, amazon, etc.

                No sé si inclús es podria fer un "peiper" del que fan. Suposo que si parteixes d'una tesis, i la valides amb dades reals hauria de ser acceptada.

                spla@mastodont.catS 1 Reply Last reply
                0
                • xorsch@mastodont.catX xorsch@mastodont.cat

                  @spla

                  Em fas enveja. T'admiro per la paciència que tens administrant el servidor i escoltant les meves tonteries.

                  Però també em fas enveja de no tenir el meu servidor i saber gestionar-lo. I ja posats conèixer un grup hacker on ens divertissim aolicant tècniques per putejar els bots de meta, amazon, etc.

                  No sé si inclús es podria fer un "peiper" del que fan. Suposo que si parteixes d'una tesis, i la valides amb dades reals hauria de ser acceptada.

                  spla@mastodont.catS This user is from outside of this forum
                  spla@mastodont.catS This user is from outside of this forum
                  spla@mastodont.cat
                  wrote last edited by spla@mastodont.cat
                  #8

                  @xorsch intento llegir el necessari per a que el servidor funcioni bé per a tots vosaltres. També és cert que m'agrada força la informàtica, diria que des de sempre.
                  Parlant amb altres admins no tothom pensa igual, hi ha qui diu que és una guerra perduda, que Amazon té milers de IPs, que poden canviar els user_agent dels seus bots, etc. Jo no puc estar sense fer res, no m'agrada deixar que agafin el que vulguin.
                  Sí que estaria bé fer un paper però imagino que en deuen haver per internet...

                  xorsch@mastodont.catX 1 Reply Last reply
                  0
                  • spla@mastodont.catS spla@mastodont.cat

                    Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

                    Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

                    #scraping #BotsXafarders

                    mestretites@mastodont.catM This user is from outside of this forum
                    mestretites@mastodont.catM This user is from outside of this forum
                    mestretites@mastodont.cat
                    wrote last edited by
                    #9

                    @spla tens alguna documentació de com muntat el sistema? M'agrada entendre com parar al Mal (no parlo de tu 😉)

                    spla@mastodont.catS 1 Reply Last reply
                    0
                    • mestretites@mastodont.catM mestretites@mastodont.cat

                      @spla tens alguna documentació de com muntat el sistema? M'agrada entendre com parar al Mal (no parlo de tu 😉)

                      spla@mastodont.catS This user is from outside of this forum
                      spla@mastodont.catS This user is from outside of this forum
                      spla@mastodont.cat
                      wrote last edited by
                      #10

                      @mestretites no l'ha he fet, hauria de publicar-ho. En resum, es basa en afegir una configuració a nginx on es llisten els user_agent dels robots coneguts i retornar-lis el codi d'estat 444.
                      Un cop tens això actiu, amb l'ajut de Loki, Promtail i Grafana obtens del log els robots rebutjats amb 444 i generes el gràfic.

                      1 Reply Last reply
                      0
                      • spla@mastodont.catS spla@mastodont.cat

                        @xorsch intento llegir el necessari per a que el servidor funcioni bé per a tots vosaltres. També és cert que m'agrada força la informàtica, diria que des de sempre.
                        Parlant amb altres admins no tothom pensa igual, hi ha qui diu que és una guerra perduda, que Amazon té milers de IPs, que poden canviar els user_agent dels seus bots, etc. Jo no puc estar sense fer res, no m'agrada deixar que agafin el que vulguin.
                        Sí que estaria bé fer un paper però imagino que en deuen haver per internet...

                        xorsch@mastodont.catX This user is from outside of this forum
                        xorsch@mastodont.catX This user is from outside of this forum
                        xorsch@mastodont.cat
                        wrote last edited by
                        #11

                        @spla

                        La veritat és que causa molta impotència no poder explicar a la gent el cantó fosc d'aquest monstres.

                        La reacció general de la gent (normal) és indiferència, "negació" o conformisme, escudant-se en ignorància, o en que són regles que cal acceptar. I per tant no cal fer res.
                        Les filtracions Hallowen de microsoft, no valen. Les filtracións que meta usa estratègies il·legals per obtenir dades o entrenar no valen. Les filtracions i explicacions de com ens manipulen no valen.

                        spla@mastodont.catS xorsch@mastodont.catX 2 Replies Last reply
                        0
                        • xorsch@mastodont.catX xorsch@mastodont.cat

                          @spla

                          La veritat és que causa molta impotència no poder explicar a la gent el cantó fosc d'aquest monstres.

                          La reacció general de la gent (normal) és indiferència, "negació" o conformisme, escudant-se en ignorància, o en que són regles que cal acceptar. I per tant no cal fer res.
                          Les filtracions Hallowen de microsoft, no valen. Les filtracións que meta usa estratègies il·legals per obtenir dades o entrenar no valen. Les filtracions i explicacions de com ens manipulen no valen.

                          spla@mastodont.catS This user is from outside of this forum
                          spla@mastodont.catS This user is from outside of this forum
                          spla@mastodont.cat
                          wrote last edited by
                          #12

                          @xorsch tristament cert, a la immensa majoria de la gent no els interessa gens, si és que en tenen coneixement.

                          1 Reply Last reply
                          0
                          • xorsch@mastodont.catX xorsch@mastodont.cat

                            @spla

                            La veritat és que causa molta impotència no poder explicar a la gent el cantó fosc d'aquest monstres.

                            La reacció general de la gent (normal) és indiferència, "negació" o conformisme, escudant-se en ignorància, o en que són regles que cal acceptar. I per tant no cal fer res.
                            Les filtracions Hallowen de microsoft, no valen. Les filtracións que meta usa estratègies il·legals per obtenir dades o entrenar no valen. Les filtracions i explicacions de com ens manipulen no valen.

                            xorsch@mastodont.catX This user is from outside of this forum
                            xorsch@mastodont.catX This user is from outside of this forum
                            xorsch@mastodont.cat
                            wrote last edited by
                            #13

                            @spla

                            Sols no podrem fer-hi front, però els que ens agrada la informàtica haurem de buscar tècniques per defensar-nos.

                            Jo ho dic en serio: entre el Intel Me, o PSP d'AMD, el control de las claus UEFI per part de microsoft, etc ... No vull saber que faràn ara que disposen de hardware dedicats a poder perfilar l'usuari amb les npu ..

                            Ja veurem quines salvatjades fan.

                            spla@mastodont.catS 1 Reply Last reply
                            0
                            • xorsch@mastodont.catX xorsch@mastodont.cat

                              @spla

                              Sols no podrem fer-hi front, però els que ens agrada la informàtica haurem de buscar tècniques per defensar-nos.

                              Jo ho dic en serio: entre el Intel Me, o PSP d'AMD, el control de las claus UEFI per part de microsoft, etc ... No vull saber que faràn ara que disposen de hardware dedicats a poder perfilar l'usuari amb les npu ..

                              Ja veurem quines salvatjades fan.

                              spla@mastodont.catS This user is from outside of this forum
                              spla@mastodont.catS This user is from outside of this forum
                              spla@mastodont.cat
                              wrote last edited by
                              #14

                              @xorsch a saber, el que sigui per a fer diners.

                              1 Reply Last reply
                              0
                              Reply
                              • Reply as topic
                              Log in to reply
                              • Oldest to Newest
                              • Newest to Oldest
                              • Most Votes


                              • Login

                              • First post
                                Last post
                              0
                              • Categories
                              • Recent
                              • Tags
                              • Popular
                              • World
                              • Users
                              • Groups