Webbindex

Webbindex är Pigments mätning av hur svenska webbplatser fungerar, för människor och för AI-tjänster. Här står vad vår insamlare hämtar, hur ofta den gör det och hur du stänger ute den.

Vad är Webbindex?

Vi mäter samma saker på samma sajter, med samma metod, flera gånger om året. Det ger siffror som går att jämföra över tid: hur många som har en llms.txt, vad robots.txt säger till AI-botarna, om innehållet syns utan JavaScript och om sajten har strukturerad data.

Resultaten publiceras sammantaget, tillsammans med metoden, under pigment.se/webbindex. Ingen enskild organisation pekas ut.

Vilka sajter ingår?

  • Sveriges 290 kommuner och 21 regioner
  • Statliga förvaltningsmyndigheter
  • Bolagen på Nasdaq Stockholm Large Cap och Mid Cap

Fler grupper kan tillkomma.

Vad hämtar vi?

Tre adresser per sajt:

  1. /robots.txt
  2. /llms.txt
  3. Startsidan, /

Det är allt. Vi följer inga länkar vidare in på sajten.

Varje sajt besöks högst en gång i veckan, oftast mer sällan. Varje besök är tre anrop med minst en sekunds mellanrum.

Det här gör vi inte

  • Vi loggar inte in och fyller inte i formulär.
  • Vi letar inte efter säkerhetshål.
  • Vi kör inte JavaScript och laddar inte bilder.
  • Vi samlar inte in personuppgifter.
  • Vi säljer ingen data.

Så känner du igen oss

Insamlaren presenterar sig med den här user-agenten:

Mozilla/5.0 (compatible; PigmentWebbindex/0.1.2; +https://pigment.se/webbindex)

Versionsnumret ändras när insamlaren uppdateras.

Så stänger du ute oss

Vi följer robots.txt. Lägg till det här i din robots.txt, så hämtar vi ingenting mer än robots.txt själv:

User-agent: PigmentWebbindex
Disallow: /

Ändringen gäller från nästa mätning. Sajter som stänger ute oss räknas som bortfall och syns bara som en del av en siffra, aldrig med namn.

Frågor?

Mejla support@pigment.se.