Pipeline for markedspriser
Automatisk innhenting av markedsdata fra Buff163 til PostgreSQL. Den er prisgrunnlaget for alle skin-plattformene jeg driver.
Hva det er
En hodeløs datapipeline uten offentlig brukergrensesnitt, og det er hele poenget. Den skraper hele tiden Buff163, det største annenhåndsmarkedet for CS2-skins, normaliserer det den finner og lagrer det i PostgreSQL. De andre labprosjektene henter prisene sine derfra.
Slik fungerer det
Playwright styrer en samling nettleserkontekster mot endepunktene til markedsplassen, fordi dataene rendres i nettleseren og begrenses per fingeravtrykk. Forespørslene planlegges rundt strupevinduene jeg har observert. Resultatene sammenlignes med forrige kjente tilstand, og bare endringene skrives. Det holder skrivevolumet nede og signalet videre rent.
Lagringen er et partisjonert Postgres-skjema: én tabell for varenes identitet, tabeller som bare får nye rader for prispunkter, og Redis som rask cache for «nåverdien» som plattformene leser ved hver forespørsel. Når prisen på en vare endrer seg, får abonnentene beskjed gjennom det samme Socket.io-laget som GammaSkins kjører på.
Hvorfor det er viktig
Hvert eneste kjøps- og salgstilbud på plattformene mine kan spores tilbake til denne pipelinen. Den er den mest bærende delen av infrastrukturen i laben. Alt annet er presentasjon, og dette er sannhetskilden. Svikter den, blir prisene utdaterte, og utdaterte priser betyr ekte penger tapt til arbitrasje. Derfor slår overvåkingen her alarm raskere enn for noe annet jeg kjører.
Mer fra laben
- Eget · 7. okt. 2026GammaSkins: P2P-markedsplass for skinsEn norsk markedsplass der brukerne handler CS2-skins direkte med hverandre, med chat, signerte kjøpsavtaler, ID-verifisering og hurtigsalg.
- Eget · 7. okt. 2026Peep AS: pip.travelEn markedsplass for lokale opplevelser i Norge. Jeg har tatt over Peep AS og bygger det videre som et nytt selskap med nye partnere.
- Kunde · 26. okt. 2026Norsk Frisørskole og Hairpilots: digital plattformJeg bygger den digitale siden av en norsk frisørskole sammen med Hairpilots: verktøy for de ansatte og en ny vei inn i nettstudiet. Arbeidet pågår.
Står du fast med et vanskelig teknisk problem? Kanskje jeg kan hjelpe.
Jeg tar på meg et og annet rådgivningsoppdrag, skreddersydd programvarearkitektur og forskningssamarbeid. Det finnes ingen salgstrakt. Du skriver til meg, og jeg svarer.