Studenten som kraschade företagets infrastruktur
I tisdags höll Karén Har-Yan på DevOps Malmö föreläsning om en student som råkat ta ner ett helt företag. Föreläsningen ägde rum på Foo Café på Stora Varvsgatan 6a i Malmö.
Cirka tio utvecklare och administratörer dök upp på kvällens föreläsning. Några kom från egna företag, och några från stora företag som Axis och Ikea.
Idag arbetar Karén Har-Yan på Boozt, men historien han berättar ikväll är från ett annat företag.
Infrastrukturen var upp uppbyggt av 45 000 Docker containers, och orkestrerades med Kubernetes. När studenten skulle göra en ändring i konfigurationen råkade ett syntaxfel slinka igenom. När ändringen rullades ut trodde Kubernetes att samtliga 45 000 containrar hade gått ner, och svarade med att starta upp 45 000 nya containrar. Nu fanns alltså 90 000 containrar live, som alla försökte komma åt databaserna, nätverket och diskarna. Detta resulterade i att hela produktionsmiljön blev oerhört långsam. Utvecklingsmiljön gick ner helt. Flertalet diskar blev skadade på grund av alla skrivningarna.
Karén Har-Yan förklarar hur infrastrukturen var uppbyggd
Men vad Karén vill föra fram ikväll är inte farorna med studenten, utan tvärtom. Karén menar att studenten inte ska skuldbeläggas, istället ska man ge honom ännu mer ansvar. Man ska ge studenten de viktigaste uppgifterna.
– We always think we can do it better. But even I could have failed. So we had a discussion if this could have happened to us. And we realized it could have happened to anyone of us, förklarar Karén Har-Yan.
Karén berättar också om hur viktigt det är att inte skrämma studenten efter en sådan här incident. Gör man det kommer han aldrig igen att våga arbeta med det, någonsin. För så fungerar vi människor. När vi får rädsla och skräck för något undviker vi det.
– He had a lot of potential, so we gave him a lot of trust instead. So he didn’t grew fear.
Karén menar också att det var ett bra test av infrastrukturen, och något som man bör använda sig av för att testa och övervaka sin miljö. Man tror alltid att den egna miljö är osårbar.
– A single student could bring down the whole infrastructure. It was a good test, because we thought it was unbreakable, as we always do.
Karén delar också med sig av några visa tankar kring DevOps. Vi tror alltid att det vi har byggt är det bästa som någonsin skapats. Därför är det viktigt att komma in mentaliteten att göra sig av med delar som uppenbarligen inte är så bra. Vi klamrar oss annars fast vid det vi skapat, men vi måste vi lära oss att släppa det.
– Kill your darlings, poängterar Karén.
DevOps Malmö
Gruppen startade den 15 januari 2018 av Karén Har-Yan. Han startade gruppen för att det då inte fanns några arrangemang eller träffar inom it-branschen. Och de få som fanns var svåra att hitta.
Hittills har DevOps Malmö haft strax över 20 träffar. För den som vill föreläsa på DevOps Malmö är det bara att skriva upp sig på gruppens GitHub
Du kan läsa mer om DevOps Malmö på deras MeetUp-sida
Kommentarer
Kommentarsfältet är modererat. Det innebär att alla kommentarer granskas av ansvarig utgivare före publicering.
Du väljer själv om du vill ange ditt riktiga namn, en pseudonym eller vara helt anonym. Ingen registrering behövs.
Relaterade artiklar
-
Författarintervju med Josefin Hansson
År 2022 debuterade hon med boken “Ur askan en drake”. Boken tar upp duktiga flickan-syndromet och psykisk ohälsa. Hon har också varit ambassadör för Hjärnkoll och föreläst på bland annat Medborgarskolan. Idag driver hon eget företag inom samtalscoaching.
-
Datorparty i Landskrona
I helgen höll Syntax Society sitt årliga sommarparty. Platsen var en källarlokal i Landskrona där ett femtontal personer medverkade.
-
Det första Pågadata har ägt rum
I helgen ägde det första Pågadata rum – uppföljaren till Gubbdata. Platsen var Folkets Hus i Kvidinge. Organisatör av partyt var Johan “z-nexx” Osvaldsson med hjälp från Jesper “Skuggan” Klingvall. Partyt hade över 100 anmälda deltagare.
-
Retroloppis i Påarp
Idag var det retroloppis hos Andreas Nilsson i Påarp. På baksidan av huset fanns hundratals spel uppradade på långa bord. Trots friska vindar och sval temperatur var loppisen välbesökt.
-
Stort deltagande på årets Gubbdata
I helgen var det Gubbdata i Lund – ett av Sveriges största demoparty. På plats fanns cirka ett hundra deltagare, alla med en passion för retrodatorer.
Senaste nyheterna och inläggen
-
Författarintervju med Josefin Hansson
År 2022 debuterade hon med boken “Ur askan en drake”. Boken tar upp duktiga flickan-syndromet och psykisk ohälsa. Hon har också varit ambassadör för Hjärnkoll och föreläst på bland annat Medborgarskolan. Idag driver hon eget företag inom samtalscoaching.
-
En chans att vinna Demonerna på internet
Företaget GleSYS lottar ut tre exemplar av vår bok Demonerna på internet i en tävling på LinkedIn. Passa på att tävla du också för en chans att vinna!
-
Störning hos SEBs internetbank
På söndag eftermiddag gick det inte logga in på SEBs internetbank. Webbsidan Downdetector hade vid klockan 14:30 fått in 240 rapporter om den pågående störningar. På SEBs kundtjänst är man medveten om problemet och meddelar att tekniker arbetar med att åtgärda det.
-
Datorparty i Landskrona
I helgen höll Syntax Society sitt årliga sommarparty. Platsen var en källarlokal i Landskrona där ett femtontal personer medverkade.
-
Titta på C64-demos
Med Commodore-emulatorn VICE går det att spela gamla C64-spel och titta på demos från demonpartyn. Men VICE under Debian Linux saknar några nödvändiga filer som vi behöver leta upp själva.
Utvalda artiklar
-
Datorparty i Landskrona
I helgen höll Syntax Society sitt årliga sommarparty. Platsen var en källarlokal i Landskrona där ett femtontal personer medverkade.
-
Det första Pågadata har ägt rum
I helgen ägde det första Pågadata rum – uppföljaren till Gubbdata. Platsen var Folkets Hus i Kvidinge. Organisatör av partyt var Johan “z-nexx” Osvaldsson med hjälp från Jesper “Skuggan” Klingvall. Partyt hade över 100 anmälda deltagare.
-
Även hovrätten fäller poliserna för att ha satt dit oskyldig
Hovrätten fastställer straffet för de två poliser som förra året dömdes till vardera ett års fängelse av Lunds tingsrätt för att ha misshandlat och satt dit en oskyldig man. De båda poliserna ska även betala skadestånd till mannen.
-
Retroloppis i Påarp
Idag var det retroloppis hos Andreas Nilsson i Påarp. På baksidan av huset fanns hundratals spel uppradade på långa bord. Trots friska vindar och sval temperatur var loppisen välbesökt.
-
Stort deltagande på årets Gubbdata
I helgen var det Gubbdata i Lund – ett av Sveriges största demoparty. På plats fanns cirka ett hundra deltagare, alla med en passion för retrodatorer.
CyberInfo Sverige är ett it- och medieföretag i nordvästra Skåne som tillhandahåller böcker, utbildningar, nyheter och konsulttjänster inom Linux, säkerhet och programmering.
CyberInfo Sverige är godkänd för F-skatt, är momsregistrerat och innehar
utgivningsbevis för webbplatsen www.cyberinfo.se.