Ik heb de afgelopen jaren veel met Kubernetes gewerkt bij onze klanten en ondertussen is het uitgegroeid tot mijn favoriete (container/cloud) platform. In onze DevOps unit bij CINQ hebben wij veel aandacht besteed aan Kubernetes met interne kennis-sessies, een reis naar KubeCon Europe '18 in Kopenhagen, ons eigen Kubernetes bootcamp-weekend in Friesland én een reis naar KubeCon in Detroit in 2022. En in 2023 stonden we met CINQ op KubeCon in Amsterdam.

Ik wilde graag mijn CKA (Certified Kubernetes Administrator) halen omdat ik in de breedste zin wilde weten hoe Kubernetes precies werkt, in plaats van alleen maar de nodige resources te gebruiken voor deployments. Denk hierbij aan de werking van de controlplane en het gebruiken van alle resources die Kubernetes tot je beschikking stelt. Dat zijn er namelijk nogal wat. Ook is het natuurlijk fijn om te weten dat je een bepaalde techniek beheerst.

Het CKA examen is een examen van 2 uur waar er van je verwacht wordt 15 tot 20 problemen/vraagstukken vanaf de commandline op te lossen in verschillende Kubernetes clusters. Een score van minimaal 66% is vereist om te slagen. 

Ik heb het examen pas ingepland toen ik er van overtuigd was dat ik de tijd zou hebben om een paar weken achter elkaar te kunnen studeren en te oefenen. Zeker ook omdat ik meerdere malen heb gehoord dat het een pittig examen is waar je goed gebruik moet maken van je tijd. 

Het examen kan je in je eigen huis/kantoor afnemen, waar je door een toezichthouder via de webcam en screensharing in de gaten wordt gehouden. Het online examen programma werkte prima. 

Hoe kun je jezelf nou zo goed mogelijk voorbereiden voor het examen? En welke punten hebben extra aandacht nodig? Hieronder geef ik 10 tips waardoor ik het examen met een score van 91% heb gehaald.

1. “Certified-kubernetes-administrator-with-practice-tests” 

Een alles omvattende cursus op Udemy door Mumshad Mannambeth. Zorg dat je de hele cursus hebt doorlopen en maak alle labs in Kodekloud. Alles wat in mijn examen werd gevraagd is behandeld in deze cursus.

Leer de kubectl commandline. Zorg dat je weet welk commando je waarvoor moet gebruiken, get, describe, logs, events, apply, etc.

Je mag de officiële Kubernetes documentatie erbij houden. Maak hier gebruik van door de cheatsheet erbij te pakken of snel te zoeken naar het onderwerp naar keuze.

Bouw een Kubernetes cluster handmatig vanaf de grond op. Alhoewel ik deze niet zo belangrijk vond als dat andere mensen die vonden, is het in ieder geval handig om het een keer te doen. Bovenstaande Udemy cursus heeft een guide om het op je eigen workstation met Vagrant en Virtualbox te doen. 

Bespaar jezelf wat tijd door de “imperative commands” te kunnen van simpele opdrachten. Denk aan: “kubectl run”, voor het deployen van simpele pods, of “kubectl expose” voor het aanmaken van een service die verwijst naar een bestaande pod. Dit zijn geen complexe opdrachten en zijn sneller uit te voeren op deze manier, in plaats van een YAML file te genereren of op zoek te gaan in de documentatie.

Zorg voor de complexere deployments dat je een YAML genereert, hergebruikt uit een eerdere opdracht of gebruikt vanuit de documentatie. Denk aan deployments met secrets of volumes. Gebruik hiervoor de voorbeelden in de documentatie en verander die naar wens.

Sla opdrachten over die je niet meteen weet, en maak deze later. Je hebt misschien de volle 2 uur nodig en elk punt is meegenomen. Vlag bepaalde vragen die je niet zeker weet om later op terug te komen.

Zorg dat je de Docker commando’s en concepten ook kent om te troubleshooten. Soms heb je geen kubectl tot je beschikking. Basic Linux kennis om te troubleshooten en opdrachten uit te voeren zoals: systemctl, nslookup, vi/vim, ps, ls, cp etc. 

Hetgeen waar CKA zich in onderscheid ten opzichte van CKAD is met name infrastructuur kennis. Zorg dat je gerelateerde opdrachten hieraan goed kunt maken. Denk aan ETCD backups, het gebruik van KubeADM, controlplane service configuratie en certificaten. Deze vragen zijn vaak veel punten waard en kosten meer tijd.

Controleer elke deployment of pods wanneer je deze hebt aangemaakt. Gebruik met de “get” of “describe” commands of jouw pods/deployments de juiste naam hebben, de juiste images gebruiken en überhaupt draaien en doen wat deze zouden moeten doen.

Met deze zorgvuldige voorbereiding en werkwijze tijdens het examen, heb ik het in één keer weten te halen. Heel veel succes met studeren en het examen. En als je vragen hebt, neem contact met ons op.

👩‍🏫In twee dagen Kubernetes Advanced training, worden onze DevOps engineers klaargestoomd voor het KCA examen.

Dag 1 zit er bijna op, tijd voor de vrijmibo! 🍻

@container_solutions #kubernetes #containersolutions #joure #cinqict #work #prep #workshop #devops #cinq

Met deze 10 tips ga je zeker slagen voor je Certified Kubernetes Administrator examen.

10 tips voor het halen van je Certified Kubernetes Administrator examen

De CTO's van onze drie units - Data, DevOps en Development - vormen samen met de CTO van CINQ een denktank: de CINQTank. Zij houden zich bezig met het “voorspellen” van de toekomst. Samen met de mensen uit de units kijken zij in de verschillende vakgebieden naar de ontwikkeling van technieken en tools. Hiermee wordt een technische visie gecreëerd. Deze wordt onder andere gebruikt om richting te geven aan de opleiding van medewerkers. Tevens wordt het gebruikt als input voor de jaarplannen van elke afdeling. Tot slot is het natuurlijk ook gewoon leuk om na te denken hoe de toekomst eruit zou kunnen zien. Hieronder lees je onze verwachtingen op het gebied van DevOps in 2024.

Onze DevOps unit heeft zich goed ontwikkeld het afgelopen jaar. We hebben veel nieuwe kennis en kunde naar binnen gehaald en zijn samen hard aan het werk om hier een hecht team van te maken.

In het afgelopen jaar hebben we geprobeerd de DevOps unit zich meer te laten specialiseren in SRE en CI/CD specialisaties. Deze exercitie bleef alleen achter bij de markt. De komst van Platform Engineering gaat in volle vaart. Waar we voorheen te maken hadden met SRE en DevOps, hebben we nu meer te maken met termen als Platform Engineering, Customer Facing Teams, Enabling Teams en Feature Teams. Bij CINQ volgen we deze ontwikkelingen nauwkeurig en passen we onze trainingssessies en certificeringen indien nodig aan gedurende het jaar.

In de afgelopen jaren hebben we gemerkt dat Azure de belangrijkste cloudleverancier is voor Nederlandse bedrijven. Hierdoor hebben de meeste consultants binnen de DevOps unit inmiddels ervaring met Azure opgedaan bij diverse klanten.

Er blijft een beperkte markt voor OpenShift en Rancher. Deze tools zorgen ervoor dat bedrijven ‘on-premise’ nog steeds gebruik kunnen maken van Kubernetes clusters. Dit geeft ze de vrijheid om zonder cloud toch op een relatief makkelijke manier Kubernetes te gebruiken.
Hoewel er niet heel veel bedrijven zijn die per se hun eigen lokale datacenter willen beheren, zullen ze ook waarschijnlijk niet helemaal verdwijnen. Deze bedrijven hebben vaak een heel specifieke reden om toch onafhankelijk te blijven van de cloud. Denk hierbij aan eisen om onafhankelijk van het Internet te kunnen blijven functioneren of strikte eisen rondom onafhankelijkheid eisen als het gaat om de makers van de software.

Nu Kubernetes volledig ingeburgerd is, stijgt de vraag naar complexere setups voor specifieke doeleinden. Onder andere tools als Flux en ArgoCD die de plek van GitOps deployment tools innemen, zijn sterk in opkomst. Hierbij nemen ze een stuk van het speelveld van Azure DevOps en GitLab over als het gaat om de verantwoordelijkheid over het deployen van applicaties en containers.
Er blijft een titanenstrijd in de markt als het gaat om bijvoorbeeld het gebruik van Azure DevOps, GitHub en GitLab als het gaat om het deployen van applicaties op Kubernetes.

We zien een sterke opkomst voor Cilium, een moderne Container Network Interface (CNI) provider, welke daarnaast ook nog uitgebreide networking en security features bevat.
Azure ondersteunt tegenwoordig Cilium als default CNI. CINQ wil daarom volgend jaar extra aandacht besteden aan haar kennis rondom Cilium.

Kubernetes is en blijft populair. We zien een stijging in aanvragen rondom hulp bij migratie vanuit ouderwetse on-premise omgevingen naar Cloud of private-cloud(-achtige) omgevingen, ook bij de kleinere bedrijven. We verwachten dat we hier het komende jaar nog meer van gaan zien.

We zien een sterke stijging in de vraag naar Security tooling. Waar het eerst belangrijk was hoe we op Kubernetes deployen, is het nu belangrijk wat we deployen. Bedrijven willen beter inzicht in waar deployments fout gaan en betere indicaties waar afwijkingen zitten in het gedrag van applicaties. Men wil hiermee beter inzicht krijgen in de werkzaamheden van gebruikers (en beheerders) op de diverse systemen.
Hiermee willen de bedrijven zich wapenen tegen de alsmaar complexere methodes die gebruikt worden om systemen over te nemen of op andere manieren onterecht te belasten (denk aan bijvoorbeeld cryptominers).

Er is een sterke focus gekomen op het inzichtelijk maken van kosten binnen Kubernetes. Waar voorheen vrijwel alles mocht op Kubernetes binnen de security boundaries van het platform, wordt er nu meer gestuurd op kosten. De vraag naar tooling die deze kosten inzichtelijk maakt is daarmee sterk stijgende. Tools als OpenCost, Kubecost, maar ook diverse SaaS oplossingen spelen hierin een grote rol.

We zien een beperkte maar toch wel duidelijke nieuwkomer binnen het DevOps landschap in AI (Artificial Intelligence). Met de lancering van ChatGPT is er voor een heel aantal markten best wat veranderd. Deze veranderingen bleven voor de DevOps unit beperkt, maar lijken wel hun weg te vinden in de tools die we gebruiken. Zo zien we op verschillende SaaS omgevingen de mogelijkheid om door middel van AI vragen te stellen, of probleemoplossers te gebruiken. Deze trend zal zich in de komende jaren mogelijk uitbreiden naar meer van onze tooling.

Naast alle hippe nieuwe technieken die de kop op steken, hebben we soms ook de ‘slow-and-steady’ groei onderwerpen. Zo is er ook de trend rondom API Gateways. Deze gateways helpen developers (en afnemers) een inzichtelijk, veilig en ontwikkelaars vriendelijk platform te bieden om (veelal REST) API’s makkelijk te kunnen publiceren. We zien steeds meer vraag naar tooling in dit landschap, en we gaan hier in het nieuwe jaar meer aandacht aan besteden binnen onze unit.

We zien een sterke daling bij oplossingen die niet ‘cloud-native’ zijn in hun deployment model. We denken daarbij aan oplossingen als het deployen van applicaties door middel van Jenkins of XLDeploy. Deze tools zijn minder geliefd onder developers en beheerders, waardoor ze sterk dalen in populariteit.

Ook de oudere “machine-beheer” oplossingen als Puppet, Chef en Ansible zijn op zijn retour, waar de laatste nog wel redelijk veel wordt gebruikt in combinatie met workflow-achtige zaken.

Voor een overzicht van de technieken die prevalent zijn, is er hieronder (afbeelding 1) een Hype diagram gemaakt. Dit diagram weerspiegelt onze visie op de positie van verschillende tools en technieken als het gaat om de fase waarin ze zich bevinden.

Innovating: Een tool/techniek is opkomend en heeft mogelijk potentie, maar nog niet de 'tractie' om daadwerkelijk het verschil te kunnen maken.

Peaking: De tool/techniek is veel gevraagd en er is veel aandacht voor, maar de markt heeft zich nog niet aan de tool aangepast.

Disillusionment: De fase dat een tool/techniek hoog in de hype zit, waardoor veel mensen en bedrijven die het gaan proberen, erachter komen dat de techniek nog niet volwassen genoeg is, waardoor er vaak veel integratieproblemen worden gevonden.

Enlightenment: De tool/techniek bevindt zich in een fase waarin deze zich aan het ontplooien is en goed samen kan werken met andere applicaties in het landschap.

Productivity: De tool/techniek is zover doorontwikkeld dat deze echte productiviteit oplevert voor haar gebruikers.

Afbeelding 1: Overzicht hype per tool / techniek

We denken dat er een lange termijn plek is voor tools als de ELK-Stack (ElasticSearch, Logstash  en Kibana), Prometheus, AlertManager en Grafana. Deze monitoring en logging tools zijn diep ingebed in diverse omgevingen en we zien deze niet snel verdwijnen.

De verwachting is dat Kubernetes nog een flinke tijd relevant blijft. De community is sterk groeiend en het momentum blijft sterk. Diverse grote partijen blijven hevig investeren in het landschap, waardoor steeds meer uiteenlopende problemen in de IT opgelost kunnen worden door middel van Kubernetes.

We zien bijvoorbeeld dat er complete security stacks en digitale ontwikkelomgevingen op Kubernetes worden gedraaid. Daarnaast zien we ook een stijging in de mate van controle die bedrijven toe willen passen en beperking van de vrijheid voor ontwikkelaars door oplossingen als Kyverno en Polaris. Deze oplossingen helpen en beschermen developers op het gebied van de beveiliging van hun container landschap.

Als DevOps unit houden we ons daarnaast bezig met het beter in kaart brengen van onze klanten. Vanuit de Data unit is er een uitstekend model gemaakt, waarin het landschap kan worden gecategoriseerd. Deze categorisering heeft als doel om zowel ons als de klant duidelijk inzicht te geven in welke aspecten van hun IT landschap en/of omgeving CINQ een versterkende rol kan spelen. Deze aspecten zijn geclassificeerd om duidelijk uitvoerbaar te zijn door onze consultants. Hierdoor geven we beide partijen een leidraad om duidelijk aan te kunnen sluiten bij de wederzijdse verwachtingen.

We willen ons als DevOps unit ook sterk gaan maken voor een Terraform standaard.
Deze standaard wordt een leidraad om te laten zien dat we weten waar we over praten. Zowel voor onszelf (tussen onze collega’s) als de markt (wat kunnen wij als bedrijf) laten we hiermee zien dat we echt verstand van zaken hebben en deze kennis willen delen.

Het idee is om samen als unit een aantal dagen bij elkaar te komen om een standaard op poten te zetten en deze daarna uit te werken tot een werkende implementatie. Deze standaard gaan we proberen zo gedetailleerd uit te werken, dat het niet alleen maar ideeën zijn die met potlood in een workshop gebruikt kunnen worden, maar die echt herbruikbare code op zouden moeten leveren, welke als grondbeginsel kan fungeren bij diverse klanten.

Zoals eerder geschreven, merken we dat de term SRE binnen het DevOps landschap minder tractie heeft. De term Reliability Engineering wordt vaker als een losse pijler neergezet bij grotere bedrijven en daarmee ook anders aangepakt. We zien een stijging in het gebruik van de term in specifieke afdelingen die hiervoor speciaal ingericht worden. Deze afdelingen zijn dan ook vaker verantwoordelijk voor de tooling die daar bij komt kijken. Hierdoor zijn mensen uit onze unit minder vaak verantwoordelijk voor deze tools en verdwijnt het werk hieraan dus.

Onze verwachting vorig jaar was dat Docker zou verdwijnen als Container Runtime. Inmiddels zijn alle grote Cloud omgevingen, en Kubernetes distributies overgestapt op `containerd`. Daarmee is de noodzaak voor Docker in productieomgevingen weg en is Docker alleen nog een veelgekozen applicatie in het bouwproces van containers. Veel ontwikkelaars begrijpen wat Docker is en weten wat het doet, en gebruiken het dan ook als een term om een algemene container omgeving aan te duiden. (Platform) beheerders begrijpen daarentegen vaak beter dat Docker niet meer nodig is om containers te draaien en weten dat het niet meer nodig is om Docker te draaien onder Kubernetes clusters.

Als DevOps unit zien we een steeds sterkere drang om onze krachten te bundelen binnen CINQ. We merken dat met tools als Terraform en Ansible de kunst van het programmeren sterk helpt in het leveren van hoogwaardige en kwalitatieve oplossingen.

We merken dat als we echt aan de voet van de complexe architectuur vraagstukken, ontwerp discussies en uitvoering van deze tools moeten staan, men echt stevige ontwikkel skills nodig heeft. Begrippen als resiliency, do-not-repeat-yourself, interfacing en dependency management zijn programmeer skills die hard nodig zijn bij deze vraagstukken. Daarom zoeken we ook sterke toenadering tot de Development unit en willen we samen deze vaardigheden naar een hoger niveau tillen.

In dit artikel lees je wat onze verwachtingen zijn op het gebied van DevOps in 2024. We beschrijven trends in de markt en ontwikkelingen binnen de CINQ DevOps unit.

Onze visie op DevOps in 2024

Ondanks dat je met Kubernetes werkt en goed de weg weet met Docker, hoef je als goede DevOps-engineer niet te weten wat een pod werkelijk is. Maar als je de essentie van een pod kent, kun je de kenmerken van een pod beter begrijpen. Door een pod te analyseren met behulp van commandlinetools zoals 'lsns', 'ps', 'ctr' zul je de verborgen 'pause' container ontdekken en ontdekken dat pods slechts geneste containers zijn.

Bekijk de presentatie van Eric Cornet tijdens de CINQ.Conferentie hieronder.

What the p*d is a pod? - Eric Cornet @ CINQ.Conferentie 2023

In deze presentatie legt Eric Cornet uit wat nu werkelijk een 'pod' is in Kubernetes. Weet jij wat een pod is? Na het bekijken van zijn presentatie wel!

What the p*d is a pod?

Een van de uitdagingen bij het gebruik van cloudservices is het beheersen van de kosten. Traditioneel betalen bedrijven op basis van het gebruik van resources, wat kan leiden tot onvoorspelbare kosten en mogelijk onaangename verrassingen aan het einde van de maand. Hier komen CUD's in beeld.

CUD's (Committed Use Discounts) zijn een manier om vooraf gereserveerde bronnen in GCP te kopen tegen een aanzienlijk lagere prijs dan de standaard on-demand tarieven. Door een commitment te doen voor een periode van één of drie jaar, ontvang je aanzienlijke kortingen op de kosten van virtuele machines (VM's) en andere services. Dit kan aanzienlijke besparingen opleveren, vooral voor workloads met een voorspelbaar en stabiel gebruik.

Als je meer wilt weten over CUD's en hoe je ze kunt gebruiken in GCP, raad ik je aan de officiële documentatie van GCP over CUD's te raadplegen.

Voorbeeldberekening van kostenbesparingen

Laten we nu eens een voorbeeld bekijken om de potentiële besparingen met CUD's beter te begrijpen. Stel dat jouw bedrijf een applicatie heeft met een constante vraag naar computervermogen. Zonder CUD's zou je betalen op basis van het gebruik van on-demand VM's. Laten we zeggen dat je gemiddeld 10 VM's per maand gebruikt, elk met een maandelijkse kostprijs van €100.

Gemiddeld maandelijkse kosten = 10 VM's * €100/VM = €1000

Met CUD's zou je een toezegging doen voor 1 jaar voor 10 VM's tegen een prijs van €70/VM. Laten we zeggen dat je 30% korting krijgt met CUD's.

Jaarlijkse kosten = 10 VM's * €70/VM * 12 maanden = €8400

Gemiddeld maandelijkse kosten = €8400 / 12 maanden = €700

In dit voorbeeld zou het gebruik van CUD's een besparing van €300 per maand opleveren.

Naast de directe kostenbesparingen bieden CUD's nog andere voordelen. Ten eerste bieden ze stabiliteit en voorspelbaarheid van kosten, omdat je vooraf een toezegging doet voor een bepaalde periode. Dit helpt bij het budgetteren en plannen van IT-uitgaven. Bovendien kunnen CUD's flexibiliteit bieden bij het schalen van resources, omdat je de toegewezen CUD's op verschillende VM's binnen dezelfde regio kunt toepassen, waardoor je kunt profiteren van de kortingen zonder dat je vastzit aan een specifieke VM-configuratie.

Eenvoudig gebruik en beheer van CUD's in GCP

Het gebruik van CUD's in GCP is eenvoudig en intuïtief. Je kunt ze via de GCP-console of de API aanschaffen en beheren. Het platform biedt ook tools en rapporten om je te helpen bij het monitoren van je CUD-gebruik en de kostenbesparingen te volgen.

Als je gedetailleerde instructies en voorbeelden wilt over hoe je CUD's kunt aanschaffen en beheren in GCP, raad ik je aan om de GCP-documentatie over CUD's te raadplegen.

Als je op zoek bent naar manieren om kosten te besparen en de efficiëntie van je cloudinfrastructuur te verbeteren, raad ik je zeker aan om CUD's in GCP te overwegen. Het kan een waardevol instrument zijn om de cloudkosten te beheersen en tegelijkertijd een betere cloudervaring te bieden.

Probeer het zelf en ontdek welke voordelen CUD's in GCP voor jouw organisatie kunnen opleveren!

Een van de uitdagingen bij het gebruik van cloudservices is het beheersen van de kosten. Traditioneel betalen bedrijven op basis van het gebruik van resources, wat kan leiden tot onvoorspelbare kosten en mogelijk onaangename verrassingen aan het einde van de maand. In dit blog lees je hoe je dit in Google Cloud Platform kunt beheersen en beperken.

CUD's in GCP: Kostenbesparing en een betere cloudervaring

Als DevOps Engineer bij een klant gebruiken we Terraform voor het beheer van de infrastructuur via code (IaS). Dit biedt ons vele voordelen, zoals de mogelijkheid om efficiënter te werken en menselijke fouten te minimaliseren. In deze blog zal ik mijn ervaringen met Terraform delen, en zal ik voorbeelden geven van hoe we Terraform gebruiken voor het beheer van alerts op Google Cloud Platform.

Terraform is een open-source tool van HashiCorp die wordt gebruikt voor het beheer van de infrastructuur via code. Met Terraform kunnen we de infrastructuur definiëren en beheren door middel van code, in plaats van handmatig te werken via een webconsole of terminal. Terraform maakt gebruik van een declarative syntax, wat betekent dat we ons niet bezig hoeven te houden met de onderliggende details van de configuratie.

Terraform biedt vele voordelen ten opzichte van traditioneel handmatig beheer van de infrastructuur, waaronder:

Efficiëntie: Door het gebruik van code kunnen we sneller en efficiënter infrastructuur configuraties beheren. We kunnen ook snel wijzigingen aanbrengen in de code, in plaats van handmatig wijzigingen aan te brengen via een webconsole of terminal.

Versiebeheer: Door de infrastructuur configuratie te beheren via code, kunnen we gebruikmaken van versiebeheer en samenwerken met andere teamleden. We kunnen wijzigingen in de infrastructuur configuratie bijhouden en terugdraaien indien nodig.

Herbruikbaarheid: Terraform stelt ons in staat om code te hergebruiken, wat het beheer van complexe infrastructuur configuraties vereenvoudigt.

Minimalisering van risico's: Terraform minimaliseert het risico op menselijke fouten, aangezien we werken met code in plaats van handmatig werken via een webconsole of terminal.

Hoewel Terraform vele voordelen biedt, zijn er ook enkele uitdagingen bij het werken met Terraform. Enkele van deze uitdagingen zijn:

Complexiteit: Het beheren van complexe infrastructuur configuraties kan uitdagend zijn met Terraform. Het is belangrijk om de code zo goed mogelijk te structureren en te documenteren om de complexiteit te minimaliseren.

Tools en integraties: Terraform vereist vaak de integratie met andere tools en services, wat extra werk en configuratie vereist.

Foutopsporing: Foutmeldingen kunnen soms complex/ingewikkeld zijn, vooral als je niet bekend bent met het Terraform-ecosysteem. Maar door ervaring op te doen en kennis te vergaren, kunnen deze uitdagingen worden overwonnen.

Bij de klant gebruiken we Terraform voor het beheer van verschillende aspecten van de infrastructuur op Google Cloud Platform, waaronder alerts.

Om een voorbeeld te geven van hoe we Terraform gebruiken, zal ik hieronder een vereenvoudigd voorbeeld laten zien van hoe we alerts beheren via Terraform. Dit voorbeeld maakt gebruik van Stackdriver als monitoringtool.

resource "google_monitoring_notification_channel" "email" {
  display_name = "My email channel"
  type         = "email"
  labels = {
    email_address = "my-email@example.com"
  }
}

resource "google_monitoring_alert_policy" "alert_policy" {
  display_name  = "High CPU usage - Alert Policy"
  combiner      = "OR"

  conditions {
    display_name = "High CPU usage"
    condition_threshold {
      filter      = "metric.type=\"compute.googleapis.com/instance/cpu/utilization\" AND resource.type=\"gce_instance\""
      duration    = "60s"
      comparison  = "COMPARISON_GT"
      threshold_value = "0.8"
      trigger {
        count = 1
      }
    }
  }

  notification_channels = [google_monitoring_notification_channel.channel.name]
}

In dit voorbeeld gebruiken we Terraform om een email notificatie channel te maken en een alert policy te definiëren op basis van hoge CPU-gebruik voor alle VM's die draaien binnen GCP. Wanneer het CPU-gebruik wordt overschreden (in dit geval 80%) voor een duur van 1 minuut, wordt er automatisch een email verzonden naar de opgegeven channel.

Hopelijk heeft dit voorbeeld je een idee gegeven van hoe krachtig Terraform kan zijn voor infrastructuurbeheer via code.

Wat is Terraform? Waar gebruik je het voor? Wat zijn de voor- en nadelen? In dit blog deelt DevOps engineer Sefa Yavuz zijn ervaringen met Terraform aan de hand van een concreet voorbeeld.

Infrastructuur als code met Terraform

De CTO's van onze drie units - Data, DevOps en Development - vormen samen met de CTO van CINQ een denktank: de CINQTank. Deze groep mensen houdt zich bezig met het “voorspellen” van de toekomst. Samen met de mensen uit de units kijken zij in de verschillende vakgebieden naar de ontwikkeling van technieken en tools. Hiermee wordt een technische visie gecreëerd. Deze wordt onder andere gebruikt om richting te geven aan de opleiding van medewerkers. Tevens wordt het gebruikt als input voor de jaarplannen van elke afdeling. Tot slot is het natuurlijk ook gewoon leuk om na te denken hoe de toekomst eruit zou kunnen zien. Hieronder lees je onze verwachtingen op het gebied van DevOps.

In het afgelopen jaar is de DevOps unit zich meer gaan specialiseren. De term DevOps is niet meer alomvattend voor ons werk en daarom hebben we Special Interest Groups (SIG’s) opgericht. Deze groepen, genaamd Continuous Integration / Continuous Deployment (CI/CD) en Site Reliability Engineering (SRE), hebben hun eigen expertises en focusgebieden.

Er blijft een markt voor OpenShift en Rancher. Deze tools zorgen ervoor dat bedrijven ‘on-premise’ nog steeds gebruik kunnen maken van Kubernetes clusters. Dit geeft ze de vrijheid om zonder cloud toch op een relatief makkelijke manier Kubernetes te gebruiken.
Hoewel er niet heel veel bedrijven zijn die perse hun eigen lokale datacenter willen beheren, zullen ze ook waarschijnlijk niet helemaal verdwijnen. Deze bedrijven hebben vaak een hele specifieke reden om onafhankelijk te blijven van de cloud.

Er is steeds meer vraag naar uitgebreide setups op Kubernetes. Onder andere tools als Flux en ArgoCD die de plek van GitOps deployment tools (zoals Azure DevOps en GitLab) innemen, zijn sterk in opkomst.

We zien een sterke opkomst voor Cilium, een moderne Container Network Interface (CNI) provider, welke daarnaast ook nog uitgebreide networking en security features bevat.

Kubernetes is en blijft populair. We zien een stijging in aanvragen rondom hulp bij migratie, ook bij de kleinere bedrijven. We verwachten dat we hier het komende jaar nog meer van gaan zien.

Ook de oudere “machine-beheer” oplossingen als Puppet, Chef en Ansible zijn op zijn retour, waar de laatste nog wel redelijk veel wordt gebruikt in combinatie met workflow achtige zaken.

Voor een overzicht van de technieken die prevalent zijn, is er hieronder (afbeelding 1) een Hype diagram gemaakt. Dit diagram weerspiegelt onze visie aangaande de positie van verschillende tools en technieken als het gaat om de fase waarin ze zich bevinden.

Innovating betekent dat een tool/techniek opkomend is en mogelijk potentie heeft, maar nog niet de ‘traction’ heeft om daadwerkelijk het verschil te kunnen maken.

Peaking betekent dat de tool/techniek veel gevraagd is en dat er veel aandacht voor is, maar dat de markt zich nog niet aan de tool heeft aangepast.

Disillusionment is de fase dat een tool/techniek zo hoog in de hype zit, dat veel mensen en bedrijven die het gaan proberen, erachter komen dat de techniek nog niet volwassen genoeg is, waardoor er vaak veel integratieproblemen worden gevonden.

Enlightenment betekent dat de tool/techniek zich in een fase bevindt waarin deze zich aan het ontplooien is en goed samen kan werken met andere applicaties in het landschap.

Productivity betekent dat de tool/techniek zover is doorontwikkeld dat deze echte productiviteit oplevert voor haar gebruikers.

Afbeelding 1: Overzicht hype per technologie / tool

De verwachting is dat Kubernetes nog een flinke tijd relevant blijft. De community is sterk groeiende en het momentum blijft sterk. Diverse grote partijen blijven hevig investeren in het landschap, waardoor steeds meer uiteenlopende problemen in de IT opgelost kunnen worden door middel van Kubernetes.

We zien bijvoorbeeld dat er complete security stacks en digitale ontwikkelomgevingen op Kubernetes worden gedraaid. Daarnaast zien we ook een stijging in de aanscherping voor ontwikkelaars door oplossingen als Kyverno en Polaris. Deze oplossingen helpen en beschermen developers op het gebied van de beveiliging van hun containerlandschap.

Als DevOps unit willen we ons daarnaast bezig gaan houden met het beter in kaart brengen van onze klanten. Vanuit de Data unit is er een uitstekend model gemaakt, waarin het landschap kan worden gecategoriseerd. Deze categorisering heeft als doel, om zowel ons, als de klant duidelijk inzicht te geven in welke aspecten van hun landschap en/of omgeving CINQ een versterkende rol kan spelen. Deze aspecten zijn geclassificeerd om duidelijk uitvoerbaar te zijn door onze consultants. Hierdoor geven we beide partijen een leidraad om duidelijk aan te kunnen sluiten bij de wederzijdse verwachtingen.

Op de lange termijn verwachten we dat Docker wordt ingehaald als Container Runtime. Waar zij een paar jaar geleden de kar trokken op het gebied van ‘Containerization’, zijn ze nu een begrip geworden. Veel ontwikkelaars begrijpen wat Docker is en weten wat het doet, en gebruiken het dan ook als een term om een algemene container omgeving aan te duiden. Beheerders daarentegen begrijpen vaak beter dat Docker niet meer nodig is om containers te draaien en weten dat het niet meer nodig is om Docker te draaien onder Kubernetes clusters.

Als Container Runtime is Docker niet meer de enige speler op de markt, en kunnen veel bedrijven toe met ‘containerd’ of ‘podman’. In bijna alle cloud omgevingen is Docker zelfs niet meer standaard geïnstalleerd als Container Runtime voor Kubernetes.

Als DevOps unit zien we een steeds sterkere drang om onze krachten te bundelen binnen CINQ. Dit komt door onder andere de verschuiving in de markt richting de verdiepingsslag die hierboven genoemd wordt: SRE. Deze terminologie beschrijft het toepassen van een ontwikkelaars mindset op operationele werkzaamheden die normaal toegeschreven werden aan de term DevOps.

Binnen het veld van SRE zijn er dus ook ontwikkelaars vaardigheden nodig om dit goed toe te kunnen passen. Deze vaardigheden zijn natuurlijk duidelijk prevalent in de Development unit. Daarom zoeken we ook sterke toenadering tot de Development unit en willen we samen deze vaardigheden naar een hoger niveau trekken.

Andersom is er duidelijk de wens vanuit de Development en Data units om meer te doen met CI/CD. De beide units zouden sterke voordelen kunnen behalen, door goed opgeleid te worden in het maken van ‘pipelines’, ‘workflows’ en diverse andere CI/CD aspecten.

Hoe ontwikkelt DevOps zich binnen CINQ en daarbuiten? Je leest hier onze visie op DevOps in 2023.

Onze visie op DevOps in 2023

Site Reliability Engineering (SRE) is a new discipline which is quickly gaining traction within the IT landscape. First conceived by Google, it is now adopted mainly by large enterprises such as Netflix, LinkedIn, Target, Tesla and many more. It is known for a focus on automating manual tasks without enduring value (toil), treating operations as a software problem and its unique approach to systems reliability.

There are many ways to implement SRE. SRE is a multi-faceted discipline. You can create Service Level Objectives to define the level of service to deliver to users, focus on reducing toil with targeted measures, define a risk tolerance for a service and do release engineering to make releases streamlined and consistent.

These, amongst some other practices, primarily dictate a certain way of working. However, some practices are more focused on designing systems to be reliable, highly available and robust. In other words, I see two categories:

Practices which are primarily ways of working; They also have technical implications, but the largest part is how we interact as employees and/or set priorities in what we find important to work on.

Practices which are primarily ways of designing systems; The key aspect of these are designing an application according to certain guidelines such as reliability, availability, robustness, etc. Subsequently the application is created to function to reach these goals.

Not all practices are as easy to apply for a given business. A lot of Googles practices which it has written about in its SRE Handbook has stemmed from dealing with its growing pains. As the organization grew it required cleverer solutions so it could continue to deliver a good service while using resources effectively. Small to medium businesses however do not have some of the challenges and use resources differently. Some examples:

They often use off-the-shelf software as opposed to tailor-made solutions

Teams are more converged. They often operate within one region and have a smaller selection of services to deliver

They have a lesser variety of roles in a team

They have less resources to their disposal

Very highly skilled people tend to flock to large prestigious enterprises as opposed to smaller companies

Given the above differences, the way small to medium business can implement SRE differs. For example:

While using off the shelf software, everything comes at it is. Some practices of SRE dictate how to design and build applications according to certain standards but this is not something you do in this case

Even when software is written for systems administration, it is likely either a smaller application or a script, as opposed to larger complicated systems

Some of these system design principles can be complicated to grasp and to implement, such as distributed consensus and distributed periodic scheduling. The employees working at the company might not have the skills necessary to work with these principles

These kinds of businesses might not scale as fast and investments to a high degree of scalability might not pay off for them

Even though mostly off-the-shelf software is used, you can still apply a lot of the principles in SRE. Instead of using them to design your own software, try to understand the principles and buy software which is built with these principles in mind. For example, you can buy software which has high availability as a feature. 

Having the ability to create your own software gives more opportunities to reduce toil as you have more control over the way your infrastructure is managed. However, you can do a lot with scripts, pipelines or small applications. Doing a routine clean-up in an external system could easily be encapsulated in a Python script ran by a cronjob.

Many principles can be implemented with off-the-shelf software and widely available documentation. Service level objectives can be monitored in many monitoring solutions such as DataDog and Splunk. Having engineers be on-call effectively can also be done with tools such as VictorOps.

Your business might not benefit from all the scale advantages of companies like Google, but investments in scalability can still pay off. Using container orchestration for workloads means scaling applications happens in a consistent and controlled manner. Cloud solutions offer comparable solutions for VMs. Having good control over scaling also helps during maintenance as you can easily scale down a node and perform maintenance temporarily.

Google describes a lot of principles in their SRE Handbook. The base principles upon which they are based are universally applicable but the degree to which they can be implemented and how it is done is likely very different when comparing smaller businesses to large enterprises such as Google. Still, by choosing software which adheres to the principles described and provides features for utilizing SRE, using smaller pieces of software for automation and implementing practices to the appropriate degree, your business can also benefit from SRE.

Challenges of implementing SRE in small to medium businesses

Until recently, the Cloud Native Compute Foundation (CNCF) only provided certifications for very experienced hands-on Kubernetes skills, i.e. CKAD, CKA and CKS. In this article I will give you a quick overview of CNCF's latest addition: KCNA.

The existing credentials CKAD, CKA and CKS are well-known and respected in the Kubernetes community, but there were still two gaps:

There were no Kubernetes beginner certifications.

There were no certifications about any of the other 100 CNCF projects.

Therefore, CNCF created a new credential called Kubernetes and Cloud Native Associate (KCNA) which has been available since November 18th 2021 and aims for

I've already proven my Kubernetes skills by getting CKAD, so my interest was more in the part about the cloud native ecosystem. I consider it as a gap in my own knowledge. I know some tools very well, some little, but most of them not. Well, that probably holds for anybody since there are just so many CNCF projects:

Kubernetes is by far the biggest project, but some others have earned their place as well, like Prometheus, Helm, and Linkerd - as you can see in the image below.

Graduated project velocity, from the CNCF annual report 2021

By becoming a Kubernetes Certified Service Provider CINQ ICT earned some CNCF vouchers, so I used one to see what the Kubernetes and Cloud Native Essentials course and KCNA exam learns me about the rest of the cloud native ecosystem.

Kubernetes and Cloud Native Essentials - course

As expected, I was scanning and skipping most of the Kubernetes chapters. However, the content was well written, holistic and complete and provide a very good fundamental for Kubernetes beginners. Personally, I especially enjoyed the "additional resources" paragraphs, which contains links to some very good blogs and docs about all kind of Kubernetes fundamentals e.g. Docker v1.0 announcement, fundamentals of container networking, difference between OCI v.s. CRI and Docker v.s. Containerd, difference between containers and pods. Most of them go way deeper into Kubernetes than needed for the KCNA exam, but where therefor very interesting to me.

Putting my hopes on the final two chapters on Cloud Native Application Delivery and Observability, my hopes vanished quickly when I started reading them. The cloud native ecosystem is only touched lightly, with just a little extra attention to Prometheus basics. Other than that, it's more like an overview on which tool does what with minimal descriptions.

During the exam almost no questions about the rest of the cloud native ecosystem came by. Which makes KCNA even more just a beginners Kubernetes credential. 

All together it's nice that there is an entry-level Kubernetes certification now, it was definitely missing. For engineers that are starting their journey in the world of Kubernetes, this is definitely a great way to start. The part about cloud native ecosystem is disappointing. Also from a beginners point of view. So for CNCF, there is still a gap left and I hope it will be filled with some sort of certification on the cloud native ecosystem in the future. 

https://docs.linuxfoundation.org/tc-docs/certification/important-instructions-kcna

https://www.cncf.io/announcements/2021/11/18/kubernetes-and-cloud-native-essentials-training-and-kcna-certification-now-available/

https://training.linuxfoundation.org/training/kubernetes-and-cloud-native-essentials-lfs250/

https://www.cncf.io/cncf-annual-report-2021/

https://www.cncf.io/announcements/2021/02/24/cloud-native-computing-foundation-welcomes-47-new-members-at-the-start-of-2021/

Until recently, the Cloud Native Compute Foundation (CNCF) only provided certifications for very experienced hands-on Kubernetes skills, i.e. CKAD, CKA and CKSS. In this article I will give you a quick overview of CNCF's latest addition: KCNA.

Kubernetes and Cloud Native Associate (KCNA)

Site Reliability Engineering (SRE) is a new discipline which is quickly gaining traction within the IT landscape. First conceived by Google, it is now adopted mainly by large enterprises such as Netflix, LinkedIn, Target, Tesla and many more. It is known for a focus on automating manual tasks without enduring value (toil), treating operations as a software problem and its unique approach to systems reliability. You might hear of the advantages of SRE and want to introduce it to your organization. Perhaps you are a software engineer and want to convince your peers to try it out or you are a manager overseeing one or more teams and would like to introduce SRE to them. The question is, are you ready to start?  

In this article I would like to give you some tips and tricks in order to judge how ready your organization is for this SRE journey and if it is already adopted, determine the current level of SRE maturity.

As Google describes it, SRE is a superset of DevOps. Many of the SRE principles align with DevOps and build upon them. Having good adoption of DevOps principles is therefore an important factor in the success of implementing SRE. Is the DevOps maturity level relatively low, then you will likely benefit more by focusing on improving that first. 

Google describes a number of levels in automation, the higher levels (lower on the list) being more advanced:

No automation - all operational tasks are performed manually

Externally maintained system-specific automation - operational tasks are performed using external systems such as scripts, specific for this one system

Externally maintained generic automation - there are generic systems that can perform tasks on multiple different systems

Internally maintained system-specific automation - systems include automated operational tasks out-of-the-box

So, what makes the higher levels better than the lower levels? Why is it better for a system to be internally monitored than externally? If you use an external system to monitor another system, you are now managing two systems. This usually increases the effort to maintain this process. 

A system that is internally automated also has more possibilities to do so as it can directly tap into all of the functionality and therefore has more fine-grained control. If the automation is system specific as opposed to generic, the impact of this particular automated task is not as broad and use of these tasks scales more linear.

If you are low on this scale (less flexible and in lower amounts of automation), there will be more to be gained from automation but some aspects of SRE might not fully come into fruition just yet. SRE works best if there is a foundation of automation upon which to build. Additionally, hiring SRE engineers is easier as the profile of SRE engineers usually includes skills which are a match for more mature forms of automation. 

When it comes to SRE as a term, there are usually three definitions used. 

As a set of practices and principles - the SRE discipline

In practice, these definitions are often intertwined and mixed depending on the context of discussions.

These definitions are commonly used in a number of forms of adoption. Depending on structure of your organization and how much knowledge about SRE is present and some of its principles are perhaps already adopted.

Consulting - SRE maturity level is zero to non-existent. Consultants provide guidance and advice but do not actively participate in engineering activities.

Embedded - SRE maturity is at a low level. Consultants actively participate in engineering but also keep sharing knowledge and giving direction

Platform - For medium SRE maturity. A SRE-minded platform team takes care of all supporting services and/or infrastructure for services.  Knowledge about delivered services is limited

Slice and Dice - Again for medium SRE maturity. Services are divided into functional slices such as payment processing or the user-facing helpdesk. SRE engineers responsible for this slice have knowledge of the complete 'flow' of the service and can therefore better tailor to automation needs

Full SRE - High SRE maturity. The full scope of a particular service or set of services involves SRE engineers and all team members have an SRE mindset

For all maturity levels there are gains to be made from adopting SRE and the aforementioned forms tailor to these varying needs. The red line in these forms is that as the SRE maturity level progresses, the scope of SRE widens and more of the service delivery flow is imbued with SRE practices and principles. Choose the form that suits the maturity level to make the most out of SRE adoption. 

So, know knowing there are different forms to adopt based on the maturity level, how can you judge how high the SRE maturity level is? Assuming SRE is already implemented to some degree, there are some indicators.

There is executive buy-in on an SRE strategy. Investing in SRE means investing more in reliability than velocity if reliability is under a certain threshold. For a lot of teams it means more investment in automation than new features, in the hopes it pays itself off in the future. As executives usually have a say in high-level/abstract strategy, they have to agree to one which includes SRE for it to work.

SREs are involved early in the service design process and can exert influence. Designing a service to be reliable and observable, among other things, is easier in earlier stages of the design process than post-facto.

There is a broad focus on automating repetitive tasks. If you can distinguish many operational tasks which still require manual labor and are not on the agenda to be addressed, likely there is still room for improvement in terms of SRE adoption

Both current incidents are mitigated and future ones. Good SRE engineers practice anti-fragility: managing a service that is not only stable under normal operating conditions but also can recover easily when disaster strikes. Additionally, if monitoring is adequately implemented and operational tasks have a high degree of automation, solving incidents should be a lot easier.

The key take-away here is to inspect how well integrated SRE is in the process and how effectively they handle automation, incident response, the degree to which SREs are involved in the design process and whether there is executive buy-in. In other words, is SRE implemented well and is there is support within the organization. 

Next to the SRE maturity level as a whole, there is also a way to judge the progression in terms of handling reliability. Effectively handling reliability is a key component of any SRE strategy and how it is dealt with is a good indicator on SRE maturity.

Reactive - Incidents are responded to after they happen. There is rarely any lessons learned and investments to reduce the number of incidents is limited

Proactive - The possibility for incidents are identified before they can occur and measures are taken to prevent them from happening

Strategic - Efforts are made to include reliability as an aspect to be specifically addressed in architectures, products and processes

Visionary - Reaching beyond the scope of the organization and getting involved in the broader spectrum. For example: Writing papers, giving advice to other organizations and making videos.

The saying "it is better to prevent than to cure" also applies to reliability. So being at the very least proactive to incidents is a good move to make. However, it is not needed to be very high on the spectrum per-se. It requires major investments in order to become a visionary on reliability and the benefits might not outweigh the costs of doing so. 

The key takeaway here is that there are various ways to judge how your organization fares in terms of SRE maturity. Depending on the maturity level, there are different rates of progression and approaches to advance on this level. 

A more 'junior' organization might focus more on making automation more generic, hire consultants to help with determining SLOs and make their incident response more proactive. 

A 'senior' organization will focus on developing tooling which comes with its own automation, broaden the scope of their existing SRE teams to include more of the service delivery flow and share knowledge about SRE with other people. Regardless of the maturity level, there are gains to be had but the right approach for the right level will mean gains will be maximized.

https://cloud.google.com/blog/products/devops-sre/evaluating-where-your-team-lies-on-the-sre-spectrum

https://cloud.google.com/blog/products/devops-sre/the-five-phases-of-organizational-reliability

https://sre.google/sre-book/automation-at-google/

You might hear of the advantages of SRE and want to introduce it to your organization. Perhaps you are a software engineer and want to convince your peers to try it out or you are a manager overseeing one or more teams and would like to introduce SRE to them. The question is, are you ready to start?

Onze laatste blogs over DevOps