Blogs

Monitoring en rapportage

Het verlangen om elke dag een beetje beter te worden,
… was onze reden om monitoring & rapportage naar een hoger niveau te tillen.

We zeggen altijd dat integratie complex is, maar niet moeilijk. Complex vanwege het uitgebreide proces, veel groter dan alleen het technische aspect ervan, en toch, tegelijkertijd, niet moeilijk als je de juiste kennis hebt. Wat ons vakgebied ook complex maakt is de afhankelijkheid van externe applicaties met de technologie die ze gebruiken, het is nooit hetzelfde en altijd in ontwikkeling.

Met de groei van het aantal integraties is de behoefte aan voorspelbaarheid toegenomen, vooral in die delen van onze oplossing die niet voor elke consultant beschikbaar waren. Of die moeilijker te begrijpen zijn. In de dagelijkse praktijk onderscheiden we een aantal van de meest voorkomende mogelijke oorzaken die leiden tot verstoringen of overbelasting van de infrastructuur;

In afwachting van uitwisselingen

In elke stap van de integratiestroom worden gegevens uitgewisseld van de ene component naar de volgende. Als dat niet binnen een bepaald tijdsbestek kan worden afgehandeld, ontstaat er een wachtrij van “hangende uitwisselingen”. Dit heeft een negatief effect op de snelheid waarmee de hele flow wordt afgehandeld, maar ook op de gebruikte infrastructuur. We zien dit vaak bij (externe) eindpunten die de aangeboden gegevens niet snel genoeg kunnen verwerken. De beste vergelijking met ons dagelijks leven is de file op de snelweg, het aantal auto’s dat tegelijkertijd gebruik maakt van de snelweg bepaalt of we door kunnen rijden en met welke snelheid, of in het ergste geval tot stilstand komen.

Binnen de flow manager in Fluxygen kunt u inzicht krijgen in het aantal wachtende uitwisselingen. Door gebruik te maken van de trace-functionaliteit kan informatie gevonden worden om de flows te optimaliseren. Het is “best practice” om ervan uit te gaan dat de “happy flow” niet altijd werkt en kritisch te zijn op de performance in de eerste weken na livegang.

Mislukte uitwisselingen

In dit geval gaat het “gewoon” fout – een verwerking kan niet worden uitgevoerd en de stroom valt terug in de foutstroom. Terwijl een “hangende uitwisseling” in principe een vertraging veroorzaakt, verstoort een “mislukte uitwisseling” hoogstwaarschijnlijk het functionele proces. Het vinden van de oorzaak van een “mislukte uitwisseling” is daarom cruciaal en we beschouwen het vinden van preventieve maatregelen als een iteratief proces. Maar als je een flow live zet, weet je vaak nog niet alles.

Meestal zien we mislukte uitwisselingen rond (externe) eindpunten die een onvoorzien antwoord geven, of helemaal geen antwoord. Het is daarom belangrijk om extra aandacht te besteden aan dat endpoint en goed om te gaan met de gegeven antwoorden. Tegelijkertijd moet je voorbereid zijn op wat je op dat moment nog niet weet of kunt weten.

Variabelen die het resultaat beïnvloeden

Naast hangende en mislukte uitwisselingen wordt een goed functionerend integratieplatform beïnvloed door het gebruik. In de praktijk wordt dit gebruik beïnvloed door de kwaliteit van de integraties die gebouwd zijn zoals hierboven beschreven en zeker ook door de kwaliteit van de endpoints. Andere factoren van invloed zijn het volume en de frequentie van inkomende en uitgaande gegevens, het volume van bestandsformaatconversies en mappings, het aantal gebruikte flows en componenten. De beschikbare gedeelde of privé-infrastructuur, in het bijzonder het aantal cores en het beschikbare geheugen, is een andere factor van invloed. Opschalen heeft een directe relatie met kosten die moeten kunnen worden doorberekend en het kan niet gratis worden geïmplementeerd.

De nieuwe Health Check API

In Fluxygen versie 4.13.1. is de health check API verder uitgebreid. Naast flow informatie (pending, failed, completed) wordt nu ook data aangeboden over het gebruik van CPU en geheugen in de test- en productiecontainers. Door gegevens over flows en infrastructuur te combineren, is het mogelijk om in te zoomen en correlaties te vinden over de “gezondheid” van flows.

We laten zien hoe de infrastructuur zich gedraagt ten opzichte van 80% en 100% beschikbare capaciteit. Om te bepalen of er acties nodig zijn, worden de metingen per minuut verzameld waardoor we het overschrijdingspercentage kunnen vergelijken met de voorgaande 24 uur.
In de loop van december kan deze informatie wekelijks beschikbaar worden gesteld aan partners en klanten.

Foutroute- en stroomfunctiebewaking

Om meer grip te krijgen op mislukte uitwisselingen en functiecontrole hebben onze consultants een aantal best practices ontwikkeld die onze partners kunnen toevoegen aan hun eigen Fluxygen implementatie(s). Hiermee worden fouten opgevangen en verwerkt in een database voor rapportage en analyse.

Foutroutebewaking (ERM)

Het doel van de foutroutebewaking is het verzamelen, analyseren en rapporteren van mislukte uitwisselingen met alle responsinformatie, zodat de fout de volgende keer kan worden voorkomen. Een voorbeeld is mislukte authenticatie omdat een gebruiker iets moet resetten in zijn eigen systeem. Door de verantwoordelijke in een dergelijk proces te informeren over een opgetreden fout, kan deze persoon het probleem vaak zelf oplossen en zo voorkomen dat het integratieproces (langdurig) stil komt te liggen.

Flowfunctiebewaking (FFM)

In FFM wordt alles wat niet aan de aannames en verwachtingen voldoet opgevangen. Eerder noemden we de zogenaamde “happy flow” waarin zoveel mogelijk rekening wordt gehouden met het gedrag van eindpunten. Dit voorkomt niet dat (ongedocumenteerde) reacties tot iets onverwachts kunnen leiden. Het resultaat van FFM is dat voorheen onbekende reacties van eindpunten bekend worden en functioneel afgehandeld kunnen worden binnen de definitie van de flow.

ERM en FFM kunnen door de partner of klant worden opgezet met behulp van flowvoorbeelden en beschrijvingen die beschikbaar zijn in de Fluxygen Academy.

Wil je meer weten?

Laten we contact maken!

Relevante bronnen

Fluxygen 4.17.13

Fluxygen release 4.17.13 richt zich op beveilig...

Een API-koppeling is nog geen applicatie-integratie

Een API-koppeling alleen maakt nog geen goede a...

Beveilig jouw integraties met Fluxygen hardening

Met Fluxygen hardening bepaalt u precies welke ...

Afl. 6: Het slim afhandelen van fouten – Integratie TMS met Visibility platform

In de laatste aflevering van Integreren met Flu...

Deze website gebruikt cookies

Wij gebruiken cookies om inhoud te personaliseren, functies voor sociale media te bieden en ons verkeer te analyseren. Wij delen ook informatie over uw gebruik van onze site met onze analysepartners. U kunt uw voorkeuren op elk moment wijzigen. Raadpleeg voor meer informatie ons Privacybeleid en Cookiebeleid.