Handelsbanken – Avancerad Dataanalys & Maskininlärning för Regulatorisk Rapportering

Typiskt konsultuppdrag som Datastrategerna kan bidra med. Här med fokus på att stötta underhåll och bidra med teknisk kompetens inom machine learning för redan befintliga system. 

Handelsbankens analysteam, ANLY, erbjuder en plattform för interna team att följa tjänstetrender och rapportera statistik till tillsynsmyndigheter som EU och Finansinspektionen, för att säkerställa efterlevnad av specifika mätvärden. ANLY-plattformen omfattar:​

• Kafka-kluster: Kunder skickar loggdata hit. SysLog-data som inte stöds dirigeras genom Rsyslog, konverteras till JSON och vidarebefordras sedan till Kafka-mäklare.​

• Elastic Stack: Denna stack, bestående av Logstash, Elasticsearch och Kibana, bearbetar data från Kafka, indexerar den i Elasticsearch och låter användare visualisera den med Kibana.​

• Hadoop Stack: Används för att bevara historisk data och generera rapporter. Data bearbetas genom KSQL och Schema Registry, formateras som Avro-filer och lagras i HDFS. Zeppelin visualiserar trender och rapporter.​

En viktig del av arbetet innefattade underhåll av Hadoop-stacken, att assistera kunder med Hadoop-relaterade problem och att stödja ANLY-teamet i att förbättra plattformens arkitektur inför en molnmigrering.​

Dessutom introducerades en maskininlärningslösning i Elasticsearch för användning efter migrering, med utnyttjande av olika Elasticsearch-funktioner och Python-mallar för att skapa anpassade modeller.