hurence · hadoop, bases nosql, moteurs de recherche, développements sur stacks diverses temps...

17
<slide-name> Hurence | Page 1/ 15 Hurence

Upload: others

Post on 22-May-2020

5 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 1/ 15

Hurence

Page 2: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 2/ 15

Hurence “Le Big Data sur mesure”

● Hurence SAS● Création Avril 2011● 13 collaborateurs issus des plus grandes

sociétés de l'IT (IBM, HP, Sun Microsystems, Oracle, Xerox, Motorola etc.)

● Croissance exponentielle chaque année (86 % l'an dernier)

● ~1 Million de CA (avec un capital initial de 10 000 euros)

● Experts en Big Data (Data Lakes, Data science, etc.)

● Près de la moitié des acteurs du CAC 40 sont clients de Hurence

● Lancement de LogIsland, plateforme temps réel d’analyse d’événements, suite à travaux clients : 2015

● En production chez plusieurs clients à ce jour dont Carrefour, Française des Jeux, Groupe IPH (et à venir d’autres grands comptes).

Page 3: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 3/ 15

Quatre pôles d’activités

l Cadrages d’initiatives Big DataSizing et installation d’infrastructures Big DataDéveloppements Big Data du POC à la mise en production

Plus de 25 modules de formations Big DataHadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc.

Support d’infrastructures Hadoop Monitoring, configuration, patchs, upgrades

Suite LogIsland Traitement temps réel d’événements sur des grosses volumétries (open source basé sur Spark / Kafka)

Page 4: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 4/ 15

®

Page 5: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 5/ 15

LogIsland : la genèse

● Gestion des stocks en temps-réel (Carrefour)● L’entreprise: un ensemble d’événements liés à traiter (un achat,

un CA, un stock, des commandes...)

Page 6: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 6/ 15

LogIsland: cybersécurité performance IT

● 5000 serveurs● 10 Téraoctets de logs/ jour

contenant:

● Détection automatique au fil de l’eau d’anomalies

● Levées d'alertes ● Des indicateurs facilement

construits

● Les traitements de détection de problèmes sont avancés et spécifiques à l’urbanisation

La science anti-cybercriminalité doit être disponible dans des analyseurs temps-réel configurables simplement

Page 7: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 7/ 15

LogIsland : Web Open Analytics

● Analyse en temps-réel du trafic web et mobile sur le site de commerce (consultation d’une page produit, mise au panier, utilisation du moteur de recherche, ...).

● Permet de posséder la donnée brute (contrairement à Google Analytics)

Page 8: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 8/ 15

®

Page 9: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 9/ 15

LogIsland : web open analytics

● Enrichir à partir de sources de données internes (ERP, positionnement des prix, PIM, base des users, ...) / externes

● Permet d’optimiser les ventes et de mesurer et comprendre l’impact de certains paramètres du site sur le CA.

● Proposer des recommandations en temps-réel en fonction du contexte et de l’utilisateur connecté.

● Permet d’adapter le site en temps-réel et de proposer des ventes additionnelles (ventes liées)

Page 10: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 10/ 15

LogIsland : Web Analytics

reverse proxy

Page 11: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 11/ 15

®

Page 12: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 12/ 15

LogIsland: l’usine du futur (Industry 4.0)

● Centraliser tous les événements de l’usine dans le Data Lake● Pour le stockage et l’analyse des séries temporelles

○ Logisland Data Historian (open-source)● Permet des analyses croisées et traitements de machine learning (détecter des

anomalies, comparer les machines dans le temps et monitorer leur usure) => calcul de modèles

● Permet d’appliquer ces modèles en temps réel pour :○ Smart alerting,○ Maintenance prédictive etc ...

Page 13: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 13/ 15

LogIsland: with or without the Cloud

Page 14: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 14/ 15

LogIsland Edge Computing Layer

Reference I(I)oT architecture

LogIsland Message BrokerKafka

LogIsland Complex Event Processing Layer Spark streaming

OPC UA / DA servers Applications

events and time series in queues

Pattern and anomalies detectionsSmart alerts generationPredictions

Storage of eventsand time series

LogIsland Data Historian(OPC UA server)

Time series compressionAdvanced search

Big Data Lakes and databases Hadoop HDFS, Cassandra, Elasticsearch etc.

LogIsland Data Historian Web UIs (Graphers with advancedsampling, Alerts etc.)

BI Dashboards and Reports

Qlik, PowerBI, Tableau, Kibana...

data viz

data storage

real-timeanalytics

eventtransport

LogIsland Modeling Engine

eventcapture

Monitoring

and

Security smart alerts

Page 15: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 15/ 15

Data Historian FeaturesPerformant

● 5 ms update rate● High compression (Chunk oriented design

with very small disk footprint)● Constant query time on years of Data

Open

● Free & Open-Source (apache 2.0)● Multi-source tag values collection● Cross platforms● OPC-DA client (Data Access)● OPC-UA server (Unified Access)● R/Spark/Hadoop/Grafana compliance● REST API integration● Deploy & run on Docker● Yarn & Kubernetes compliant

Robust● High availability● High scalability● 10 000 tags and more

Advanced● Time series search (full text search on

metadata)● Lucene-based query matching for alerting

○ alert if conditionA:true AND conditionB:[0 TO 500]

● Advanced analytics (stats, trending, outliers, Symbolic Aggregate approXimation, etc.)

Secure

● Advanced Security with Keycloak (OpenId-connect, Kerberos, ldap federation, custom authorization/audit)

● Advanced data governance and policies setting possible

Page 16: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 16/ 15

Grapher

Page 17: Hurence · Hadoop, bases NoSQL, moteurs de recherche, développements sur stacks diverses temps réel ou non, machine learning, deep learning etc. Support d’infrastructures Hadoop

<slide-name> Hurence | Page 17/ 15

Logisland: Support Pricing*

(*): Prix pour un cluster de 320 coeurs (20 machines de 16 coeurs)Puis 5000 euros par grappes de 10 machines (160 coeurs) supplémentaires(**): Support 7j/7 24/24: A discuter si besoin

Formule Community Essentials Silver Gold

Composants Logisland

Support Logisland & composants Apache Hadoop (Kafka, Spark, ...)5j/7 9h00 -18h00 (**)

Composants Logisland Monitoring

Pack 5j assistance installation, mises a jour et formation de Logisland, LogIsland Monitoring & composants Apache Hadoop

Pack 20j developpement processeurs custom Logisland

Coût/an 35k 45k 55k