BigData & Cloud @ Excelerate Systems France

#BigData
#Cloud
#Cloud #BigData #Security #Mobile

@ExcelSysFrance

ExcelerateSystemsFrance

#BigData
#Cloud
L'apprentissage commence par l’écoute

@ Excelerate Systems, nous écoutons vos Big Data!

@ExcelSysFrance


DATA Source
(???)
DATA Source
(Database)

Le Traitement de
Données…

DATA Source
(CSV)
DATA Source
(SIG)

DATA Source
(Log)

encore
aujourd’hui
Administrateurs de
centre de données

Analyste B.I
Forces de Ventes


@ExcelSysFrance


 Plus de 90% sont des données non structurées
 500 quadrillion de fichiers
 Quantité double tous les 2 ans
Évolution de la DATA

Des changements
considérables lors
des 30 dernières
années

+3 trillion Go de données créées en 2013…

Applications
Internet
Smartphones & Tablettes
Machines intelligentes
Capteurs
UNSTRUCTURED DATA – 90%

STRUCTURED DATA – 10%

2013

1980
1 Trillion = 1018, soit un milliard de milliards.
1 Quadrillion = 1024


@ExcelSysFrance


• Fastest sort of a TB, 62secs
over 1,460 nodes
• Sorted a PB in 16.25hours
over 3,658 nodes

Hadoop
BigBang


@ExcelSysFrance


#BigData
@ExcelSysFrance
@Cloudera

Doug Cutting
Can we measure every star in the universe?
> Ask Bigger Questions
http://youtu.be/i-VQHB8miBY


@ExcelSysFrance


Les 3V qui
imposent le
changement
- Volume
- Variété
- Vitesse


@ExcelSysFrance












@ExcelSysFrance


ENGINEERS

Les
Changements

Meta Data/
ETL Tools

ANALYSTS

IDEs

DATA
ARCHITECTS

DATA SCIENTISTS

Modeling
Tools

BI /
Analytics

SYSTEM
OPERATORS

BUSINESS USERS

Enterprise
Reporting

Cloudera
Manager

ODBC, JDBC,
NFS, HTTP

dans le Système
d’Information
des Entreprises

Sqoop

Sqoop
Flume
Logs

Flume
Files


Flume
Web Data

@ExcelSysFrance

Enterprise Data
Warehouse

Online Serving
Systems

Sqoop
Relational
Databases


CUSTOMERS

Web/Mobile
Applications

Le modèle

Data Driven Entreprises
repose sur une architecture

Enterprise Data Hub


@ExcelSysFrance


Risk Modeling

Quels sont les
domaines
d’applications de
Hadoop ?

Customer Churn
Analysis

Recommendation
Engine

Ad Targeting

Point of Sale
Transactional
Analysis

Threat Analysis

Trade
Surveillance

Search Quality

Data Sandbox

Source: Cloudera “Ten Common Hadoopable Problems”

 Moteurs de Recommandations: les géants du Web et les sites de e-commerce qui utilisent Hadoop, l’utilisent
pour proposer à leurs clients des produits et services basés sur l'analyse du profil utilisateur et les données
comportementales. LinkedIn utilise cette approche pour alimenter son "personnes que vous connaissez peutêtre", tandis qu’Amazon l’utilise pour proposer des produits liés aux habitudes d’achats pour les
consommateurs en ligne.

BigData

Cas d’Usages !

 Analyse de Sentiments: Utilisé en conjonction avec Hadoop, et des outils avancés d'analyse de
texte, essentiellement non structuré des médias sociaux et des publications et blogs de réseautage social, y
compris les tweets et messages Facebook, afin de déterminer le sentiment des utilisateurs liés à des
entreprises particulières, des marques ou des produits. L'analyse peut se concentrer sur une analyse macrosentiment jusqu'au sentiment de chaque utilisateur.
 Modélisation des risques: les entreprises financières, les banques et d'autres utilisent Hadoop et Entrepôts de
données nouvelle génération pour analyser de grands volumes de données transactionnelles pour déterminer
le risque et l'exposition des actifs financiers, afin de préparer des scenarii potentiels "what-if" basés sur le
comportement du marché simulé, et de marquer des clients potentiels pour le risque.
 Détection de la fraude: Utiliser les techniques du BigData pour combiner le comportement des
clients, historiques et données transactionnelles pour détecter les activités frauduleuses. Les sociétés de
cartes de crédit, par exemple, utiliser les technologies BigData pour identifier le comportement transactionnel
qui indique une forte probabilité d'une carte volée.
 Analyse campagne de marketing: Les départements de marketing dans les industries ont longtemps utilisé
la technologie pour surveiller et évaluer l'efficacité des campagnes de marketing. BigData permet aux équipes
de marketing d’intégrer l'augmentation des volumes de données de plus en plus granulaires pour augmenter
la précision de l'analyse.


@ExcelSysFrance


 Analyse du taux de désabonnement des clients: Les entreprises utilisent Hadoop et les technologies de
BigData pour analyser les données du comportement des clients pour identifier les modèles qui indiquent que
les clients sont plus susceptibles de les quitter pour un service ou fournisseur concurrent. Action peut alors
être prise pour sauver et garder les plus rentables de ces clients.

BigData

Cas d’Usages !
(suite.)

 Analyse Social Graph: les données de prochaine génération et les données de réseaux sociaux sont extraites
pour déterminer quels clients ont le plus d'influence sur les autres à l'intérieur de réseaux sociaux. Ceci aide
les entreprises à déterminer quels sont leurs «plus importants», clients qui ne sont pas toujours ceux qui
achètent le plus de produits ou dépensent le plus, mais ceux qui ont tendance à influer sur le comportement
d'achat d’autres personnes.

 Data Analytics: utiliser Hadoop et les grandes technologies connexes pour intégrer des données provenant
de canaux d'interaction client cloisonnés tels que centres d'appels, chat en ligne, Twitter, etc… pour avoir une
vision complète de l'expérience client. Cela permet aux entreprises de comprendre l'impact d'un canal
d'interaction client dispose sur un autre afin d'optimiser l'expérience client dans son ensemble du cycle de vie.
 Réseau de surveillance: Hadoop et d'autres technologies BigData sont utilisés pour ingérer, analyser et
afficher les données collectées à partir des serveurs, périphériques de stockage et autres matériels
informatique pour permettre aux administrateurs de surveiller l'activité du réseau et de diagnostiquer les
goulots d'étranglement et autres problèmes. Ce type d'analyse peut également être appliqué à d'autres
formes de réseaux, notamment des Réseaux de Transport afin d'améliorer l'efficacité énergétique.
 Recherche et développement: les entreprises, comme les fabricants de produits pharmaceutiques, utilisent
Hadoop pour passer au peigne fin les volumes énormes de texte basé sur la recherche et d'autres données
historiques pour aider au développement de nouveaux produits.
Ce ne sont, bien sûr, que quelques exemples et cas d’utilisation du BigData.
En effet, le cas d'utilisation le plus convaincant dans une entreprise est peut-être celui qui n’est pas encore
élaboré. Telle est la promesse de BigData !

@ExcelSysFrance


Prévisions du
marché de
l’emploi

Source: Indeed -- http://www.indeed.com/jobtrends/Hadoop.html

Chief Data Officer (CDO) : la responsabilité du CDO concerne les données et leur état
(riches, fraîches, fiables et cohérentes) ainsi que leur gouvernance.
Les données peuvent être d’origine interne ou externe, privée ou publique

Les Nouveaux
Métiers

Data Scientist : est chargé de développer les outils adaptés à la structure, de
collecter, de faire parler les données numériques et de les présenter sous un format
simple (DataViz)
Data Analyst : va manipuler les données une fois que la base est opérationnelle, afin
de faire remonter les informations susceptibles de favoriser les prises de décisions.
Et l’évolution des métiers d’Architectes, d’Administrateurs Réseaux, de DBA … etc.


@ExcelSysFrance


Le manque de ressources et de compétences est l'un des
obstacles à l'adoption du BigData.
Selon McKinsey, à horizon 2018,

Comment ?

les États-Unis devront faire face à une pénurie de :
• 140.000 à 190.000 personnes avec des compétences d'analyse de données
• 1,5 million d’analystes avec le savoir-faire minimum leur permettant utiliser
l'analyse de données massives pour prendre des décisions efficaces.

En France, et au vu du faible taux de pénétration de ces nouveaux modèles de
BigData dans les entreprises, la pénurie devrait être proportionnellement plus
importante.


@ExcelSysFrance







































@ExcelSysFrance


Ecosystèmes
Hadoop


@ExcelSysFrance


Excelerate Systems est votre interlocuteur Cloudera en France.
Ensemble, nous offrons aux entreprises une puissante plate-forme BigData basée sur Apache Hadoop

 Cloudera est le plus grand
contributeur au projet
OpenSource

#BigData

 C’est une distribution CDH prête à
l’emploi pour les entreprises.
 Intègre les projets les plus
populaires liées à Hadoop dans
un package unique, qui est géré
par le biais d'une série de tests
rigoureux afin de garantir la
fiabilité lors de la mise en
production.


@ExcelSysFrance

 Initialement développé et utilisé
par des entreprises tels que
Google, Yahoo et
Facebook, Hadoop est maintenant
largement utilisé dans :
 la finance,
 la technologie,

 Les télécommunications,
 Les médias et le divertissement,
 Les organisations
gouvernementales,
 les instituts de recherches


Solution basée sur Apache Hadoop
INGEST

Cloudera
Enterprise
The Platform
for Big Data

STORE

MANAGEMENT
SOFTWARE &
TECHNICAL SUPPORT
(SUBSCRIPTION)

EXPLORE

PROCESS

ANALYZE

CM

CS

CLOUDERA MANAGER

SERVE

CLOUDERA SUPPORT

CDH

OSS
APACHE HADOOP & OPEN SOURCE SOFTWARE

BRINGS STORAGE &
COMPUTE TOGETHER


WORKS WITH EVERY
TYPE OF DATA

@ExcelSysFrance

CHANGES THE
ECONOMICS OF DATA
MANGAGEMENT


20

INGEST

STORE

EXPLORE

ANALYZE

SERVE

CLOUDERA
UNIVERSITY
DEVELOPER
TRAINING

MANAGEMENT
SOFTWARE &
TECHNICAL SUPPORT
(SUBSCRIPTION)

Solution
Complète

PROCESS

CM

CS

CLOUDERA MANAGER

CLOUDERA SUPPORT

ADMINISTRATOR
TRAINING
CDH

OSS
APACHE HADOOP & OPEN SOURCE SOFTWARE

DATA SCIENCE
TRAINING

PROFESSIONAL SERVICES
USE CASE DISCOVERY

NEW HADOOP DEPLOYMENT

PROOF-OF-CONCEPT

PRODUCTION PILOTS

PROCESS & TEAM
DEVELOPMENT

DEPLOYMENT CERTIFICATION


@ExcelSysFrance

CERTIFICATION
PROGRAMS


21

Excelerate Systems,
+20 Experts reconnus mondialement,
 Depuis 2011, nous avons
développé un réseau de
consultants hautement
qualifiés.

#BigData
Expertise

 Nous avons réalisé plusieurs
projets dans divers secteurs
d’activités.
 e-Commerce

 Data Scientistes,

 Game

 Architectes,

 e-Gouvernement

 Administrateurs,

 Banque et Finance

 Développeurs,

 Grande Distribution

 Analystes, Statisticiens

 Marketing
 Communication
 Sécurité


@ExcelSysFrance


Excelerate Systems,
Des Experts reconnus mondialement,
 France

 États Unis

 2 Développeur Certifié Cloudera
 1 Administrateur Certifié Cloudera

Les Experts


 2 Data Scientiste & Analyste

#BigData

 1 Développeur Certifié Cloudera,

 1 Data Scientiste

 Espagne

 Canada

 1 Développeur Hadoop et Mongo DB

 Mexique

 1 Développeur Certifié Cloudera

 Inde
 2 Administrateurs Certifiés Cloudera,


 2 Développeurs Certifiés Cloudera,

 Brésil

 Chine

 2 Développeurs Hadoop (Sao
Paulo, Belém,

 1 Administrateur Certifié Cloudera,

 1 Administrateur Certifié Hadoop (Belém)

 1 Développeur Certifié Cloudera,

 1 Développeur HBase (Rio)


@ExcelSysFrance


Pour vos Projets BigData
Approche Globale - produits et services
 Analyse des Besoins et Recommandations

#BigData
Services

 Plateformes de Tests, PoC
 Maitrise d’ouvrage et Pilotage de Projets

 Support technique (espagnol, anglais, portugais et Français)


@ExcelSysFrance


Nos réalisations…
Société de Jeux Video
 Recommandation pour la transformation de l'architecture MySQL vers NoSQL
Amélioration des schémas des bases de données et accélération de la vitesse d'exécution des programmes et des
procédures (70 min à moins de 5 Sec)
Choix technique: CDH sur Amazon (AWS) Versus MySQL sur OVH

Organisme Public gestionnaire d’une métropole urbaine (28 communes)

#BigData
Les Projets

 Plate-forme Sentiment Analysis pour un projet de participation citoyenne.
Collecter, analyser et visualiser les usages et données de Twitter, de site de presse en ligne et de blogs
Choix technique: CDH sur AWS

Société de Marketing Internet
 Techlead de l’Equipe Hadoop/BigData.
Réécriture de l'ETL propriétaire en place en se basant sur l'application « importtsv » de Hbase.
Implémentation de jobs Mapreduce de déduplication de mailling-list.
Assistance et conseil à l'élaboration d'une plateforme d'analyse de données basée sur l'environnement Hadoop.
Rédaction de cahiers de charges pour le provisioning du cluster Hadoop/Hbase.
Initiation à l'agilité (scrum/xp).


@ExcelSysFrance


D’autres réalisations de nos Consultants…
Plateforme E-Commerce multicanal Groupe de grande distribution (France/Lille)
 Référent technique Hadoop/HBase.
Automatisation du provisionning du cluster Hbase avec Whirr.
Mise en place de tests d'intégrations.
Revue de code.
Proposition et Conseil sur les choix techniques et d'implémentation de la solution.

#BigData
Les Projets

Plateforme E-Commerce Voyagiste (France/Courbevoie)
 Proposition d'une architecture basée sur l'environnement Hadoop pour mise en place d'une solution de « Web
Usage Mining » (W.U.M).
Réalisation d’une solution de W.U.M basée sur Apache Mahout et Apache Hadoop.
Deep refactoring du mécanisme de collecte des données destinées aux W.U.M. remplaçant le stockage dans une
base relationnelle par une approche Write-Ahead logging. ….etc.

Et bien d’autres exemples de réalisations

@ExcelSysFrance


#BigData
#Cloud
La Performance commence par le Changement
@ Excelerate Systems, nous transformons vos centres de Données !


@ExcelSysFrance


L’Activateur de l’Open Cloud


@ExcelSysFrance


What is OpenStack able to do for you?
 Your organization will be enabled to create and offer cloud
computing services running on standard hardware.
 Who’s behind OpenStack? Founded by Rackspace Hosting and
NASA. OpenStack is a global collaboration producing the ubiquitous
open source cloud computing platform for public and private clouds.
 Who

uses

OpenStack?

Corporations,

service

providers, VARS, SMBs, researchers, and global data centers
looking to deploy any-scale cloud deployments for private or public
clouds


@ExcelSysFrance


Your company will be enabled to configure, deploy and operate
OpenStack clouds with a high level of automation, easily and quickly
thanks to its Head Manager Dashboard.
Advantages:
 Create your whole private cloud platform in few hours.
 Delegate most operation tasks because of a high level of
automation.
 Launch a new instance in few seconds.
 Provide your platform with a HA solution fully integrated.
 Provide your internal customers with a Self-service dashboard .


@ExcelSysFrance


How can StackOps do it?

 Features:
 StackOps Automation eases the installation and operation of your cloud.
 High Availability fully integrated
 Monitoring tool integration.
 Cloud user Portal.
 Accounting Portal.
 Chargeback Portal.
 Third Party components seamless support.
 Cloud User dashboard Integration

 Integration with Amazon.


@ExcelSysFrance


StackOpsVirtual Private Cloud
 StackOps enables your company to provide fully isolated virtual private
clouds.
 No resource sharing, fully dedicated hardware, StackOps administration
portal and no upfront investment


@ExcelSysFrance


BigData
QuickStart

@ExcelSysFrance


 Vous vous demandez comment entrer dans le BigData, et vous
vous posez des questions sur les coûts, la complexité, les
compétences et surtout quels avantages vous en tireriez.

Entrez
Rapidement
dans le l’ère
BigData

 vous pensez à l'explosion massive des données structurées et non
structurées dans votre entreprise et vous vous demandez
comment utiliser ces nouvelles technologies pour les exploiter
 Peut-être que vous savez déjà ce que vous voulez faire avec
l’architecture BigData, mais ne savez pas comment commencer.
 Vous recherchez un partenaire qui peut vous aider à naviguer dans
ces nouvelles technologies et capable de vous offrir la BigData
dont vous avez besoins.
 Besoin également d’applications d’intégration de données
massives structurées et non structurées et parfois multilingues !


@ExcelSysFrance


Excelerate Systems a établi un partenariat solide avec Cloudera et
d'autres technologies innovantes de l’industrie du Cloud et du
BigData pour vous fournir une infrastructure à votre
mesure, hautement performante et avec les avantages suivants :

BigDataCloud
QuickStart
avec
Tarification à
l’Usage

 Coûts Réduits
Payez en fonction de votre utilisation, sans aucun frais initial ni
engagement à long terme.
 Élasticité
Déployez instantanément votre application et données.
Augmentez ou diminuez vos ressources à l'échelle, en fonction de
vos besoins.

 Flexibilité
Tout ce que vous pouvez exécuter dans un centre de données peut
s'exécuter dans la plateforme BigDataCloud.
Vous disposez d'une maîtrise totale.
 Sécurité
Bénéficiez d'une plate-forme technologique sécurisée, répondant
à toutes les normes en vigueur.


@ExcelSysFrance


De nombreux clients savent, veulent ou ont besoin d'entrer dans le
BigData !
nous les aidons à démarrer, assurons leurs formations sur ces
technologies et les accompagnons dans ces nouveaux environnements.

Démarrez
BigDataCloud
QuickStart

 C’est un accès immédiat { un environnement fonctionnel dans le Cloud
composé d’un Nœud de 5 Clusters Cloudera, avec une visualisation
complète des résultats en 5 jours.
 Excelerate Systems peut mettre en œuvre votre Cluster Cloudera
personnalisé, rapidement en quelques jours.
 Essayez le BigDataCloud. Pendant un mois à 3 mois.
 Activer / Arrêter / Redémarrer le service quand vous le souhaitez et ne
payer que pour les ressources dont vous avez besoin au moment où
vous en avez besoin.


@ExcelSysFrance


Ils nous font confiance…
Finance

Telecoms

Government

+100 Clients
Worldwide
Commercial


@ExcelSysFrance


Retail

 Entreprise Privée, Fondée en 2007 à Seattle (Redmond), Washington
USA

Qui sommesnous ?

 Des bureaux pour l’Europe à Bordeaux (France), pour l’Amérique
Latine à Mexico (Mexique), et des représentations en Afrique du
Sud, Australie, Inde et Chine.
 Offre Riche dans 4 catégories
1.
2.
3.
4.

BigData, Cloud et Virtualisation.
Sécurité et Protection des Données et Optimisation des S.I
Gestion et Sécurité du Mobile en Entreprise et le CRM-Mobile.
Connectivité au Systèmes Centraux et l’intégration des Mainframes


@ExcelSysFrance


Nos Solutions


@ExcelSysFrance


Let’s QuickStart* !
#BigDataCloud


@ExcelSysFrance


Suivez nos activités : #BigData #Security #Cloud #Mobile
@ExcelSysFrance


Excelerate Systems - BigData, Cloud & Security Community

Merci de votre participation

BigData & Cloud @ Excelerate Systems France

Contenu connexe

Tendances (19)

En vedette (10)

Similaire à BigData & Cloud @ Excelerate Systems France (20)

Plus de Excelerate Systems (16)

BigData & Cloud @ Excelerate Systems France

Notes de l'éditeur