Alexandre Fricker raconte sa découverte de la Suite Elastic et montre quelles sont ses applications d'utilisation chez PSA Peugeot Citroën.

Il y a 2 ans, en tant qu’architecte de l’infrastructure des sauvegardes des systèmes Windows, Linux et Unix chez <a href="http://www.psa-peugeot-citroen.com/fr" target="_blank">PSA</a> (Peugeot, Citroën Automobile sans oublier DS), on m’a demandé de regarder ce que faisait PSA avec Elasticsearch (i.e. stockage et recherche de logs multilignes pour la fabrication). L’idée était de déterminer comment en généraliser l’utilisation pour en faire un service d’infrastructure centralisé et mutualisé.
Elasticsearch est utilisé depuis 2 ans chez PSA et il se substitue à toutes écritures de fichiers log. Après quelques recherches sur Internet, que ne fut pas ma surprise de découvrir les autres briques de cet écosystème. La Suite Elastic se compose d’Elasticsearch, Logstash et Kibana.
<ul>
	<li>Logstash&nbsp;est,&nbsp;pour moi,&nbsp;un véritable couteau suisse du traitement des logs. Il peut en déterminer les différents formats mais aussi&nbsp;dialoguer directement suivant des protocoles très variés. Il détient également un composant essentiel appelé Grok : champion des expressions régulières.</li>
	<li>Elasticsearch, offre une mise en œuvre initiale hyper-rapide et hyper-simple tout en étant un outil hyper-scalable.</li>
	<li>Kibana&nbsp;est, selon&nbsp;moi, la brique la&nbsp;plus satisfaisante. Elle offre la possibilité de plonger, naviguer et rechercher des informations&nbsp;dans cet océan&nbsp;de logs à partir des métadonnées ajoutées par Logstash. Par exemple:&nbsp;choisir un mot, puis un autre, suivre leurs apparitions dans les messages via l’histogramme coloré.</li>
</ul><img src="https://api.contentstack.io/v2/assets/575e4d053dc542cb38c09727/download?uid=bltc15d3f83b3379a87?uid=bltc15d3f83b3379a87" data-sys-asset-uid="blt585ad78916dc8d7c" alt="kibana_dashboard_PSA.png" style="max-width: 100%;">
Figure 1&nbsp;: Histogramme Kibana permettant de suivre l'apparition des message en temps réel 
Ou encore, vérifier l’équilibrage de la charge sur un cluster applicatif par l’ajout d’un camembert qui fait apparaître un 50/50, 33/33/34, 13/13/13/13/13/13/13/13 et permet de vérifier d'un coup d’œil que tout va bien.
<img src="https://api.contentstack.io/v2/assets/575e4d05d8edd48f76937268/download?uid=blt7a155a4dca8e24fb?uid=blt7a155a4dca8e24fb" data-sys-asset-uid="blt29f44b283e2db613" alt="pie_chart_kibana_PSA.png" style="max-width: 100%;">
Figure 2&nbsp;: Camembert Kibana permettant de vérifier l'équilibrage des cluster
Ou au contraire un 13/13/13/30/30 qui montre que, suite au dernier changement, un ou plusieurs nœuds sont soit mal desservis, soit il existe un chemin réseau anormal. 
<img src="https://api.contentstack.io/v2/assets/575e4d063dc542cb38c0972f/download?uid=blt3669d444b782e3e5?uid=blt3669d444b782e3e5" data-sys-asset-uid="blt833e019c9772913c" alt="pie_chart_2_kibana_PSA.png">
Figure 3&nbsp;: Camembert Kibana montrant un déséquilibre de la charge&nbsp;des clusters 
<img src="https://api.contentstack.io/v2/assets/575e4d06d8edd48f76937269/download?uid=blt68ca82a9e5ea3597?uid=blt68ca82a9e5ea3597" data-sys-asset-uid="blt23ba60ee13278600" alt="kibana_dashboard_2_PSA.png" style="max-width: 100%;">
<img src="https://api.contentstack.io/v2/assets/575e4d0643e9adc538714ef0/download?uid=bltdea8a42f31d3df8d?uid=bltdea8a42f31d3df8d" data-sys-asset-uid="blte98ca6841e8a16b6" alt="kibana_dashboard_3_PSA.png" style="max-width: 100%;">
Figure 4 et 5 : Histogrammes Kibana montrant un déséquilibre de la charge des clusters 
J’étais un peu frustré au moment de vouloir exporter ce dashboard (c’est son nom)&nbsp;avant de faire une capture d’écran ou un copier/coller vers Excel et de découvrir que ça marche (Eureka !). J’ai aussi découvert la documentation en ligne et le blog, journal du matin à lire avant la météo et avant la surveillance des clusters Elasticsearch et des applications qui l’utilisent. C’est comme recevoir sa première boite de Lego à Noël! Faire la première construction c’est déjà bien mais on veut surtout tout essayer!
Après cette première étape, j’enrichis&nbsp;les logs. Au passage je découvre les&nbsp;vidéos éternelles de Shay Banon, Jordan Sissel et Rashid Khan et la&nbsp;démonstration sur Raspéry PI et la vision du downscale applicatif.
Je commence par la normalisation des dates. Puis j’utilise Grok, le scalpel du formatage des logs avec son dictionnaire de format prédéfini qu’il est possible de compléter, permettant ainsi l’automatisation de l’ajout de sens à ses messages et la reconnaissance des champs numériques. Dès lors, je passe les logs dans Kibana avec un panel au format table ou camembert et un historique qui permet de suivre l’évolution des grandeurs numériques. Du coup, au lieu d’avoir uniquement les logs avec l’accès à un site apache, j’ai aussi une vision centralisée de ces logs qui me permet de suivre la qualité de ce site.
<img src="https://api.contentstack.io/v2/assets/575e4d0658208ba076e294df/download?uid=blt0e5dba6859439f27?uid=blt0e5dba6859439f27" data-sys-asset-uid="blt88d02af6ac1f0d48" alt="kibana_dashboard_4_PSA.png" style="max-width: 100%;">
Figure 6 : Dashboard Kibana montrant les indicateurs de performance et de qualité&nbsp;du site 
Sans oublier l’utilisation de geoip pour identifier le pays de connexion d’un internaute.
<img src="https://api.contentstack.io/v2/assets/575e4d0658208ba076e294e5/download?uid=blt578a9f69b11380b0?uid=blt578a9f69b11380b0" data-sys-asset-uid="blt59ea647dd5534475" alt="kibana_geoip_PSA.png" style="max-width: 100%;">
Figure 7 : Carte Kibana utilisant la géolocalisation pour identifier le pays de connexion des internautes 
Au même moment, je découvre Splunk. Cependant, pour naviguer dans les données avec cet outil, il faut définir sa sélection de données, définir sa visualisation, puis placer ses visualisations dans un dashboard. C’est un outil très très puissant, mais le parcours utilisateur est très sclérosé. Sans parler d’une licence indéxée sur le volume quotidien de données. Résultat: seulement 6 à 10 utilisateurs chez&nbsp;PSA, là où Kibana a déjà conquis 20 utilisateurs en seulement 6 mois.
Et là au détour d’un Meetup je découvre la facilité de créer des plugins pour Logstash :
<ol>
	<li>Faire un input plugin qui capture une image via la webcam</li>
	<li>Faire un filter plugin qui compare cette image à la précédente ou à une image de référence</li>
	<li>Faire un output plugin qui utilise la synthèse vocale pour diffuser un message d’alerte</li>
</ol>Donc non seulement on a la boîte de Lego&nbsp;mais aussi l’imprimante 3D pour créer de nouvelles pièces. Et là, quitte à copier un slogan déjà utilisé : s’il vous manque quelque chose… Just Do It!
<h3>Sans parler de...</h3> L’équipe dynamique. 
Des meetups. Lieux d’échange conviviaux où se retrouvent vieux développeurs barbus, jeunes loups aux dents longues avides de la dernière techno à la mode, experts systèmes d’entreprise à la recherche de toujours plus d’automatisation pour pallier au manque de ressources. A cette occasion, je devais faire une présentation de 20 minutes puis 10 minutes de Q&A, mais ça a duré 45 minutes (désolé pour le suivant) et ensuite 2h de questions autour d’un buffet.
L’occasion de présenter l’expérience PSA mais aussi ma lettre au Père Noël. Nous avions notamment le besoin d’un heartbeat dans Logstash et 6 mois plus tard cette fonction est disponible même étendue par une analyse fonctionnelle poussée.
Ensuite tel un pasteur, j’ai fait mon premier discours et ma première démonstration en comité restreint. Devant l’accueil et la satisfaction de tous, j’ai entamé une longue route pour évangéliser les différentes BU (Business Units) de l’entreprise - ce qui a d’ailleurs rencontré un grand succès.
Que dire de plus si ce n’est qu’en 2 ans la Suite Elastic chez PSA c’est 92 applications opérationnelles ou en cours de mise en œuvre.
<img src="https://api.contentstack.io/v2/assets/575e4d060342dfd73826462b/download?uid=blt24599732e077f509?uid=blt24599732e077f509" data-sys-asset-uid="bltb5bdd9b8fd43db3a" alt="suivi_projet_PSA.png" style="max-width: 100%;">
Figure 8 : Répartition des différents projets utilisant la suite Elastic chez PSA 
Pour plus de détails concernant les applications de la Suite Elastic chez PSA,&nbsp;vous pouvez visionner ma présentation&nbsp;"<a href="https://www.elastic.co/elasticon/tour/2015/paris/kibana-l-efficience-a-psa" target="_blank">Kibana l'efficience à PSA</a>" que j'ai effectué à l'occasion du&nbsp;Elastic{ON} Tour Paris 2015.
<hr><img src="https://api.contentstack.io/v2/assets/575e4ce743e9adc5387149e0/download?uid=blta2e32e24078f54c3" data-sys-asset-uid="blta2e32e24078f54c3" alt="PSA_2.JPG" width="100" height="137" style="line-height: 1.6em; float: left; width: 100px; height: 137px; margin: 0px;">
Alexandre Fricker est architecte de l’infrastructure technique chez PSA Peugeot Citroën. Après&nbsp;15 ans à gérer l’infrastructure des sauvegardes des systèmes Windows, Linux et Unix, il a découvert Elasticsearch en septembre 2013 et, par la suite, Logstash, Kibana, Redis et Marvel. Aujourd’hui, après avoir mis en place 60 projets pilotes, il est devenu spécialiste du traitement des logs.

Peugeot_Old_Car.jpg

suivi_projet_PSA.png

La Suite Elastic : une boîte de Lego avec une imprimante 3D

Start free trial

Blog Footer CTA

Sign up for Elastic Cloud free trial

Alexandre Fricker

By submitting you acknowledge that you've read and agree to our <a href="/legal/elastic-cloud-account-terms" target="_self">Terms of Service</a>, and you agree to receive the <a href="/legal/privacy-statement#how-we-use-the-information" target="_self">selected communications</a> at the contact details you provided above. See <a href="/legal/privacy-statement/" target="_self">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Communication Preferences - ONLY for /communication-preferences

En confirmant votre envoi, vous reconnaissez que vous avez lu et que vous acceptez nos <a href="/fr/legal/elastic-cloud-account-terms" target="_self">Conditions générales d'utilisation</a>, et vous acceptez de recevoir les <a href="/fr/legal/privacy-statement#how-we-use-the-information" target="_self">types de notification sélectionnés</a> à l'adresse que vous avez fournie plus haut. Pour en savoir plus ou pour revenir sur votre décision (possible à tout moment), consultez la <a href="/fr/legal/privacy-statement/" target="_self">Déclaration de confidentialité d'Elastic</a>.

By submitting you acknowledge that you've read and agree to our <a href="/legal/elastic-cloud-account-terms" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.By submitting this form, I agree to Elastic sharing my contact information with Google Cloud. I also agree to Elastic giving my information to the vendor for the purpose of shipping my food package.

GDPR Text + Google Cloud

By submitting you acknowledge that you've read and agree to our <a href="/legal/serverless-preview-terms" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Serverless GDPR Text

En confirmant votre envoi, vous reconnaissez que vous avez lu et que vous acceptez nos <a href="/fr/legal/serverless-preview-terms" target="_self">Conditions générales d'utilisation</a>, et vous permettez à Elastic de <a href="/fr/legal/privacy-statement#how-we-use-the-information" target="_self">vous contacter</a> à propos de produits et services similaires en utilisant les informations que vous avez fournies plus haut. Pour en savoir plus ou pour revenir sur votre décision (possible à tout moment), consultez la <a href="/fr/legal/privacy-statement/" target="_self">Déclaration de confidentialité d'Elastic</a>.

By submitting you agree to <a href="/agreements/global/cloud-services-monthly" rel="nofollow">Elastic Cloud Terms of Service</a>. Your personal data will be processed in accordance with <a href="/legal/privacy-statement">Elastic's Privacy Statement</a>.

Cloud Trial GDPR Text

En envoyant votre demande d'inscription, vous acceptez les <a href="/fr/agreements/global/cloud-services-monthly" rel="nofollow">conditions générales d'utilisation d'Elastic Cloud</a>. Vos données personnelles seront traitées conformément à la <a href="/fr/legal/privacy-statement">déclaration de confidentialité d'Elastic</a>.

By submitting you acknowledge that you've read and agree to our <a href="/legal/terms-of-use" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Newsletter GDPR Text

En confirmant votre envoi, vous reconnaissez que vous avez lu et que vous acceptez nos <a href="/fr/legal/terms-of-use" target="_self">Conditions générales d'utilisation</a>, et vous permettez à Elastic de <a href="/fr/legal/privacy-statement#how-we-use-the-information" target="_self">vous contacter</a> à propos de produits et services similaires en utilisant les informations que vous avez fournies plus haut. Pour en savoir plus ou pour revenir sur votre décision (possible à tout moment), consultez la <a href="/fr/legal/privacy-statement/" target="_self">Déclaration de confidentialité d'Elastic</a>.

Explore similar demos

Overview

You'll also receive an email with related content.

You'll also receive an email with related content

Nous vous enverrons plus de contenu susceptible de vous intéresser.

Speakers

Close

The content on this page is not available in the selected language. As Elastic grows globally, we continue to support content in multiple languages.

The content on this page is not available in the selected language.

Le contenu de cette page n'est pas disponible dans la langue sélectionnée. Chez Elastic, nous mettons tout en œuvre pour vous proposer du contenu dans différentes langues. En attendant, nous vous remercions de votre patience !

See more insights

Articles by

Author

Learn more

Watch now (no PT)

Watch now

See all top stories

All (no PT translation)

Contact information

Press Release

Share on Reddit

Share this story

Share by Email

Thank you for your interest!

Contact Info

Follow us on Youtube

Load More

Share on LinkedIn

Follow us on LinkedIn

Search Integrations

All Solutions

Video for

Follow us on Twitter

See when this webinar starts in my time zone

Voir à quelle heure débute le webinar dans mon fuseau horaire

Register to Watch

Register now

See All Posts

Can't make it? Register and we'll send you the recording. You'll also receive an email with related content

Si vous ne pouvez pas vous libérer le jour J, inscrivez-vous et nous vous enverrons l'enregistrement. Vous recevrez aussi un e-mail contenant des ressources connexes.

Small image for

On-demand webinar

Featured webinar

Register to Attend

Share on Facebook

Reset all

Upcoming webinar

View more posts

Print

Hosted by

Sign In to Attend

View next

Follow us on Facebook

Share

Highlights

Read less

Thank you for registering. We will send you a confirmation email soon.

Nous vous remercions de votre inscription. Vous allez recevoir un e-mail de confirmation.

Author

Articles by Alexandre Fricker

La Suite Elastic : une boîte de Lego avec une imprimante 3D

Sign up for Elastic Cloud free trial