SIDO - OSXP 2021

Vous devez être inscrit et connecté pour accéder à cette fonctionnalité

Description

Le scénario suivant vous dit quelque chose ? Vous exécutez votre application Apache Spark sur une plateforme EMR et le fichier journal commence à devenir très lourd. Vous essayez de l’ouvrir depuis l’interface utilisateur AWS ou vous le téléchargez directement sur votre ordinateur. Vous finissez par vous connecter au serveur sur lequel tourne votre pilote ou l’un de vos programmes d’exécution, en faisant sans arrêt des recherches dans vos journaux tout en regardant simultanément dans Ganglia et sur l’interface utilisateur Spark à la recherche de journaux et de métriques supplémentaires. Si c’est le cas, cette session faite pour vous ! Je vais vous montrer comment simplifier ces opérations par quelques actions d’amorçage, de scripts bash, de Beats et d’Elastic. En bénéficiant d’une personnalisation par journal d’application, avec moins de recherches dans de gros fichiers et une meilleure utilisation des puissants tableaux de bord Kihana. Cette architecture n’est pas seulement intéressante... elle est indispensable.

Journalisation simplifiée sur Apache Spark

10th Nov, 13:50 CET - 14:10 CET

Présentée par

Sessions Recommandées