Visualizza la scheda tecnica per il monitoraggio di Hadoop

Transcript

Visualizza la scheda tecnica per il monitoraggio di Hadoop
SCHEDA DATI
CA Unified Infrastructure Management
per Hadoop
Introduzione
L'utilizzo di Hadoop® permette alle aziende di raccogliere una straordinaria quantità di informazioni, che può però implicare
un'enorme mole di complessità amministrative. Grazie a CA Unified Infrastructure Management (CA UIM, già noto come
CA Nimsoft Monitor), le aziende e i service provider ottengono la copertura di monitoraggio completa necessaria per controllare
in modo efficiente l'intero ecosistema Hadoop, ottimizzandone le performance in modo proattivo. CA UIM offre metriche relative
alla disponibilità e alle performance di tutti gli elementi chiave della piattaforma Hadoop, inclusi cluster, daemon master
e Hadoop Distributed File System™ (HDFS). Fornisce inoltre un'interfaccia centralizzata per il monitoraggio dell'infrastruttura
che supporta Hadoop, ovvero device di rete, sistemi operativi e altro ancora.
Principali vantaggi e risultati
• Visibilità unificata. Incorporare il monitoraggio
di Hadoop in una piattaforma centralizzata
capace di controllare tutti gli ambienti rilevanti
per il business.
• Migliorare i livelli di servizio. Far leva su
informazioni e avvisi che aiutano i team
a rilevare e a risolvere i problemi più
rapidamente, riducono la durata dei tempi
di inattività e risolvono i problemi prima che
abbiano un impatto sui livelli di servizio.
• Ridurre i costi amministrativi e la complessità.
Sfruttare una copertura completa e funzionalità
capaci di ridurre i costi associati all'acquisto e al
supporto di strumenti molteplici, disomogenei
e complessi.
Principali caratteristiche
• Copertura completa. Metriche di performance
complete per tutti gli elementi che costituiscono
l'ecosistema Hadoop e per ogni infrastruttura
di supporto correlata.
• Informazioni complete e tempestive. Avvisi
automatici, report sulle tendenze e dati in tempo
reale capaci di convogliare le informazioni
necessarie quando servono.
• Report personalizzabili e dashboard in tempo
reale. Viste informative personalizzate in base
a obiettivi e ruoli specifici, report cronologici
sulle performance e sugli SLA.
Sfide di business
Hadoop, forse molto più di qualsiasi altra tecnologia, ha consentito la diffusione a tutti i livelli delle
funzionalità correlate ai big data, offrendo alle aziende una struttura software open-source per la
distribuzione di storage ed elaborazione su cluster di hardware commodity. Queste capacità hanno
permesso alle aziende di applicare le tecniche dei big data per trarre un maggiore valore economico
dai propri repository di informazioni.
Tuttavia, i vantaggi sostanziali che queste tecnologie forniscono, ovvero workload altamente
distribuiti con utilizzo intensivo delle risorse di elaborazione, possono diventare ostacoli significativi
per chi gestisce gli ambienti Hadoop e i livelli di servizio. Come monitorare le performance di tutti
i nodi attivi, nonché il complesso ecosistema di hardware e attrezzature di rete su cui tali sistemi
si basano? In presenza di un numero così elevato di componenti interconnessi, come riuscire
a determinare rapidamente il rispetto dei livelli di servizio e, in caso di mancata conformità,
come individuare il problema?
Panoramica della soluzione
CA UIM è una piattaforma completa di gestione IT che offre agli amministratori le funzionalità
necessarie per monitorare e ottimizzare le performance degli ambienti Hadoop. Il prodotto combina
visibilità centralizzata, facilità di deployment e operations ed efficienza architettonica, elementi che
consentono una forte riduzione del costo e dell'impegno generalmente associati alla gestione
di Hadoop.
Senza CA UIM, monitorare Hadoop può rivelarsi un'attività lunga e complessa. A seconda della portata
del deployment, decine o centinaia di cluster possono operare simultaneamente. Inoltre, anche
qualora venga utilizzata una soluzione mirata per controllare tutti questi elementi, sono necessari
altri strumenti per monitorare gli elementi dell'infrastruttura associata. Oltre al costo iniziale
e all'impegno di implementazione, questi strumenti richiedono un ulteriore lavoro costante e manuale
di aggregazione dei dati, analisi e reporting. CA UIM permette di eliminare o ridurre sostanzialmente
tali costi e impegni. La piattaforma è facile da installare e gestire e consente di generare
automaticamente le viste e le informazioni necessarie a gestire l'ambiente.
CA UIM fornisce una singola piattaforma unificata per monitorare e controllare l'intero ambiente IT,
tramite la quale si ricevono avvisi e informazioni puntuali che agevolano l'identificazione e la
risoluzione dei problemi e facilitano l'individuazione di modalità per prevenirli e l'adozione di tattiche
volte all'ottimizzazione costante.
ca UIM FOR HADOOP
Fattori chiave di differenziazione
Ben oltre la copertura completa di Hadoop
Per controllare efficacemente le performance
di Hadoop, gli amministratori devono ottenere
visibilità su tutti gli elementi che costituiscono
l'ambiente, inclusi nodi, cluster, daemon master
e HDFS. CA UIM consente di monitorare in
modo omogeneo ambienti complessi e dinamici
di questo tipo. La soluzione offre supporto
out-of-the-box per oltre 140 tipi di device, inclusi
server, database, applicazioni, device di rete
e servizi cloud. Investire in questo sistema di
monitoraggio consente pertanto all'azienda di
controllare centralmente tutti gli elementi che
supportano l'ecosistema Hadoop, e il resto
del business.
Architettura efficiente e resiliente
L’architettura di CA UIM si basa su un esclusivo
set di messaggi, che utilizza un framework
publish/subscribe. Offre scalabilità, elevata
disponibilità, estensibilità e rapidità di
deployment intrinseche. Grazie alla
standardizzazione delle comunicazioni tra
raccolta, aggregazione e analisi dei dati,
l'architettura fornisce una singola
implementazione estensibile a tutti i componenti
e a tutte le infrastrutture informatiche.
A differenza di altre alternative, con CA UIM
non è necessario combinare insieme soluzioni
e prodotti diversi.
Facilità di utilizzo ed efficienza ottimali
CA UIM offre la velocità e la facilità di utilizzo
associate alle soluzioni mirate, con
un'architettura unica dall'impronta limitata.
Allo stesso tempo, la soluzione fornisce multitenancy e scalabilità enterprise. La copertura
di monitoraggio estensibile di CA UIM consente
di estendere il controllo a nuovi ambienti
e tecnologie, senza investire in nuovi prodotti,
risorse o formazione. Il team dedicato alle
operations IT può ridurre i tempi e i costi
associati al monitoraggio, mentre quello che
gestisce business e IT acquisisce le conoscenze
necessarie a ottimizzare le risorse,
la pianificazione e gli investimenti.
Informazioni complete e puntuali
CA UIM offre tutte le funzionalità necessarie
ai team per sfruttare al meglio i dati di
monitoraggio acquisiti:
•Gestione degli allarmi. La gestione allarmi di
CA UIM aiuta i reparti IT a ridurre il tempo
necessario per risolvere i problemi,
consolidando gli eventi da device, server
e applicazioni diversi e fornendo la possibilità
di assegnare gli allarmi al personale
IT più adatto.
•Dashboard. Le dashboard di CA UIM offrono
una vista in tempo reale sui servizi di business
e IT. Le dashboard possono essere
personalizzate per utenti, gruppi e ruoli
specifici, consentendo agli utenti di visualizzare
praticamente qualsiasi tipo di dati in un'unica
vista, incluse statistiche relative alle chiamate
all'help desk, parametri sulle performance delle
applicazioni, utilizzo delle risorse IT e molto
altro ancora.
•Reporting. CA UIM consente di elaborare con
facilità report basati sui dati di monitoraggio
acquisiti. Tali report non includono solo gli
elementi Hadoop ma server e attrezzature di
rete interne, infrastrutture virtualizzate, offerte
SaaS, servizi basati su cloud e ambienti
in outsourcing.
Copertura granulare ed estesa di ambienti
Hadoop
CA UIM consente di monitorare la disponibilità,
l'integrità e l'attività/inattività di tutti i daemon
master degli ambienti Hadoop, inclusi
NameNode, Resource Manager e HBaseMaster.
La soluzione prevede la copertura delle metriche
nelle seguenti aree:
•Cluster: throughput, utilizzo della capacità
di storage in %, % di DataNodes inattivi, % di
completamento dello storage di DataNodes.
•Caratteristiche del workload di Resource
Manager: tempi di attesa, runtime, mappe/
riduttori per processo, dimensione dati di input/
output/shuffle per processo ecc.
•NameNode: conteggi operazione, heartbeat,
garbage collection JVM (ms), memoria heap
utilizzata, uptime, latenza/tempi di attesa
media RPC, directory di modifica registro,
errori in scrittura.
•SecondaryNameNode/DataNode: attivo, non
utilizzato o rimosso; capacità.
•HDFS: capacità di storage, errori blocco
(danneggiato, mancante ecc.), stato del thread,
statistiche conflitti thread, blocchi sotto
replicati, blocchi con replica sospesa.
•HBase™: richieste cluster/ora, carico medio,
informazioni su heap master, statistiche sulla
garbage collection, % di server inattivi
della regione.
•RegionServer: richieste di lettura, richieste
di scrittura, regioni servite, latenza media di
lettura, latenza media di scrittura, garbage
collection JVM, tempo di attesa medio.
Per ulteriori informazioni, visita il sito ca.com/it/uim
CA Technologies (NASDAQ: CA) crea software che promuove l'innovazione all'interno delle aziende, consentendo loro di sfruttare le opportunità offerte
dall'economia delle applicazioni. Il software rappresenta il cuore di qualsiasi business, in ogni settore. Dalla pianificazione allo sviluppo, fino alla
gestione e alla sicurezza, CA Technologies lavora con le aziende di tutto il mondo per cambiare il nostro modo di vivere, interagire e comunicare,
in ambienti mobile, cloud pubblici e privati, distribuiti e mainframe. Per ulteriori informazioni, visitare il sito ca.com/it.
Copyright © 2015 CA Technologies. Tutti i diritti riservati. Tutti gli altri marchi registrati menzionati nel presente documento sono di proprietà delle rispettive aziende.
Il presente documento ha scopi esclusivamente informativi e non costituisce garanzia di alcun tipo.
CS200-113005_0115