Apache Flume

Apache Flume utvecklades som en mellanhand system som samlar loggar från ett program och levererar den till en annan.
Det bör fungera med de flesta Java-program och utvecklare bör vara säker, Flume skyddad mot dataförlust och service misslyckande.
Loggdata strömmas i realtid via feltoleranta system med stöd för många failover och återvinningsmekanismer.
Eftersom Flume körs från en central plats, kan utvecklare enkelt hantera det och även utnyttja sina resurser för statistik och analysändamål.
En dold egenskap hos Flume är dess faktiska "data-agnostic" systemet. Detta innebär att du kan enkelt byta en dataström källa från en stock utgång till något annat och använda Flume säkert samlad information från olika typer av tjänster.
Dessa kan vara e-postmeddelanden, sociala mediaströmmar, nätverkstrafik, och så vidare

Vad är nytt i den här versionen.

• Ta bort SSLv2Hello orsakar Java 6 kunder att bryta
• Aktivera SSLv2Hello för Avro Källa och NettyAvroRpcClient
• Aktivera SSLv2Hello för HttpSource
• Inkom dev-stöd till src tarboll
• Unit test TestHTTPSource.java misslyckades med IBM JDK 1,7
• HTTP Källa ska kunna blockera ett prefix uppsättning protokoll.
• HTTPS tester misslyckas på Java 6
• Tillåt konfigurering av aktiverade protokoll i Avro källa och RPC-klient

Vad är nytt i version 1.5.2:

• Ta bort SSLv2Hello orsakar Java 6 kunder att bryta
• Aktivera SSLv2Hello för Avro Källa och NettyAvroRpcClient
• Aktivera SSLv2Hello för HttpSource
• Inkom dev-stöd till src tarboll
• Unit test TestHTTPSource.java misslyckades med IBM JDK 1,7
• HTTP Källa ska kunna blockera ett prefix uppsättning protokoll.
• HTTPS tester misslyckas på Java 6
• Tillåt konfigurering av aktiverade protokoll i Avro källa och RPC-klient

Vad är nytt i version 1.5.0:

• Ny funktion:
• Införa någon form av SpillableChannel
• Tillåt SpoolDir att passera bara filnamnet som är källan till en händelse
• Flume sammanhang stöder inte float eller dubbel konfigurationsvärden.
• Uppgradera morphlines till 0.7.0
• ränna-ng-log4jappender användarsupport levererade rubriker
• Elasticsearch Sink för ES HTTP API
• Lade till en sänka för Kite datamängder
• Spol katalog bör inte alltid konsumera den äldsta filen först.
• Förbättring:
• Flume Bruksanvisning provkonfigurationer behöver fastställande
• Gör SpoolDir arbeta med underkataloger
• spoolerkataloger källa bör kunna ersätta eller ignorera missbildade tecken
• hantera större nyttolaster via SyslogUDPSource
• Uppgradera morphline biblioteksberoende till en 0.5.0 frigivning
• Minska duplicerade händelser som orsakas av reset-anslutnings intervall

Vad är nytt i version 1.3.0:

• Lade HTTP Post Källa
• ElasticSearch Sink
• Flume anta meddelande från befintlig lokal Scribe
• Lade till en multi syslog källa
• Fil Kanal bör stödja kryptering
• Skapa en SpoolDirectory Källa och klient
• Load Balancing RPC-klient bör stödja exponentiell backoff misslyckade noder
• Dumpa RollingFileSink räknaren status när agenten stannar
• Regex Extractor Interceptor

Vad är nytt i version 1.2.0:

• Genomfört en Hållbar minneskanal
• Skapad utvecklare guide för Flume NG
• klient SDK
• Genomfört en varaktig FileChannel
• Genomförda Jaktplan (tidigare känd som Decorators) för Flume 1.x
• Genomfört en HBase Sink som stöder tillgång tabellnivå
• Genomfört Tidsstämpel Interceptor
• Asynchronous HBase Sink

Krav :

• Java 1.6 eller högre