Apache Hadoop utvecklades ursprungligen av Yahoo och projektet är en kombination mellan de tidigare Apache Hadoop Kärn och Apache Hadoop Vanliga repor.
Hadoop-projektet har fått en hel del ryktbarhet tack vare sina goda resultat i genomförandet av en flerserver distributed computing system för hantering av stora mängder data.
Projektet i sig är faktiskt består av fyra delar. En är Hadoop Common, den så kallade kärna som gör att alla andra moduler för att arbeta, den andra är en egen filsystem - HDFS (Hadoop Distributed File System), är den tredje GARN schemaläggning ram Hadoop, och slutligen finns det Hadoop MapReduce systemet för att stödja parallella beräkningar.
Med hjälp av dessa banbrytande systemet har Apache lyckats skapa många andra sidoprojekt, som:
- Apache Ambari
- Apache Avro
- Apache Cassandra
- Apache HBase
- Apache Hive
- Apache Mahout
- Apache Pig
- Apache Spark
- Apache Tez
- Apache Zookeeper
Alla dessa är beroende av Hadoop kraftfulla databehandling motor eller dess distribuerade datorfunktioner, integrera en av sina moduler i sin kärna är det ena eller andra sättet.
Vad är nytt i den här versionen:
- Stöd för arkivering
- Transparenta data vid vila kryptering (beta)
- Rörelse säker DataNode utan att kräva root-access
- Hot swap enhet: stöd till / ta bort data nod volymer utan att starta datanoden (beta)
- AES-stöd för snabbare tråd kryptering
- Stöd för långa löpande tjänster i GARN
- Support Node etiketter under schemaläggning
- Stöd för tidsbaserade reservationer resurskapacitets Scheduler (beta)
- Global, delad cache för applikations artefakter (beta)
- Support driften av applikationer inbyggt i Docker behållare (alfa)
Vad är nytt i version 2.7.1:
- Stöd för arkivering
- Transparenta data vid vila kryptering (beta)
- Rörelse säker DataNode utan att kräva root-access
- Hot swap enhet: stöd till / ta bort data nod volymer utan att starta datanoden (beta)
- AES-stöd för snabbare tråd kryptering
- Stöd för långa löpande tjänster i GARN
- Support Node etiketter under schemaläggning
- Stöd för tidsbaserade reservationer resurskapacitets Scheduler (beta)
- Global, delad cache för applikations artefakter (beta)
- Support driften av applikationer inbyggt i Docker behållare (alfa)
Vad är nytt i version 2.7.0:
- Stöd för arkivering
- Transparenta data vid vila kryptering (beta)
- Rörelse säker DataNode utan att kräva root-access
- Hot swap enhet: stöd till / ta bort data nod volymer utan att starta datanoden (beta)
- AES-stöd för snabbare tråd kryptering
- Stöd för långa löpande tjänster i GARN
- Support Node etiketter under schemaläggning
- Stöd för tidsbaserade reservationer resurskapacitets Scheduler (beta)
- Global, delad cache för applikations artefakter (beta)
- Support driften av applikationer inbyggt i Docker behållare (alfa)
Vad är nytt i version 2.6.0:
- Stöd för arkivering
- Transparenta data vid vila kryptering (beta)
- Rörelse säker DataNode utan att kräva root-access
- Hot swap enhet: stöd till / ta bort data nod volymer utan att starta datanoden (beta)
- AES-stöd för snabbare tråd kryptering
- Stöd för långa löpande tjänster i GARN
- Support Node etiketter under schemaläggning
- Stöd för tidsbaserade reservationer resurskapacitets Scheduler (beta)
- Global, delad cache för applikations artefakter (beta)
- Support driften av applikationer inbyggt i Docker behållare (alfa)
Vad är nytt i version 2.5.0.
- Authentication förbättringar vid användning en HTTP-proxyserver
- En ny Hadoop Metrics handfat som gör att skriva direkt till Graphite.
- Specifikation för Hadoop Kompatibel filsystem ansträngning.
- Stöd för POSIX-stil filsystem utökade attribut.
- OfflineImageViewer att bläddra en fsimage via WebHDFS API.
- support förbättringar och buggfixar till NFS-gateway.
- Moderniserad web användargränssnitt (HTML5 och Javascript) för HDFS demoner.
- garnets REST API stöd lämna in och döda applikationer.
- Kerberos integration för garnet tidslinje butik.
Vad är nytt i version 2.4.0:
- Stöd för Access Control Lists i HDFS
- Inbyggt stöd för Rolling uppgraderingar i HDFS
- Användning av protokoll buffertar för HDFS FSImage för släta operativa uppgraderingar
- Komplett HTTPS stöd i HDFS
- Stöd för automatisk failover av garnet Resource
- Utökat stöd för nya tillämpningar på garn med Application historia Server och Application Tidslinje Server
- Stöd för starka SLA i garn CapacityScheduler via Preemption
Vad är nytt i version 2.3.0.
- Stöd för heterogena lagring hierarki i HDFS
- I-minnescache för HDFS data med centraliserad administration och förvaltning.
- Förenklad distribution av MapReduce binärer via HDFS i GARN Distributed Cache.
Vad är nytt i version 2.2.0:
- Garn - En generell resursledningssystem för Hadoop att låta MapReduce och andra andra ramverk och tjänster databehandling
- Hög tillgänglighet för HDFS
- HDFS Federation
- HDFS Snapshots
- NFSv3 tillgång till uppgifter i HDFS
Vad är nytt i version 2.1.0-beta:
- HDFS Snapshots
- Stöd för att köra Hadoop på Microsoft Windows
- Garn API stabilisering
Vad är nytt i version 2.0.3-alpha:
- QJM för HDFS HA för NameNode
- Multi resursplanering (CPU och minne) för GARN
- Garn Resource Starta
- Betydande stabilitet i stor skala för garn (över 30.000 noder och 14 miljoner applikationer hittills, vid tidpunkten för övergång)
Vad är nytt i version 1.0.0.
- Bättre säkerhet
- HBase (lägga till / hsynch / hflush och säkerhet).
- webhdfs (med fullt stöd för säkerhet).
- Prestanda bättre tillgång till lokala filer för HBase.
- Andra prestandaförbättringar, buggfixar och funktioner.
Vad är nytt i version 0.20.2:
- RPC Server skicka buffert behåller storlek största respons någonsin skickats.
- C ++ bibliotek bygger inte på Debian Lenny.
- Vissa c ++ script inte chmodded före ant utförande.
- Streaming. Process tillhandahålls statusmeddelanden skrivs över varje 10 seoncds
- IllegalArgumentException när CombineFileInputFormat används som arbets InputFormat.
- Flera buggar w / Hadoop arkiv.
- Tillåt cachning av filsystem instanser som ska inaktiveras på en per instans basis.
- Missing synkronisering för defaultResources i Configuration.addResource.
- GzipCodec bör inte utgöra BuiltInZlibInflater som decompressorType.
- NameNode s HttpServer kan inte initiera InetSocketAddress: IllegalArgumentException kastas .
- HttpServer sover med negativa värden.
- Namenode körs av slut på minne på grund av minnesläcka i IPC Server.
- IPC klient bugg kan orsaka RPC-anrop hänga.
- För underkänt prov förhindra resten av testmål från utförande.
- contrib tester misslyckas Clover'ed bygga.
- Test inte köras på 0,20 gren.
- TestStreamingStatus misslyckas på 0,20 gren.
Kommentarer hittades inte