"Apache" Hadoop , iš pradžių buvo sukurta "Yahoo" ir projektas yra derinys tarp ankstesnių "Apache Hadoop Core ir Apache Hadoop bendrų atpirkimo.
Hadoop projektas įgijo žinomumas dėka daug jo puikių rezultatų įgyvendinant daugiametę serverio paskirstyto skaičiavimo sistemą, skirtą tvarkyti didelius kiekius duomenų.
Pats projektas yra faktiškai pagamintas iš keturių dalių. Vienas iš jų yra Hadoop Dažnas vadinamųjų pagrindinių, kuri leidžia visi kiti moduliai dirbti, antra jos pačių failų sistema - HDF (Hadoop Distributed File System), trečioji yra Hadoop VERPALAI planavimas sistema, ir galiausiai ten yra Hadoop MapReduce sistema remti lygiagrečiai skaičiavimas.
Naudojant šiuos žemės nesilaikantiems sistema, Apache pavyko sukurti daug kitų šalutinių projektus, pavyzdžiui:
- "Apache Ambari
- "Apache Avro
- Apache "Kasandra
- "Apache HBase
- "Apache avilys
- "Apache Mahout
"Apache - Kiauliniai
"Apache - Uždegimo
- "Apache" Tez
- "Apache Zookeeper"
Visi šie remtis Hadoop galinga duomenų apdorojimo variklis ar jo paskirstytojo skaičiavimo funkcijas, integruojant vieną iš savo modulių pagrindinių jų vienas ar kitu būdu.
Kas naujo , šioje laidoje:
- Parama archyviniam saugojimui;
- Skaidrūs duomenys ramybės šifravimo (beta versija),
- Operacinės saugų DataNode nereikalaujant root prieigą,
- Karšto apsikeitimo diskas: parama pridėti / pašalinti duomenų mazgas apimtis neperkraunant duomenų mazgas (beta),
- AES parama greičiau vielos šifravimo;
- Pagalba ilgą eksploatavimo paslaugų VERPALŲ
- Pagalba mazgas etiketės metu grafiko
- Parama laiką skaičiuojamų išteklių išlygų pajėgumo grafikas (beta versija),
- Global pasidalino talpyklos už paraiškos artefaktus (beta versija),
- Pagalba veikia paraiškų gimtoji į dokininkas konteineriai (alfa),
Kas naujo versijos 2.7.1:
- Parama archyviniam saugojimui;
- Skaidrūs duomenys ramybės šifravimo (beta versija),
- Operacinės saugų DataNode nereikalaujant root prieigą,
- Karšto apsikeitimo diskas: parama pridėti / pašalinti duomenų mazgas apimtis neperkraunant duomenų mazgas (beta),
- AES parama greičiau vielos šifravimo;
- Pagalba ilgą eksploatavimo paslaugų VERPALŲ
- Pagalba mazgas etiketės metu grafiko
- Parama laiką skaičiuojamų išteklių išlygų pajėgumo grafikas (beta versija),
- Global pasidalino talpyklos už paraiškos artefaktus (beta versija),
- Pagalba veikia paraiškų gimtoji į dokininkas konteineriai (alfa),
Kas naujo versijos 2.7.0:
- Parama archyviniam saugojimui;
- Skaidrūs duomenys ramybės šifravimo (beta versija),
- Operacinės saugų DataNode nereikalaujant root prieigą,
- Karšto apsikeitimo diskas: parama pridėti / pašalinti duomenų mazgas apimtis neperkraunant duomenų mazgas (beta),
- AES parama greičiau vielos šifravimo;
- Pagalba ilgą eksploatavimo paslaugų VERPALŲ
- Pagalba mazgas etiketės metu grafiko
- Parama laiką skaičiuojamų išteklių išlygų pajėgumo grafikas (beta versija),
- Global pasidalino talpyklos už paraiškos artefaktus (beta versija),
- Pagalba veikia paraiškų gimtoji į dokininkas konteineriai (alfa),
Kas naujo versijos 2.6.0:
- Parama archyviniam saugojimui;
- Skaidrūs duomenys ramybės šifravimo (beta versija),
- Operacinės saugų DataNode nereikalaujant root prieigą,
- Karšto apsikeitimo diskas: parama pridėti / pašalinti duomenų mazgas apimtis neperkraunant duomenų mazgas (beta),
- AES parama greičiau vielos šifravimo;
- Pagalba ilgą eksploatavimo paslaugų VERPALŲ
- Pagalba mazgas etiketės metu grafiko
- Parama laiką skaičiuojamų išteklių išlygų pajėgumo grafikas (beta versija),
- Global pasidalino talpyklos už paraiškos artefaktus (beta versija),
- Pagalba veikia paraiškų gimtoji į dokininkas konteineriai (alfa),
Kas naujo versija 2.5.0.
- Autentiškumo patobulinimai Naudojant HTTP proxy serverio
- Naujas Hadoop Metrika kriauklė, kuris leidžia tiesiogiai raštu grafitas.
- specifikacija Hadoop Suderinamas Filesystem pastangų.
- Parama POSIX stiliaus failų sistema išplėstinių atributų.
- OfflineImageViewer naršyti žinutę per WebHDFS API fsimage.
- Remtinumas patobulinimai ir pataisymai į NFS vartai.
- Atnaujintas interneto sąsajose (HTML5 ir JavaScript) už HDF tarnybas.
- Siūlai poilsį API parama pateikimo ir žuvo programas.
- "Kerberos integracijai VERPALAI Chronologija parduotuvėje.
Kas naujo versijos 2.4.0:
- Parama Access Control Lists į HDF;
- Gimtoji parama Rolling naujinius HDF;
- Naudojimas protokolu buferius už HDF FSImage sklandžiai veiklos modernizavimą;
- Užbaigti HTTPS palaikymas HDF;
- Parama Automatinis Avarinei verpalų ResourceManager
- Patobulintas parama naujų paraiškų dėl VERPALŲ su paraiška istorija Server ir Application Timeline Server
- Parama stiprių SLA į VERPALŲ CapacityScheduler per preemption
Kas naujo versija 2.3.0.
- Pagalba įvairialypes Sandėliavimo hierarchiją HDF
- In-atminties talpyklos už HDF duomenų centralizuoto administravimo ir valdymo.
- Supaprastinta platinimas MapReduce dvejetainius per HDF į VERPALŲ Distributed Cache.
Kas naujo versijos 2.2.0:
- Siūlai - bendras tikslas išteklių valdymo sistema Hadoop leisti MapReduce ir kitas kitas duomenų tvarkymo sistemas ir paslaugas;
- Aukšto Prieinamumas už HDF;
- HDF federacija
- HDF Snapshots "
- NFSv3 prieiga prie duomenų HDF;
Kas naujo 2.1.0 versija-beta:
- HDF Snapshots "
- Parama veikia Hadoop Microsoft Windows
- Siūlai API stabilizavimas;
Kas naujo versija 2.0.3 alfa:
- QJM už HDF ha NameNode
- Daugialypė išteklių planavimas (procesoriaus ir atminties) siūlų,
- Siūlai ResourceManager Perkraukite
- Reikšmingas stabilumas masto siūlai (virš 30.000 mazgai ir 14 mln paraiškas iki šiol, metu išleidimo),
Kas naujo versija 1.0.0.
- Geriau saugumas;
- HBase (pridėti / hsynch / hflush ir saugumas).
- webhdfs (su pilnu palaikymu saugumą).
- Našumo sustiprintas prieigą prie vietinių failų HBase.
- Kitos našumo patobulinimų, ištaisytų, ir funkcijos.
Kas naujo versija 0.20.2:
- RSC serverio siųsti buferis išlaiko dydis iš didžiausių atsakymo kada išsiųstas.
- C ++ bibliotekos nestato apie Debian lenny.
- Kai C ++ scenarijai nėra chmodded prieš skruzdėlių vykdymą.
- srautai:. Numatytą procesą būsena pranešimai perrašyti kas 10 seoncds
- IllegalArgumentException kai CombineFileInputFormat yra naudojamas kaip darbo InputFormat.
- Keli klaidas W / Hadoop archyvuose.
- Leisti pasidėjimas failų sistema atvejais turi būti išjungti konkrečiu už instancijos pagrindu.
- Trūksta sinchronizacija defaultResources į Configuration.addResource.
- GzipCodec neturėtų atstovauti BuiltInZlibInflater kaip decompressorType.
- NameNode s HttpServer negali instancija InetSocketAddress: IllegalArgumentException metama .
- HttpServer miega su neigiamų reikšmių.
- Namenode važiavimus iš atminties, nes Atminties nutekėjimas į IPC Server.
- IPC klientas klaidą gali sukelti RPC skambutis pakabinti.
- Nepavykus testai išvengti bandymų tikslai pailsėti nuo vykdymą.
- įnašo testai nepavyksta Clover'ed statyti.
- Testai nereikia paleisti 0,20 filialas.
- TestStreamingStatus nesugeba ant 0,20 filialas.
Komentarai nerastas