DataFu

DataFu buvo sukurta "LinkedIn" ir parašyta visiškai Java.

DataFu apima funkcijas / Bibliotekos darbo su:

- Statistika

- įvertinimas

- Atranka

- posėdžiai

- Nuoroda analizė

- Nustatykite operacijos

- Krepšiai

DataFu yra puikus duomenų gavybos ir statistikos programų darbo ant Hadoop kiaulių duomenų bazėse.

Šios funkcijos leidžia kūrėjams visapusiškai pasinaudoti visomis saugomi viduje duomenimis Hadoop , arba Kiaulė , duomenų nereikia elgtis su masyvi sistemos reikalavimus, kad būtų tai padaryti.

Kas naujo , šioje laidoje.

• Pora DVFS už paprastą atsitiktinį mėginių ėmimą su pakeitimo
• Daugiau priklausomybių dabar supakuotas DataFu reikia tiek mažiau JAR priklausomybių.
• SetDifference UDF skaičiavimo nustatyti skirtumą (pvz A B arba A B C temperatūroje).

Kas naujo versijos 1.2.0:

• Pora DVFS už paprastą atsitiktinį mėginių ėmimą su pakeitimo.
• Daugiau priklausomybių dabar supakuotas DataFu reikia tiek mažiau JAR priklausomybių.
• SetDifference UDF skaičiavimo nustatyti skirtumą (pvz A B arba A B C temperatūroje).

Kas naujo versija 1.1.0.

• patalpintas SHA maišos UDF;
• InUDF ir AssertUDF pridėta Pig 0,12 suderinamumą. Tai yra tas pats, kaip ir teigti.
• SimpleRandomSample, kuri įgyvendina keičiamo dydžio paprastą atsitiktinės atrankos algoritmą.