Apache Pig

Apache Pig ay spawned mula sa Apache Hadoop proyekto at ang isa sa kanyang mga module na kung saan ay sa singil ng pagbibigay ng isang paraan upang pag-aralan ang data na ito na-proseso at naka-imbak.
Pig ay gumagamit ng isang wika custom query na tinatawag na "Pig Latin" na kung saan ay hindi kapani-paniwalang madaling malaman at sumusuporta sa parehong mga estilo pamanggit at functional.
Nangangahulugan ito na maaari mo itong gamitin bilang isang klasikong SQL wika nakikinabang sa data pagsali at mga filter, o maaari mong gamitin ang mga katangian nito MapReduce, ang taga-mapa at reducers data.
Sa pamamagitan ng default Apache Pig ay sinadya upang gamitin sa loob ng mga pag-install Hadoop, ngunit payagan ang mga mas bagong bersyon ito na tumakbo nang hiwalay sa pamamagitan ng isang hiwalay na JVM

Ano ang bagong sa paglabas:.

• Pluggable pagpapatupad engine (upang payagan ang baboy run sa mga di-MapReduce engine sa hinaharap)
• Auto-lokal na mode (sa mga trabaho na may maliit na sukat input data na tumakbo sa proseso)
• optimization Fetch (upang mapabuti interactiveness ng igik)
• Mga Fixed counter para sa mga lokal-mode
• Suporta para sa antas ng jar user cache
• Suporta para sa blacklisting at whitelisting baboy utos
• Maraming mga pag-aayos ng pagganap at mga tampok debuggability
• Ang ilang mga di-paurong katugmang pagbabago interface ay ipinakilala sa paglabas upang gumawa ng baboy trabaho na may non-MapReduce engine

Ano ang bagong sa bersyon 0.14.0:

• Pluggable pagpapatupad engine (upang payagan run baboy sa non -mapreduce engine sa hinaharap)
• Auto-lokal na mode (sa mga trabaho na may maliit na sukat input data na tumakbo sa proseso)
• optimization Fetch (upang mapabuti interactiveness ng igik)
• Mga Fixed counter para sa mga lokal-mode
• Suporta para sa antas ng jar user cache
• Suporta para sa blacklisting at whitelisting baboy utos
• Maraming mga pag-aayos ng pagganap at mga tampok debuggability
• Ang ilang mga di-paurong katugmang pagbabago interface ay ipinakilala sa paglabas upang gumawa ng baboy trabaho na may non-MapReduce engine

Ano ang bagong sa bersyon 0.11.0:

• Ang release na ito ay nagsasama ng DateType datatype, RANK, CUBE at rollup operator, Groovy UDFs, custom reducer kuru-kuro, schema-based tuples at integration HCatalog DDL.

Ano ang bagong sa bersyon 0.9.1:.

• Gumagana Ang release na ito sa Hadoop 0.20

Ano ang bagong sa bersyon 0.6:

• Added Zebra bilang isang proyekto contrib. Tingnan http://wiki.apache.org/pig/zebra
• Added UDFContext, nagbibigay UDFs isang paraan upang pumasa impormasyon mula sa harap sa likod ng pagtatapos at nagbibigay UDFs access sa JobConf sa backend.
• Added kaliwa panlabas na sumali para fragment magtiklop sumali.
• Nagdagdag ng kakayahan upang i-set priority ng trabaho mula sa Pig Latin.
• Pinahusay na multi-query upang gumana sa pagsali sa ilang mga kaso.
• Reworked memory manager sa makabuluhang bawasan gc overhead at Out ng pagkabigo magbunton.
• interface Added nagtitipon para UDFs.
• Higit sa 100 mga bug-aayos at pagpapabuti.

Mga kinakailangan

• Java 1.6.x o mas mataas
• Apache Hadoop 0.20.x o mas mataas