Apache Hive

Apache pinagtitipunan ay unang binuo bilang Apache Hadoop sub-proyekto para sa pagbibigay ng Hadoop administrador na may isang madaling gamitin, marunong query sa wika para sa kanilang data.
Dahil dito, ang kaharian ng mga laywan ay binuo mula sa simula na magtrabaho sa malaking halaga ng impormasyon para sa bawat query at ito ay ganap na iniangkop para sa malaking proporsyon ng database at mga kapaligiran ng negosyo.
Tools ay kasama para sa madaling loading, extract at pagbabago ng data, habang ang mga istruktura ng mga pasadyang data ay maaaring sapilitang sa isang malawak na hanay ng mga format ng data.
Dahil ito ay isang Hadoop-kaugnay na proyekto ang HDFS at HBase na proyekto ay awtomatiko ring sinusuportahan.
HiveQL ay ang pinakamahusay na bahagi ng proyekto marahil, na nagbibigay ng isang simple, makabagong at mahusay na wika query, habang rin magagawang upang mahawakan ang mga taga-mapa at reducers sa mga sitwasyon kung saan ang katutubong SQL syntax ay hindi maaaring makuha ang nais na data.

Ano ang bagong sa paglabas:

• Support uncorrelated subqueries sa SAAN sugnay
• Magdagdag null KAHULUGAN AS sa hilera specification FORMAT
• Dapat paramihin database Ccreate / drop input / output at suriin concurrency at pahintulot ng user
• scale Support na tumutukoy at katiyakan na may type pinagtitipunan decimal
• Magkaroon Tez
• Ang isang sumabog ang function na kasama ang posisyon ng item sa array
• Magdagdag ng char uri ng data
• Gumawa mangolekta UDF at gumawa evaluator magagamit muli
• Palawakin ang record manunulat at ORC reader / manunulat interface upang magbigay ng mga istatistika
• Ipatupad statistics pagbibigay ORC manunulat at mambabasa interface
• I-annotate pugad operator puno na may mga istatistika mula metastore
• Magbigay ng mga istatistika column level na guhit sa ORC
• Subquery support: huwag payagan ang suntok ng Subqueries
• Subquery support: payagan subquery expression sa pagkakaroon ng sugnay
• Subquery support: mas maraming mga pagsubok
• Native Kahoy na sahig Support sa pinagtitipunan
• pinagtitipunan dapat na ma-laktawan hilera ng header at footer kapag nagbabasa data file para sa isang table
• Magdagdag DATE, timestamp, decimal, pansamantalang trabaho, uri VARCHAR suportahan sa HCat
• Gamitin ang mapa-sumali hint sa cache intermediate resulta
• Magdagdag UDF upang makalkula ang distansya sa pagitan ng mga geographic coordinate

Ano ang bagong sa bersyon 1.2.0:

• Support uncorrelated subqueries sa SAAN sugnay
• Magdagdag null KAHULUGAN AS sa hilera specification FORMAT
• Dapat paramihin database Ccreate / drop input / output at suriin concurrency at pahintulot ng user
• scale Support na tumutukoy at katiyakan na may type pinagtitipunan decimal
• Magkaroon Tez
• Ang isang sumabog ang function na kasama ang posisyon ng item sa array
• Magdagdag ng char uri ng data
• Gumawa mangolekta UDF at gumawa evaluator magagamit muli
• Palawakin ang record manunulat at ORC reader / manunulat interface upang magbigay ng mga istatistika
• Ipatupad statistics pagbibigay ORC manunulat at mambabasa interface
• I-annotate pugad operator puno na may mga istatistika mula metastore
• Magbigay ng mga istatistika column level na guhit sa ORC
• Subquery support: huwag payagan ang suntok ng Subqueries
• Subquery support: payagan subquery expression sa pagkakaroon ng sugnay
• Subquery support: mas maraming mga pagsubok
• Native Kahoy na sahig Support sa pinagtitipunan
• pinagtitipunan dapat na ma-laktawan hilera ng header at footer kapag nagbabasa data file para sa isang table
• Magdagdag DATE, timestamp, decimal, pansamantalang trabaho, uri VARCHAR suportahan sa HCat
• Gamitin ang mapa-sumali hint sa cache intermediate resulta
• Magdagdag UDF upang makalkula ang distansya sa pagitan ng mga geographic coordinate

Ano ang bagong sa bersyon 1.1.0:

• Support uncorrelated subqueries sa SAAN sugnay
• Magdagdag null KAHULUGAN AS sa hilera specification FORMAT
• Dapat paramihin database Ccreate / drop input / output at suriin concurrency at pahintulot ng user
• scale Support na tumutukoy at katiyakan na may type pinagtitipunan decimal
• Magkaroon Tez
• Ang isang sumabog ang function na kasama ang posisyon ng item sa array
• Magdagdag ng char uri ng data
• Gumawa mangolekta UDF at gumawa evaluator magagamit muli
• Palawakin ang record manunulat at ORC reader / manunulat interface upang magbigay ng mga istatistika
• Ipatupad statistics pagbibigay ORC manunulat at mambabasa interface
• I-annotate pugad operator puno na may mga istatistika mula metastore
• Magbigay ng mga istatistika column level na guhit sa ORC
• Subquery support: huwag payagan ang suntok ng Subqueries
• Subquery support: payagan subquery expression sa pagkakaroon ng sugnay
• Subquery support: mas maraming mga pagsubok
• Native Kahoy na sahig Support sa pinagtitipunan
• pinagtitipunan dapat na ma-laktawan hilera ng header at footer kapag nagbabasa data file para sa isang table
• Magdagdag DATE, timestamp, decimal, pansamantalang trabaho, uri VARCHAR suportahan sa HCat
• Gamitin ang mapa-sumali hint sa cache intermediate resulta
• Magdagdag UDF upang makalkula ang distansya sa pagitan ng mga geographic coordinate

Ano ang bagong sa bersyon 1.0.0:

• Support uncorrelated subqueries sa SAAN sugnay
• Magdagdag null KAHULUGAN AS sa hilera specification FORMAT
• Dapat paramihin database Ccreate / drop input / output at suriin concurrency at pahintulot ng user
• scale Support na tumutukoy at katiyakan na may type pinagtitipunan decimal
• Magkaroon Tez
• Ang isang sumabog ang function na kasama ang posisyon ng item sa array
• Magdagdag ng char uri ng data
• Gumawa mangolekta UDF at gumawa evaluator magagamit muli
• Palawakin ang record manunulat at ORC reader / manunulat interface upang magbigay ng mga istatistika
• Ipatupad statistics pagbibigay ORC manunulat at mambabasa interface
• I-annotate pugad operator puno na may mga istatistika mula metastore
• Magbigay ng mga istatistika column level na guhit sa ORC
• Subquery support: huwag payagan ang suntok ng Subqueries
• Subquery support: payagan subquery expression sa pagkakaroon ng sugnay
• Subquery support: mas maraming mga pagsubok
• Native Kahoy na sahig Support sa pinagtitipunan
• pinagtitipunan dapat na ma-laktawan hilera ng header at footer kapag nagbabasa data file para sa isang table
• Magdagdag DATE, timestamp, decimal, pansamantalang trabaho, uri VARCHAR suportahan sa HCat
• Gamitin ang mapa-sumali hint sa cache intermediate resulta
• Magdagdag UDF upang makalkula ang distansya sa pagitan ng mga geographic coordinate

Ano ang bagong sa bersyon 0.8.1:

• Tools upang paganahin ang madaling kunin data / ibahin ang anyo / load (ETL).
• mekanismo A na magpataw ng istraktura sa isang iba't ibang mga format ng data.
• Pag-access sa mga file na naka-imbak sa alinman direkta sa Apache HDFS (TM) o sa iba pang mga data storage system tulad ng Apache HBase (TM).
• execution Query sa pamamagitan MapReduce.

Ano ang bagong sa bersyon 0.8.0:

• Tools upang paganahin ang madaling kunin data / ibahin ang anyo / load (ETL)
• Ang isang mekanismo na magpataw ng istraktura sa isang iba't ibang mga format ng data
• Pag-access sa mga file na naka-imbak sa alinman direkta sa Apache HDFS (TM) o sa iba pang mga data storage system tulad ng Apache HBase (TM)
• execution Query sa pamamagitan MapReduce

Ano ang bagong sa bersyon 0.7.1:

• bug:
• Exception sa mga bintana kapag ginagamit ang jdbc driver. & quot; IOException:. sistema ay hindi mahanap ang path na tinukoy & quot;
• paglikha Schema script ay hindi kumpleto dahil umalis sila out talahanayan na partikular sa DataNucleus.
• Pagpapabuti:
• Pagbutihin ang mga iba't ibang mga mensahe ng error.
• Bumalik tamang Major / Minor numero ng bersyon para JDBC pinagtitipunan Driver.
• Idagdag ang HivePreparedStatement pagpapatupad batay sa kasalukuyang HIVE suportado data-uri.
• Mga Gawain:
• pinagtitipunan sa Maven.
• Magbigay ng mga mag-upgrade Metastore script at default schema para sa PostgreSQL.

Ano ang bagong sa bersyon 0.7.0:

• Bagong Tampok:
• infrastructure Authorization para pinagtitipunan
• Ipatupad Paglilista sa pinagtitipunan
• Magdagdag sumalamin () UDF para sa mapanimdim pananalangin ng pamamaraan Java
• pinagtitipunan typeinfo / ObjectInspector upang suportahan ang unyon (bukod struct, array, at ang mapa)
• Ipatupad GenericUDF str_to_map
• Patch upang suportahan ang pagkakaroon ng sugnay sa pinagtitipunan
• Subaybayan ang mga pagsali na na-convert sa mapa-sumali awtomatikong
• frequency Call at tagal sukatan para HiveMetaStore pamamagitan jmx
• Mapanatili lastAccessTime sa metastore
• Pagpapabuti:
• Magbigay ng pagpipilian upang i-export ang isang HEADER
• Suporta para sa mga natatanging mga pagpipilian sa dalawa o higit pang mga haligi
• Ilarawan extended table / partition output ay misteryosong
• Nagkukulang ng ilang mga pag-andar Jdbc tulad getTables, getColumns at HiveResultSet.get * pamamaraan batay sa pangalan ng haligi.
• Pag-tap logs mula sa proseso ng bata
• Support filter pushdown laban sa di-katutubong tables
• Palitan ang dependencies on HBase pinapagamit API
• Magdagdag queryid habang pagsasara ng
• I-update transident_lastDdlTime lamang kung hindi tinukoy
• Magdagdag ng higit pang impormasyon debug para sa pugad locking
• HiveInputFormat o CombineHiveInputFormat palaging i-sync ang mga bloke ng mga RCFile dalawang beses
• Ipakita ang mga oras na ang mga lokal na gawain ay tumatagal
• Lumikha ng isang bagong ZOOKEEPER halimbawa kapag sinusubukan ulit lock, at higit pang impormasyon para sa debug
• Magdagdag ng isang pagpipilian upang patakbuhin gawain upang suriin mapa-sumali posibilidad sa mga di-lokal na mode
• More debugging para sa pagsasara
• Magdagdag ng isang pagpipilian sa mga dynamic na partition pagsingit upang ihagis ng isang error kung 0 partisyon ay nilikha
• Mga bug:
• & quot; load DATA LOKAL INPATH & quot; nabigo kapag ang mga talahanayan ay naglalaman na ng isang file ng parehong pangalan
• null ay hindi mapangasiwaan nang tama sa sumali
• HiveInputFormat.getInputFormatFromCache & quot; swallows & quot; exception sanhi kapag ibinabato IOExcpetion
• Magdagdag ng pag-unlad sa mga sumali at GroupBy
• Simple UDAFs may higit sa 1 crash parameter sa walang laman query hilera
• UDF field () ay hindi gumagana

0.17 lokal na mode
• Dynamic pagsingit partition iwanang walang laman ang mga file naglinis sa Hadoop
• Laktawan counter-update kapag RunningJob.getCounters () bumalik null

Ano ang bagong sa bersyon 0.5.0:.

• Hayaan user tukuyin serde para sa mga pasadyang script
• Magdagdag UDF unhex.
• Alisin lzocodec import mula FileSinkOperator.
• Driver NullPointerException kapag tumatawag getResults nang hindi muna ipon.
• Pagganap ng pagpapabuti para RCFile at ColumnarSerDe sa pinagtitipunan.