您好,登錄后才能下訂單哦!
這篇文章主要介紹了Hive中向量化查詢的示例分析,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
Hive中的向量化查詢執行大大減少了典型查詢操作(如掃描,過濾器,聚合和連接)的CPU使用率。
標準查詢執行系統一次處理一行,在處理下一行之前,單行數據會被查詢中的所有運算符進行處理,導致CPU使用效率非常低。在向量化查詢執行中,數據行被批處理在一起(默認=> 1024行),表示為一組列向量。
要使用向量化查詢執行,必須以ORC格式(CDH 5)存儲數據,并設置以下變量。
SET hive.vectorized.execution.enabled=true
在CDH 6中默認啟用Hive查詢向量化,啟用查詢向量化后,還可以設置其他屬性來調整查詢向量化的方式
感謝你能夠認真閱讀完這篇文章,希望小編分享的“Hive中向量化查詢的示例分析”這篇文章對大家有幫助,同時也希望大家多多支持億速云,關注億速云行業資訊頻道,更多相關知識等著你來學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。