您好,登錄后才能下訂單哦!
小編給大家分享一下Hadoop中的Streaming有什么用,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
Streaming適用于文本處理,可以處理二進制流。
在文本模式下使用時,它有一個數據的行視圖。
map的輸入數據通過標準輸入流傳遞給map函數,并且是一行一行地傳輸,最后將結果行寫到標準輸出。
map輸出的鍵/值對是以一個制表符分割的行,它以這樣的形式寫到標準輸出。
reduce函數的輸入格式相同--------------通過制表符來分割的鍵/值對---------------并通過標準輸入流進行傳輸。
reduce函數從標準輸入流中讀取輸入行,該輸入已由Hadoop框架根據鍵排過序,最后將結果寫入到標準輸出。
以上是“Hadoop中的Streaming有什么用”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。