
Python mrjob 操作 Hadoop培訓(xùn)
Python是做數(shù)據(jù)分析好的語言。
大數(shù)據(jù)當(dāng)然也離不開Hadoop,
Hadoop由JAVA寫成,
但Python也可以很好地操控它。
本課程介紹了Python中MRjob模塊,
通過該模塊,
可以讓開發(fā)者非常簡單的通過Python來使用Hadoop進(jìn)行數(shù)據(jù)分析。
1 Python MRJob模塊的安裝
2 使用MRJob實現(xiàn)文本統(tǒng)計
3 重寫MRJob函數(shù)實現(xiàn)復(fù)雜數(shù)據(jù)處理
4 Hadoop——Python各模塊介紹
5 Python MRJob的運行方式
1
Python玩轉(zhuǎn)Hadoop之MRjob入門
1.PythonMRJob模塊的安裝
2.HadoopPython各模塊介紹
3.使用MRJob實現(xiàn)文本統(tǒng)計
4.PythonMRJob的運行方式
5.重寫MRJob函數(shù)實現(xiàn)復(fù)雜數(shù)據(jù)處理
1 使用 mrjob 實現(xiàn)詞組統(tǒng)計
2 實戰(zhàn)模擬 - 統(tǒng)計每部電影的熱度
3 實戰(zhàn)模擬 - 統(tǒng)計每部電影的觀看用戶列表
4 實戰(zhàn)模擬 - 統(tǒng)計每個用戶的觀影列表
