实例讲解hadoop中的map/reduce查询(python语言实现)
生活随笔
收集整理的這篇文章主要介紹了
实例讲解hadoop中的map/reduce查询(python语言实现)
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
條件,假設你已經裝好了hadoop集群,配好了hdfs并可以正常運行。
$hadoop dfs -ls /data/dw/explorer
Found 1 items
drwxrwxrwx - rsync supergroup 0 2011-11-30 01:06 /data/dw/explorer/20111129
$ hadoop dfs -ls /data/dw/explorer/20111129
Found 4 items
-rw-r--r-- 3 rsync supergroup 12294748 2011-11-29 21:10 /data/dw/explorer/20111129/explorer_20111129_19_part-00000.lzo
-rw-r--r-- 3 rsync supergroup 1520
$hadoop dfs -ls /data/dw/explorer
Found 1 items
drwxrwxrwx - rsync supergroup 0 2011-11-30 01:06 /data/dw/explorer/20111129
$ hadoop dfs -ls /data/dw/explorer/20111129
Found 4 items
-rw-r--r-- 3 rsync supergroup 12294748 2011-11-29 21:10 /data/dw/explorer/20111129/explorer_20111129_19_part-00000.lzo
-rw-r--r-- 3 rsync supergroup 1520
總結
以上是生活随笔為你收集整理的实例讲解hadoop中的map/reduce查询(python语言实现)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: HIVE元数据表/数据字典
- 下一篇: Django 学习