当前位置: 首页 > 工具软件 > filemap > 使用案例 >

两个微型的Map/Reduce框架: FileMap(FM)和BashReduce

蓝慈
2023-12-01

两个微型的Map/Reduce框架: FileMap(FM)和BashReduce

- FileMap ( http://mfisk.github.com/filemap/ ) 用python写成,只有一个文件,实现了基于文件的并行M/R操作

- 与此异曲同工的是,在bashReduce项目中(http://github.com/erikfrey/bashreduce/tree/master ), 有人用纯Bash脚本写了一个M/R命令 br, 实现在多个节点上的并行处理,通过netcat来交换文件 

转载于:https://www.cnblogs.com/wycg1984/archive/2010/04/27/1722415.html

 类似资料: