分享

MapReduce计算一个简单的搜索,为啥这么慢呢问题

starrycheng 发表于 2013-10-26 15:13:07 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 3 5893
环境:
    运用三台机器(windows操作系统)进行分布式的配置。一切正常,

   但是当我编写了MR程序处理一个客户端的请求高手(根据关键字搜索相关信息),为啥速度这么慢,就在局域网内,处理的是一个二百行左右的文本文件,对其中的信息检索,却总是花费将近50秒的时间
请问:
    这有那些因素影响呢,我经过测试知道就是map和reduce过程花费了95%的时间,咋解决这种呢,希望前辈们指点一下。
  很很急需~~~~

已有(3)人评论

跳转到指定楼层
bob007 发表于 2013-10-26 15:13:07
我在想是不是我在windows下的  或者是服务器太少了的哦
回复

使用道具 举报

when30 发表于 2013-10-26 15:13:07
回复 1# jfttcjl
   可以把代码放上来看看~
回复

使用道具 举报

langke93 发表于 2013-10-26 15:13:07
50s可以接受
局域网 那么小文件 肯定不是网络。
cpu占得多吧
初始化要时间吧
50s可以接受
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条