Sun Grid Engine 和 hadoop 是什么关系
2个回答
2016-04-26 · 做真实的自己 用良心做教育
千锋教育
千锋教育专注HTML5大前端、JavaEE、Python、人工智能、UI&UE、云计算、全栈软件测试、大数据、物联网+嵌入式、Unity游戏开发、网络安全、互联网营销、Go语言等培训教育。
向TA提问
关注
展开全部
就我的了解SGE大致相当于Hadoop-YARN,多用于超级计算机集群的管理。Hadoop的最大贡献在于HDFS解决了,分布式文件系统,和Google的GFS一样。SGE好像没有强调这一点,而且超级计算机大多数都没有本地磁盘,可能也不需要文件系统管理吧。说白了就是不实用~
Storm代理
2023-07-25 广告
2023-07-25 广告
StormProxies是一家国内优质海外HTTP代理商,拥有一个庞大的IP资源池,覆盖200多个地区,IP数量大且匿名度高。其优点还包括超高并发、稳定高效、技术服务等特点,同时提供HTTP、HTTPS以及SOCKS5协议支持。此外,Sto...
点击进入详情页
本回答由Storm代理提供
展开全部
sge是十多年前的东西了,最早是sun grid engine, 开源版本是grid engine。多用于格点计算,分布式计算。在超级计算机上很流行。适用于cpu密集程序的调度。
他的设计是给了资源(节点,cpu,内存)你自己去用,sge不参与计算只做调度(启动进程,删除进程)。他的资源是按照核数来分的。
但核数使用很难做到控制,全靠自觉,所以理论上你可以申请1个核跑满整个机器。一些商用版本可以对此做监控并删除,但sge做不到。
后来sun被oracle收购了以后,sge开源版本就改成了son of grid engine。
另外超级计算机也都是有本地磁盘的,无盘工作站那是网吧。但那块本地磁盘只存系统,很少存临时文件。程序运行过程中的中间文件都是存到共享的并行文件系统上。
sge很少提只是因为你可能没用过超级计算机。
他的设计是给了资源(节点,cpu,内存)你自己去用,sge不参与计算只做调度(启动进程,删除进程)。他的资源是按照核数来分的。
但核数使用很难做到控制,全靠自觉,所以理论上你可以申请1个核跑满整个机器。一些商用版本可以对此做监控并删除,但sge做不到。
后来sun被oracle收购了以后,sge开源版本就改成了son of grid engine。
另外超级计算机也都是有本地磁盘的,无盘工作站那是网吧。但那块本地磁盘只存系统,很少存临时文件。程序运行过程中的中间文件都是存到共享的并行文件系统上。
sge很少提只是因为你可能没用过超级计算机。
本回答被网友采纳
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询
广告 您可能关注的内容 |