淘客熙熙

主题:LINUX能做那些事? LINUX与WINDOWS的比较.欢迎大家补充. -- spin

共:💬77 🌺45 新:
分页树展主题 · 全看首页 上页
/ 6
下页 末页
        • 家园 UNIX Server用RISC远大于x86吧.

          在UNIX被Linux倾蚀市场前, Novell已经丧失了一半的市场了.

          • 家园 LINUX 在server市场里的成功目前还是有限的,主要

            成就还是在client一端。LINUX在未来这一两年内的主要增长点应该是由x86 client群构成的grid computing。

            如果传统UNIX被LINUX彻底打败,那结果只能是microsoft在消灭linux之后一统天下,但愿不会如此。

            • 家园 目前Linux还打不到高端Unix Server去,在Entry-Level表现还行.

              主要原因还是因为Linux只是个Kernel,端看厂商要不要拿去用在自己的系统上,而主要的Server Maker原本都有自己的一套.直接面对面在Retail竞争的大约也就是Redhat之类的公司,对手是WinNT/2K.但是规模还是差了很远.

              除了Entry-Level Server,其它的市场是由Sun, HP, IBM等大厂分食,也都是系统厂的天下.过去SPARC + Solaris顶天, HP/IBM RISC + UNIX Server三家独大的情况虽有改变,但基本上2-way以上的高阶主机市场没有M$的份,Linux有没有机会也要看这几家大厂.由于市场特性的关系,购买高端服务器选的还是品牌,和用UNIX或Linux无关.也就是说,高端UNIX Server会不会被Linux取代,是由Sun, HP, IBM这些大型System Maker来决定的.

              至于Grid Computing Architecture,这玩意和其它网络热时出来的泡泡一样,几年下来也没多大的长进,只一两年还不够它普及吧.况且,这也不见得就一定会是Linux的天下,它只算是其中一个Player.何况Grid Computing还有不小的推广难度在.而 M$也不见得会没有任何动作.

              简单的说,Lunix在高端Server的市场还追不上UNIX,这个部份M$也一样追不上.Entry-Level Server市场Linux有机会与UNIX, M$ Win2K竞逐. DT PC市场仍然是Windows的天下, Linux只能吸引其中一小部份,就像Apple还是有一席之地一样.

              • 家园 LINUX已经确立了在workstation市场上的地位,grid computing则是

                它通向高端计算型服务器的捷径。grid computing 已经广泛用于电子设计自动化、生物制药、基因识别等诸多领域,。一个32节点的Linux/Pentium grid的计算性能可以与同样数目CPU的Sun Server媲美,而价格却只有一个零头。有很多搞并行算法的小startup正在重写一些计算量大的关键算法,用的正是这种搭建和维护费用都极低的硬件平台。

                当然,在未来很多情况下,grid的数据吞吐量要靠高端storage server 来配合,品牌厂家能否接受grid computing,还是得客户说了算。It's wonderful world after all!

                • 家园 老兄有没有grid computing 最近的数字?

                  想了解一下这个BUSINESS到底有多大。

                  • 家园 网格计算现在来看还不成熟

                    网格计算就现在来看还不成熟,在科学领域的应用正在逐步展开,应该是科学计算的趋势。不过在企业应用方面,有很多技术和非技术方面的困难,现在不太乐观。

                    LCG(LHC Computing Grid)是为LHC物理实验服务的网格,LHC实验今年底开始运行,LCG成功与否既关系到这个实验的成败,也是Grid Computing的试金石。LCG将管理至少几十个计算中心,10万个CPU。

                    • 家园 网格计算问题非常非常大

                      只有少数对通信非常不敏感的问题才适合网格计算。常见的并行计算问题,每一步都需要通信,一个节点的延迟意味着所有节点的等待,所以现在集群和MPI已经成为了科学计算的标准。而网格计算提供者无法提供一套各节点间有稳定带宽和延迟,同时成本很低的系统。简单的说,他们无法将一个问题分配给两个集群而不损失效率,所以网格计算就成了一层套在各个计算中心的集群上的无意义的壳。

                      • 家园 不同的学科要求不一样

                        首先,对于MPI的需求各学科不同,以高能物理为例,数据为从探测器中获得的事例,互相之间关联度很小,所以不需要MPI,所以就不存在你所说的问题了。

                        现在的网络提供的带宽已经非常大了,LCG的下层站点与上层的链接将普遍达到10G。

                        延迟的确无法解决,所以跨站点MPI会有问题。不过网格可以设计成在任务调度时候将MPI相关的作业都分配到一个站点执行,在一个大型的网格中,由于包含有大量的大型站点,这是有利于优化资源的配置的。

                        此外,网格还能够设计成根据数据的位置将作业分配格里数据所在的站点执行,优化提高作业启动的速度和节约带宽。MPI作业也可能在这种条件下获得好处。

                        很多人有误解,世界上网格计算是High Throughput Computing,并不是一种High performance computing技术,所以并不期待解决MPI这样的问题。

                        不过我觉得网格现在要解决的问题很多,而且很多问题不是技术问题。

                        • 家园 对于HTC,需要的是google机群这样的东西

                          而不是把各个计算中心连接起来。各个计算中心里的大型机群,不是为HTC而是为HPC设计的,拿这些东西算HTC是很浪费的用法。

                          在任务调度时候将MPI相关的作业都分配到一个站点执行其实就是相当于加了一个壳,但目前的现实是计算中心没有闲的时候,一般都要排队,所以谈不上利于优化资源的配置。

                          网格这东西,其实发展方向应该是google机群这样的东西,追求的是便宜,稳定,安全。而不是把计算中心连接起来。估计很快就有人要在水电站附近建百万节点计算中心了。

                          不过这样,搞物理的就骗不来钱买大型机群了。

                          • 家园 我不理解你所说的google机群有什么特别的

                            而不是把各个计算中心连接起来。各个计算中心里的大型机群,不是为HTC而是为HPC设计的,拿这些东西算HTC是很浪费的用法。

                            我不了解google的集群,所以我不知道他和传统的集群有什么不同之处。从硬件上来说网格理应用的计算节点和google的没什么不同。一般来讲Cluster是HTC还是HPC,主要取决于你应用。网格原则上能够平衡各个计算中心的作业量,减少空闲的计算机,从而减少作业的平均等待时间,也就提高了单位时间作业处理的数量。

                            在任务调度时候将MPI相关的作业都分配到一个站点执行其实就是相当于加了一个壳,但目前的现实是计算中心没有闲的时候,一般都要排队,所以谈不上利于优化资源的配置。

                            我的实际经验,很多计算中心和集群都有不同程度的空闲,网格能够将你的作业发到空闲的集群,也就是减少了等待时间。

                            网格这东西,其实发展方向应该是google机群这样的东西,追求的是便宜,稳定,安全。而不是把计算中心连接起来。估计很快就有人要在水电站附近建百万节点计算中心了。

                            如果你能够做一个10万CPU的计算中心,那LCG的确就没有必要了,但是实际上没有这种可能,各个国家不可能都出钱在日内瓦修一个这样的计算中心。他们希望在自己国家建立或者扩充计算中心,各国的计算中心不仅是用于物理,也用于其它的项目。10万CPU的巨型计算中心在科学界是不可能的,而且99%的项目不需要这种巨型计算中心。网格是更加经济可行的方法,而且还能够将已有的一些计算中心整合进来。

                            从经济性来说,将集群分开并没有什么不经济的。单个集群的规模一般最大也只有一两千个CPU,再大技术上是不可行的。

                            不过这样,搞物理的就骗不来钱买大型机群了。

                            为什么用“骗”呢?本来就需要这么大的计算量。如果你了解LHC上面的实验,你就不会这么说了。

                            • 家园 google机群是性价比最高的规模最大的HTC机群

                              2003年google声称其机群拥有30000个cpu,之后没有给出新的数据,但估计目前其机群已经拥有超过100000个cpu,并传出准备将机群迁往水电站附近的消息。

                              google机群的最大特点是完全使用商品化的硬件,计算节点采用当时性价比最高的低端服务器(更早之前用的是PC机),网络采用以太网和廉价的三层交换机系统,单位浮点运算能力成本应该是blue gene的1/20以下。2003年google机群的整体浮点运算能力高于目前hpc中最强的blue gene。

                              当然,用google机群和blue gene比了linpack等hpc能力是远远不及,但是用google机群和blue gene比htc呢?web搜索其实就是典型的htc问题,google机群在低价的前提下保证了web搜索的稳定性和正确性。

                              我的想法就是,htc中心和hpc中心分离,那些几秒钟甚至几分钟通信一次的问题扔给htc中心去算,对于这种问题,用IB和顶级CPU完全是浪费,用PC加以太网足以,寻找外星人计划和寻找艾滋病受体计划就是很好的例子。

                              而像MM5,MD,粒子模拟,有限差分等等几毫秒通信一次的问题交给hpc中心去做,才是物尽其用。

                              • 家园 你说的刚好是另外一个方向
                              • 家园 那你理解错了

                                我前文提到的LCG网格计算所有的计算节点全部是由市场上普通的商用计算机组成的。现在一般所说的集群都是如此。

                                所为计算中心,就是放一大堆计算机的地方,与是大型机还是普通集群无关。

                                一般来讲,基础研究的预算有限,只能用这种集群,这类集群也是由这类应用推动的。

                                集群计算即可以是HPC也可以是HTC。

                                • 家园 现在计算中心用的beowulf也不便宜

                                  不说安腾之类的东西,一般的节点机3万一台起,用myrinet或者IB另加8K-1W,加上附件,做64-128节点的集群差不多4W一节点,更大规模的话还要加钱。这种集群跑一般的HPC没问题。

                                  但这种节点机跑HTC,绝对比不上4台3K元的PC机一起算,但是目前没有哪个计算中心会买一大堆PC回来,因为这东西只能跑HTC。

                                  • 家园 你是没见过穷人

                                    看来你是有钱的单位上班。

                                    CERN的计算中心,里面有不少集群使用普通PC组成的。还是那种攒的,立式机箱的。

                                    点看全图

                                    外链图片需谨慎,可能会被源头改

                                    现在情况好点了,不过用的机器就是一般的服务器,很多也是中小公司定制的。网络就是以太网,现在是1G、10G的,过去更慢。只有特殊情况采用Myrinet之类的,很少。国内很多也是这样,你说的那些太贵。机器一般一个节点也就几千到1万多人民币。不过节点数就很多了,现在随便搞搞也要几百台。

                                    不过就我的一点点见识,CERN的计算中心是世界上水平最好的面向应用的计算中心之一。

分页树展主题 · 全看首页 上页
/ 6
下页 末页


有趣有益,互惠互利;开阔视野,博采众长。
虚拟的网络,真实的人。天南地北客,相逢皆朋友

Copyright © cchere 西西河