标签 超算 下的文章

日本新超算欲重夺“全球最快”

《日本经济新闻》 6 月 15 日称,6 月 22 日将公布最新 TOP500 超算排行榜,日本理化学研究所和富士通联合开发的“富岳”超级计算机有望压倒中美,时隔八年半后重新夺回“超算王座”。从 2018 年上半年开始,IBM 的“顶点”一直位列 TOP500 排行榜第一,终结了中国“天河 2 号/太湖之光”超算保持的十连冠。截至 2019 年 11 月,“顶点”已经连续两年蝉联“速度最快超算”。据介绍,日本“富岳”超算的性能将压倒“顶点”。按理论上的最高值,“富岳”的计算速度将达到每秒 53 亿亿次,是“顶点”每秒 20 亿亿次的两倍以上,“相当于全球 7 0亿人每秒计算 1 次,还得连续计算两年以上”。

来源:环球时报

硬核老王点评:超算的军备竞赛。不过,最重要的是,组建超算的基础元件可以自行生产,而中国,在这方面还有很长的路要走。

汇丰将 65 个关系数据库迁移到一个全球数据库

跨国公司在绝大部分国家的分支都运行着相同的软件,但软件的版本不完全相同。在每一个国家它都需要定制功能去满足当地的需要,以及遵守当地的监管要求。这增加了维护的复杂性和开销。汇丰数据设计师透露,为了简化应用交付该银行正将 65 个关系数据库迁移到一个全球 MongoDB 数据库。

来源:solidot

硬核老王点评:说实话,看多了 MongeDB 的安全性事故,现在已经不信任 MongoDB 在安全方面的能力了。

ESNI 进入草案状态

随着越来越多的网站普及 HTTPS,明文的 服务器名称指示 Server Name Indication (SNI)成为新的隐私漏洞。通过明文 SNI,ISP 或任何网络中间人将会知道你访问了哪个网站,最近一部分网站的屏蔽方法就升级到 SNI 检测。加密 SNI(ESNI)将会堵上这个漏洞。互联网工程任务组最近发布了 TLS Encrypted Client Hello(即 ESNI)的草案,标志着这项功能进入到了草案状态。

来源:solidot

硬核老王点评:道高一尺。

Qt 6.0 发布首个预览版本

Qt 6.0 仍处于开发初期,还没有冻结功能,第一个快照提供了二进制文件,且仅专注于基本的 Qt 模块。当前,Qt 6.0 开发时间表计划如下:6 月 30 日 冻结结构和平台;8 月 31 日 冻结功能;9 月 14 日 发布 Alpha 版本;10 月 1 日 发布 Beta 版本;11 月 17 日 发布候选;12 月 1 日 最终版本。

来源:开源中国

微软在其云服务上打造全新超算

微软与 OpenA 合作,专门为 OpenAI 在 Azure 上构建了一台新的超级计算机,拥有超过 28.5 万个 CPU 核心和 1 万个 GPU。按照世界超级计算机 TOP500 的排名,微软打造的这款新型超级计算机位列前五名。

来源:cnBeta.COM

硬核老王点评:不知道国内的云服务商会不会也打造一个基于云服务器的超算?

WSL 2 计划支持 Linux GUI 应用,可和 Windows 应用同时使用

微软计划在本月底在 WSL 2 中为 Windows 10 系统添加完整的 Linux 内核,而现在又有新计划将支持 Linux 的 GUI 应用,使其能够和常规 Windows 应用一起运行。目前可以使用第三方 X 显示服务器在 Windows 中运行 Linux GUI 应用程序,不过存在性能表现不佳的情况。一旦该功能上线,这就意味着 Windows 用户不需要使用 X11 转发的情况下就能启用 Linux GUI 应用程序,和 Windows 应用一同运行。

来源:cnBeta.COM

硬核老王点评:所以以后在 Windows 上会有越来越多的 Linux 应用出现,无论是命令行的还是图形界面的,或许有一天连内核都换成 Linux 内核,而用户或许会感觉不到变化。嗯,欢迎 Windows “主题”上线。

Windows 10 终于也迎来了一款软件包管理器

微软终于在今日宣布了一项新功能 —— 为 Windows 10 带来了一款内置的软件包管理器。简而言之,其使得用户无需在窗口中频繁点击,即可轻松完成桌面程序的安装工作。Windows 软件包管理器已支持如下命令:install:安装应用程序;show:显示有关应用程序的信息;source:管理应用程序的可用来源;search:查找应用程序的基本信息。感兴趣的朋友可加入 Windows Insider 测试项目,并通过 Microsoft Store 获取 Windows 软件包管理器。

来源:cnBeta.COM

硬核老王点评:在 Linux 等系统中司空见惯的包管理器终于在 Windows 中出现了,这应该算是微软拥抱开源和 Linux,甚至内嵌了 WSL 的系统而带给 Windows 产品线的影响了。

华为 HMS 全球注册开发者达 140 万,接入应用数量超 6 万

目前,全球 170 多个国家和地区的用户已经能够使用华为应用市场、华为浏览器、华为云空间、华为智慧助手·今天等。

来源:网易科技

硬核老王点评:加油!

它终于发生了。如今,全世界超算 500 强全部都运行着 Linux。

Linux 统治了超级计算。自 1998 年以来,这一天终于到来了,那时候 Linux 首次出现在 TOP 500 超级计算机榜单上。如今,全世界最快的 500 台超级计算机全部运行着 Linux

上以期榜单中最后的两台非 Linux 系统,是来自中国的一对运行着 AIX 的 IBM POWER 计算机,掉出了 2017 年 11 月超级计算机 500 强榜单

总体而言,现在中国引领着超级计算的竞赛,其拥有的 202 台已经超越美国的 144 台。中国的超级计算机的总体性能上也超越了美国。其超级计算机占据了 TOP500 指数的 35.4%,其后的美国占 29.6%。随着一个反科学政权掌管了政府,美利坚共和国如今只能看着它的技术领袖地位在持续下降。

在 1993 年 6 月首次编制超级计算机 500 强榜单的时候,Linux 只不过是个“玩具”而已。那时的它甚至还没有用“企鹅”作为它的吉祥物。不久之后,Linux 就开始进军超级计算机领域。

在 1993/1994 时,在 NASA 的 戈达德太空飞行中心 Goddard Space Flight Center ,Donald Becker 和 Thomas Sterling 设计了一个 货架产品 Commodity Off The Shelf (COTS)超级计算机:Beowulf。因为他们负担不起一台传统的超级计算机,所以他们构建了一个由 16 个 Intel 486 DX4 处理器的计算机集群,它通过以太网信道聚合互联。这台 Beowulf 超级计算机 当时一时成名。

到今天,Beowulf 的设计仍然是一个流行的、廉价的超级计算机设计方法。甚至,在最新的 TOP500 榜单上,全世界最快的 437 台计算机仍然采用受益于 Beowulf 的集群设计。

Linux 首次出现在 TOP500 上是 1998 年。在 Linux 领先之前,Unix 是超级计算机的最佳操作系统。自从 2003 年起,TOP500 中 Linux 已经占据了重要的地位。从 2004 年开始,Linux 已经完全领先于 UNIX 了。

Linux 基金会的报告指出,“Linux [成为] 推进研究和技术创新的计算能力突破的驱动力”。换句话说,Linux 在超级计算中占有重要地位,至少是部分重要地位。因为它正帮助研究人员突破计算能力的极限。

有两个原因导致这种情况:首先,全球的大部分顶级超级计算机都是为特定的研究任务去构建的,每台机器都是用于有唯一特性和需求优化的单独项目。为节省成本,不可能为每一个超算系统都去定制一个操作系统。然而,对于 Linux,研究团队可以很容易地修改和优化 Linux 的开源代码为的他们的一次性设计。

例如,最新的 Linux 4.14 允许超级计算机去使用 异构内存管理 (HMM)。这允许 GPU 和 CPU 去访问处理器的共享地址空间。确切地说,TOP500 中的 102 台使用了 GPU 加速/协处理器技术。这全是因 HHM 而使它们运行的更快。

并且,同样重要的是,正如 Linux 基金会指出的那样,“定制的、自我支持的 Linux 发行版的授权成本,无论你是使用 20 个节点,还是使用 2000 万个节点,都是一样的。” 因此,“利用巨大的 Linux 开源社区,项目可以获得免费的支持和开发者资源,以保持开发人员成本与其它操作系统相同或低于它们。”

现在,Linux 已经达到了超级计算之巅,我无法想像它会失去领导地位。即将到来的硬件革命,比如,量子计算,将会动摇 Linux 超级计算的地位。当然,Linux 也许仍然可以保持统治地位,因为,IBM 开发人员已经准备将 Linux 移植到量子计算机上


via: http://www.zdnet.com/article/linux-totally-dominates-supercomputers/

作者:Steven J. Vaughan-Nichols 译者:qhwdw 校对:wxy

本文由 LCTT 原创编译,Linux中国 荣誉推出

简介:虽然 Linux 在桌面操作系统只有 2% 的市场占有率,但是对于超级计算机来说,Linux 用 99% 的市场占有率轻松地获取了统治地位。

Linux 运行在超过 99% 的 TOP500 超级计算机上,这并不会让人感到惊讶。2015 年我们报道过“Linux 正运行在超过 97% 的 TOP500 超级计算机上”,今年 Linux 表现得更好。

这些信息是由独立组织 Top500 收集的,每两年他们会公布已知的最快的 500 台超级计算机的细节。你可以打开这个网站,用以下条件筛选所需要的信息:国家、使用的操作系统类型、所有者等。别担心,我将会从这份表格中筛选整理出今年几个有趣的事实。

Linux 运行在 500 台超级计算机中的 498 台

如果要将上面的百分比细化到具体数量的话,500 台超级计算机中的 498 台运行着 Linux。剩余的两台超级计算机运行着基于 Unix 的操作系统。直到去年,还有一台超级计算机上在运行 Windows,今年的列表中没有出现 Windows 的身影。或许,这些超级计算机没一台能运行 Windows 10(一语双关)。

总结一下今年表单上 TOP500 超级计算机所运行操作系统情况:

  • Linux: 498
  • Unix: 2
  • Windows: 0

还有一份总结,它清晰展现了每年 Linux 在 TOP500 超级计算机的份额的变化情况。

  • 2012 年: 94%
  • 2013 年: 95%
  • 2014 年: 97%
  • 2015 年: 97.2%
  • 2016 年: 99.6%
  • 2017 年: ???

另外,最快的前380台超级计算机运行着 Linux,包括在中国的那台最快的超级计算机。排名第 386 和第 387 的超级计算机运行着 Unix,它们同样来自中国。(←\_←)

其他关于最快的超级计算机的有趣数据

除去 Linux,我在表单中还找到了几个有趣的数据想跟你分享。

  • 全球最快的超级计算机是神威太湖之光. 它位于中国的国家超级计算无锡中心。它有着 93PFlops 的速度。
  • 全球第二快的超级计算机是中国的天河二号,第三的位置则属于美国的 Titan。
  • 在速度前十的超级计算机中,美国占据了 5 台,日本和中国各有 2 台,瑞士有 1 台。
  • 美国和中国都各有 171 台超级计算机进入了 TOP500 的榜单中。
  • 日本有 27 台,法国有 20 台,印度、俄罗斯和沙特阿拉伯各有 5 台进入了榜单中。

有趣的事实,不是吗?你能点击这里筛选出属于自己的榜单来获得更多信息。现在我很开心来宣传 Linux 运行在 99% 的 TOP500 超级计算机上,期待下一年能有 100% 的更好成绩。

当你在阅读这篇文章时,请在社交平台上分享这篇文章,这是 Linux 的一个成就,我们引以为豪~ :P


via: https://itsfoss.com/linux-99-percent-top-500-supercomputers

作者:Abhishek Prakash 译者:ypingcn 校对:jasminepeng

本文由 LCTT 原创编译,Linux中国 荣誉推出

据《华尔街日报》报道,百度公司发布消息称,它取得了近来备受关注的人工智能基准测试的全球最好成绩。这归功于百度研发的秘密武器: Minwa 超级计算机。

Minwa 超级计算机通过扫描 ImageNet 取得了这一成绩,这是一个超过百万张图片的数据库,需要将其分类到1000个不同的类别里面。这意味着计算机需要学习法国面包和烤肉卷之间的区别,更棘手的是,甚至还要能区分来克兰小猎犬和猎狐犬之间的不同!(百度的 Minwa 包含36个服务器节点,每个节点由2个六核英特尔Xeon E5-2620处理器和4个NVIDIA Tesla K40m GPU构成。Minwa超级电脑有1.7TB设备内存和6.9TB主内存,今年初它在ImageNet测试中的错误率为5.98%。)

在五年前,计算机在这方面想要超越人类似乎还很遥远,但是最近几个月以来,来自微软、谷歌,以及现在的百度的计算机已经能做的比人更好了。

通过练习,人类能正确识别除了大约 5% 之外的所有 ImageNet 图片。而现在,微软已经取得了 4.94% 的错误率的成绩谷歌达到了 4.8%,百度则表示它将错误率降到了 4.58%!

百度和其它公司通过该测试所用的深度学习算法最近才从学术界飞跃到硅谷,但是它们已经开始在我们的日常生活中产生了影响。

两年前,谷歌使用深度学习来大幅提升 Android 手机的语音识别系统。而百度则在使用一个更大的超级计算机来分析14000小时的语音数据,以提升它的中英文语音识别能力。

“我对整个社区在计算机视觉方面取得的进展感到非常兴奋!” 百度首席科学家吴恩达说,“计算机能如此好的理解图像,不像一年前,它能做更多的事情了!”。

在未来的18个月,百度计划打造一个更大的、计算能力可达 7Pflop/s 的超级计算机!虽然这比不上世界上最顶级的超级计算机,但是依然能够排进全球前十。

深度学习站在了这项发展潮流的巅峰,越来越多的财大气粗的公司们雇佣顶尖的人工智能专家、积累庞大的数据、然后用大量的计算机资源来分析它们。

“有趣的是,处理 ImageNet 图像排名前三的队伍无一例外的都是具有大量计算机资源的大型技术公司,”吴恩达说。他的公司设计这个超级计算机的技术来自中国及其硅谷实验室建造 Minwa 的经验,他补充道。

来自 Facebook 的 Yann LeCun 领导着类似的团队,他说他的公司也在部署大型计算资源,不过他没有提到 Facebook 的计算机系统规模大小。

对于深度计算方面的能力, 谷歌、微软和百度把 ImageNet 测试当做一个“基准测试”,Yann LeCun 说。人们越来越关注更大的数据集和更有挑战性的任务,比如,目标检测和定位等。


更新(来自:http://tech.sina.com.cn/it/2015-06-05/doc-icrvvrak2731186.shtml ):

人工智能测试领域刚刚曝出了第一起作弊丑闻。上月,中国搜索引擎公司百度宣布其图片识别软件在精确度标准化测试中领先于谷歌。但本周二,该公司承诺是通过违反测试规则实现的这一成绩。

负责维护该测试的学术专家表示,这导致百度之前的声明毫无意义。作为该项目的负责人,百度研究员Ren Wu已经公开道歉,并表示该公司正在评估结果。百度也对该软件的技术论文进行了修订。

目前并不清楚此举是个人行为还是整个团队所为,但一家拥有数十亿美元收入的科技公司为什么要在这样一次测试中作弊呢?

百度、谷歌、Facebook等大型科技公司最近几年都投入巨资组建研发团队,专门研究深度学习技术,他们开发的机器学习软件已经在语音和图像识别领域实现了重大进展。这些公司都在不遗余力地聘请这个小领域的顶尖专家,经常会相互挖角。虽然学术界目前的人工智能标准测试数量不多,但却可以帮助这些研究团队与其他团队的成就进行对比,并向公众展开宣传。

百度通过作弊获得了不公平的优势。要进行ImageNet Challenge测试,首先需要用150万张标准图片对其进行训练,然后将代码提交给ImageNet Challenge服务器,针对这些软件之前没有见过的10万张“验证”图片进行测试。

按照规定,每周只能对代码进行两次测试,因为最终的结果包含概率因素。

百度承认,该公司使用多个电子邮件帐号在短短6个月的测试期内对其代码展开了大约200次测试——超过规定测试数量的4倍。

艾伦人工智能学院CEO表示,百度此举相当于购买了多张彩票。“如果你一周购买2张彩票,你大概有一个中奖概率。但如果你一周买200张彩票,概率就会增加。”他说。这样一来,用略有不同的代码展开多次测试,便可帮助研究团队针对一组独特的验证图片进行优化。

在这种测试中,很小的优势也会产生巨大的不同。百度曾经表示,该公司的错误率仅为4.58%,击败了谷歌3月的4.82%。但一些专家指出,这么小的领先差距在这项测试中变得越来越没有意义。但百度和其他公司仍在努力吹嘘自己的结果,甚至不惜违反规则,足以表明在机器学习领域获得领先优势对他们而言的确意义非凡。