TaiShan

企业级通用操作系统HopeStage通过鲲鹏认证

非 Y 不嫁゛ 提交于 2021-02-13 16:34:58
2020年12月26日,企业级通用操作系统HopeStage Enterprise Linux v1.0通过了 Kunpeng 920 与 Taishan 200 的兼容性测试认证。 HopeStage 基于openEuler衍生开发的企业级通用操作系统 根据华泰证券报告, 2020年是信息技术创新产业全面推广的起点,未来三到五年,信创产业将迎来黄金发展期。我国国产基础软硬件从“不可用”发展为“可用”,并正在向“好用”演变。国产CPU和操作系统是信创产业的根基,也是信创产业中技术壁垒最高的环节,技术领先、具备生态优势的公司有望脱颖而出。 HopeStage Enterprise Linux 是基 于 openEuler开源社区版本衍生开发的一款企业级通用操作系统,具备高效、稳定、安全的特性,为企业级的数据库、大数据、云计算、人工智能平台提供安全稳定的运行基础,在产品性能、生态环境以及可信与安全等方面具备显著的优势: 性能调优 在性能调优方面,通过 CPU、内存、IO吞吐率、网络通信等多维度评价、HopeStage Enterprise Linux 性能优于国外主流厂商的发行版。 生态建设 在生态构建方面,硬件兼容(南向)主流架构的基础上,适配鲲鹏、飞腾、兆芯等主流芯片与主机厂商;软件兼容(北向)实现对诸如达梦、金仓、南大通用、泛微等国产主流数据库、中间件、应用等的支持

华为鲲鹏HCIA认证笔记总结四(复习考点附题库)

China☆狼群 提交于 2021-02-04 17:57:25
道阻且长,行则将至。埋头苦干,不鸣则已,一鸣惊人!加油,骚年! 文章目录 1 参考资料 2 笔记总结 2.1 华为鲲鹏 2.2 TaiShan 服务器 2.3 华为云鲲鹏云服务 2.4 openEuler 2.5 鲲鹏处理器与 X86 处理器的指令差异 2.6 编译型语言 & 解释型语言 2.7 移植选项 2.8 华为鲲鹏代码迁移工具 2.9 容器与虚拟机 2.10 Docker 2.11 TPCC 2.12 BenchmarkSQL 2.13 HiBench 2.14 HPC 性能测试 2.15 性能调优分析工具 2.16 NUMA 2.17 镜像 2.18 系统盘 2.19 弹性公网 IP 2.20 BGP 类型 2.21 编译 2.22 Linux 安装软件 2.23 RPMbuild 2.24 华为云发布的鲲鹏行业解决方案 2.25 思考题 3 题库分享 3.1 资源获取 3.2 模拟考试 4 结尾祝福 1 参考资料   在准备考试过程中,参考了很多资料,非常感谢各位前辈的帮助。整理资料链接如下: 【鲲鹏HCIA考试】错题集(https://blog.csdn.net/qq_44745905/article/details/108725463) 鲲鹏云HCIA知识总结(一)(https://blog.csdn.net/qq_43531669/article/details

鲲鹏性能优化十板斧——鲲鹏处理器NUMA简介与性能调优五步法

人走茶凉 提交于 2021-01-18 18:58:22
TaiShan特战队六月底成立,至今百日有余,恰逢1024程序员节,遂整理此文,献礼致敬!希望能为广大在鲲鹏处理器上开发软件、性能调优的程序员们,提供一点帮助。从今天开始,将陆续推出性能调优专题文章。原贴链接: https://bbs.huaweicloud.com/blogs/126594 1.1 鲲鹏处理器 NUMA简介 随着现代社会信息化、智能化的飞速发展,越来越多的设备接入互联网、物联网、车联网,从而催生了庞大的计算需求。但是功耗墙问题以功耗和冷却两大限制极大的影响了单核算力的发展。为了满足智能世界快速增长的算力需求,多核架构成为最重要的演进方向。 传统的多核方案采用的是SMP(Symmetric Multi-Processing)技术,即对称多处理器结构,如图1-1所示。在对称多处理器架构下,每个处理器的地位都是平等的,对内存的使用权限也相同。任何一个程序或进程、线程都可以分配到任何一个处理器上运行,在操作系统的支持下,可以达到非常好的负载均衡,让整个系统的性能、吞吐量有较大提升。但是,由于多个核使用相同的总线访问内存,随着核数的增长,总线将成为瓶颈,制约系统的扩展性和性能。 图1-1 对称多处理器SMP架构 鲲鹏处理器支持NUMA(Non-uniform memory access, 非统一内存访问)架构,能够很好的解决SMP技术对CPU核数的制约

深度科技携手华为,生态共建行动第一

萝らか妹 提交于 2020-12-12 10:50:57
4月26日,深度科技受邀参加了华为智能计算大会,本次大会上,基于华为自研芯片鲲鹏920的TaiShan服务器解决方案正式发布,TaiShan解决方案可应用在大数据、分布式存储、ARM原生、高性能计算和数据库等领域。 TaiShan ARM OS使能 深度科技作为华为TaiShan平台的操作系统合作厂商,在TaiShan ARM服务器平台上已经完成相关适配工作,为华为ARM平台生态的建设贡献了深度力量。 在TaiShan技术分论坛上,深度科技技术总监张木梁发表《TaiShan ARM OS使能》的演讲,介绍了深度科技基于TaiShan服务器开展的工作。 TaiShan服务器解决方案聚焦特定应用场景,充分发挥鲲鹏ARM处理器多核架构、高并发的计算优势,在安全性、低能耗方面更是有着明显的优势。 深度操作系统从2016年开始对ARM平台进行支持,2018年3月支持FT1500A,同年7月,完成华为鲲鹏916适配,2019年4月,针对鲲鹏920平台的通用版本进入终测,6月底将向用户发布。 目前深度科技已经为TaiShan硬件平台打造了全线操作系统软件产品: 深度操作系统ARM服务器版软件v15.2 支持基于鲲鹏916的TaiShan2280系列服务器,提供合作伙伴和用户试用版下载,可升级为正式版 深度操作系统ARM服务器版软件v15.2(SP1) 支持基于鲲鹏920的TaiShan服务器

万物AI时代,鲲鹏昇腾为智能计算而歌

有些话、适合烂在心里 提交于 2020-12-12 00:15:31
文 |魏启扬 来源|智能相对论(aixdlun) 来自Gartner的分析报告认为,未来将有75%的数据会在传统的集中式数据中心或云端之外的位置创建并得到处理。这些地方可能是工厂、医院、银行,抑或商场、公路、城市…… 这也意味着边缘计算将从被人忽视的“边缘”逐渐走到舞台的中心。 随着5G网络的渗透,如何更好地拥抱边缘计算,成为这场时代变革中每一个参与者都着重思考的问题。 刚刚结束的2020边缘计算产业峰会上,鲲鹏和昇腾通过自身的落地实践,向行业重新梳理了其对边缘智能的理解和主张,描绘了一幅边缘智能的悠悠长卷。 数字化转型大潮下,边缘计算进入2.0 在进入正题之前,我们需要重新审视一下当前的时代背景,在数字化转型浪潮之下,计算这件事正在经历些什么,而我们又该需要怎样的计算。 华为昇腾计算业务总裁许映童在2020边缘计算产业峰会上演讲时认为,当前边缘计算所面临的数据主要存在两方面的变化。 一是从互联网时代,到移动互联网时代,到产业互联网时代,再到万物互联时代,数据量呈现指数级增长,同时通过5G网络的放大效应之后,有实时性要求处理的数据需求也大大增加。 根据IDC的数据预测,2025年全球物联网连接数将增长至270亿个,物联网设备数量将达到1000亿台,全球数据总量预计2025年将达到163个ZB。 二是数据形态上,数据类型也从结构化数据、图形数据发展到多媒体数据,再到描述AI的元数据

CNCC 2020上的华为身影:多样性计算新时代彰显行业担当

浪尽此生 提交于 2020-10-30 07:08:15
文 | 曾响铃 来源 | 科技向令说(xiangling0815) 10月22日-24日,由ICT领域最活跃、影响最大的“民营”学会CCF主办的2020中国计算机大会(CNCC 2020)在北京举行。作为国内计算机领域的顶级盛会,CNCC自2003年创建以来,一直是计算机领域的学术及产业思想高地,学术界、产业界大咖群贤毕至,业界影响力十分突出。 本次大会中,华为计算产品线副总裁姜涛发表了题为《共赢多样性计算新时代》的主题演讲,就计算产业的宏观技术趋势以及华为的布局和进展进行了系统的阐述,给出了推动多样性计算时代前行的华为方案。 毫无疑问,作为本次大会的重量级参会企业,华为一直是助推中国计算产业加速发展的中坚力量,也在努力为国内未来数字经济发展提供强大的技术底座。 从姜涛的演讲,结合华为的种种行动以及大时代背景,我们能够得到一幅核心企业推动和带领下的计算产业发展宏观图景。 一、认知+洞察+行动: 华为助推中国计算产业加速发展 系统性回顾姜涛关于多样性计算的演讲,它囊括了华为面向中国计算产业发展的认识、洞察及行动,其总体内容,包括三大部分: 1、一个关于技术时代的深度认知 关于算力的价值,姜涛首先下了一个定论:算力已成为新生产力,驱动社会经济发展。这个论断,在业界第一次把算力提升到了生产力的高度,而不再只是帮助生产力提升的“资源”。 事实上,统计数据显示

CNCC 2020上的华为身影:多样性计算新时代彰显行业担当

邮差的信 提交于 2020-10-24 15:29:03
文 | 曾响铃 来源 | 科技向令说(xiangling0815) 10月22日-24日,由ICT领域最活跃、影响最大的“民营”学会CCF主办的2020中国计算机大会(CNCC 2020)在北京举行。作为国内计算机领域的顶级盛会,CNCC自2003年创建以来,一直是计算机领域的学术及产业思想高地,学术界、产业界大咖群贤毕至,业界影响力十分突出。 本次大会中,华为计算产品线副总裁姜涛发表了题为《共赢多样性计算新时代》的主题演讲,就计算产业的宏观技术趋势以及华为的布局和进展进行了系统的阐述,给出了推动多样性计算时代前行的华为方案。 毫无疑问,作为本次大会的重量级参会企业,华为一直是助推中国计算产业加速发展的中坚力量,也在努力为国内未来数字经济发展提供强大的技术底座。 从姜涛的演讲,结合华为的种种行动以及大时代背景,我们能够得到一幅核心企业推动和带领下的计算产业发展宏观图景。 一、认知+洞察+行动: 华为助推中国计算产业加速发展 系统性回顾姜涛关于多样性计算的演讲,它囊括了华为面向中国计算产业发展的认识、洞察及行动,其总体内容,包括三大部分: 1、一个关于技术时代的深度认知 关于算力的价值,姜涛首先下了一个定论:算力已成为新生产力,驱动社会经济发展。这个论断,在业界第一次把算力提升到了生产力的高度,而不再只是帮助生产力提升的“资源”。 事实上,统计数据显示

2020-08-16:数据任务是怎么优化的?(数据倾斜,参数相关调节)

[亡魂溺海] 提交于 2020-08-18 07:33:18
福哥答案2020-08-16: 此答案【来自华为云社区】的【阿刚】 一 问题背景 项目中遇到大数据任务执行时间比较长,需要进行优化,使得大数据的任务执行时间优化至客户可以接受的时间。 二 原因分析 l 业务场景分析 本场景下的大数据任务主要对数据进行mapreduce操作,该任务包含两个子任务,第一个子任务的map(每个map的大小为128M)个数为4300左右(这些map任务都是分散在不同的服务器上,TaiShan集群有6400+个核可以处理,可以充分利用TaiShan多核优势),map执行时间为10分钟,但是reduce个数固定写为200个(即最多有200个核并行处理reduce任务),reduce执行时间为1小时30分钟左右,耗时较长,同时reduce个数相比map个数很少,不能充分利用TaiShan多核优势,第二个子任务也是reduce阶段耗时较长 l 服务器基础性能分析 在大数据任务执行时,cpu利用率不高,磁盘io以及网卡IO都没有瓶颈,不过网卡中断需要进行绑核,同时磁盘缓存参数可以进行调优来提升性能 三 解决方案 3.1 网卡调优 3.1.1 中断绑核 中断亲和度描述为可以为特定中断提供响应的一组CPU,如果应用程序可以通过关联到相关的CPU,在相同的CPU上下文中处理接收到的数据包,则可以减少等待时间,提高CPU利用率。 因此,我们可以将处理网卡中断的CPU

华为认证HCIA-Kunpeng Application Developer判断题总结

别来无恙 提交于 2020-08-11 07:23:19
最近参加了华为HCIA-Kunpeng Application Developer的认证考试。所以分享一下在培训和备考过程中做的一些习题。 ▣ 考试总共90分钟,有60个题。分别有单选、多选和判断。总分1000分,600分过。 判断练习题 1.TaiShan 100是基于kunpeng 916处理器,TaiShan 200是基于kunpeng 920处理器() A、正确 B、错误 2.华为鲲鹏 920 处理器内置加密模块,支持国密,内置 GZIP 模块() A、正确 B、错误 3.鲲鹏计算产业底座的Kunpeng处理器() A、正确 B、错误 4.我们可以在华为的鲲鹏社区获取鲲鹏的相关知识() A、正确 B、错误 5.deepin是完全免费() A、正确 B、错误 6.debian是迄今为止最遵循GNU规范的Linux系统() A、正确 B、错误 7.鲲鹏计算平台已经兼容的操作系统可通过 http://support.huawei.com/onlinetoolweb/ftca/index?serise=9 链接查询。( ) A、正确 B、错误 8.我们可以单独申请云硬盘并可以将云硬盘绑定到ECS上() A、正确 B、错误 9.BenchmarkSQL 测试中,tpmC和tpmTOTAL这两个值越大,代表性能越差 A、正确 B、错误 10.TPCC模型可以支持跨平台供货 A、正确 B

证券市场红周刊丨神州信息金融科技盘点 助力金融开放与安全

﹥>﹥吖頭↗ 提交于 2020-03-09 12:27:47
2019年,金融机构纷纷开展新兴技术创新转型,“无科技不金融”成为行业共识,金融生态开放如火如荼,5G金融场景打造,数字货币雏形初见,监管沙箱的构建…回望这一年,金融科技风云叱咤。2019年神州信息一面支持金融机构开放创新,一面进行风险防范:以自主研发的创新产品助推开放银行建设,以分布式记账、区块链、知识图谱、大数据等技术在促进金融创新的同时,来保障金融信息安全。 拥抱场景,连接无限,2019年开放银行建设热潮依旧,神州信息新增广州银行、兰州银行、阜新银行等客户。其中,协助建设银行建设的开放银行管理平台融合了住房租赁、普惠金融、政务、医疗等生态,实现一站式用户服务,该项目获得了2019年度IDC中国金融行业技术应用场景最佳创新卓越奖,成为业内开放银行标杆案例。目前,神州信息累计30多个开放银行案例。除开放银行的技术支持外,神州信息还提供后续的场景接入及数据安全服务。神州信息凭借600多个开放场景资源,帮助银行快速梳理对外开放服务体系,与各行业商户合作,嫁接各类生态。同时,提供外部数据引入、内部数据整合等大数据分析、决策服务,提升风险预测及防范能力。2019年,神州信息推出区块链技术平台,将其应用在开放银行账单清算,以降低结算差错率。 伴随着金融服务的加速开放,金融信息安全风险也越来越大,神州信息结合分布式记账、人工智能、大数据、量子通信等前沿技术,为银行架构部署、服务治理、数据治理