云计算

ML平台_小米深度学习平台的架构与实践

让人想犯罪 __ 提交于 2020-04-03 22:12:18
( 转载: http://www.36dsj.com/archives/85383 )机器学习与人工智能,相信大家已经耳熟能详,随着 大规模标记数据的积累 、 神经网络算法的成熟 以及 高性能通用GPU的推广 ,深度学习逐渐成为计算机专家以及大数据科学家的研究重点。近年来,无论是 图像的分类 、 识别和检测 ,还是 语音生成、自然语言处理 ,甚至是AI下围棋或者打游戏都基于深度学习有了很大的突破。而随着 TensorFlow、Caffe 等开源框架的发展,深度学习的门槛变得越来越低,甚至初中生都可以轻易实现一个图像分类或者自动驾驶的神经网络模型,但目前最前沿的成果主要还是出自Google、微软等巨头企业。 Google不仅拥有优秀的人才储备和大数据资源,其得天独厚的基础架构也极大推动了AI业务的发展,得益于内部的 大规模集群调度系统Borg ,开发者可以快速申请大量GPU资源进行模型训练和上线模型服务,并且 通过资源共享和自动调度保证整体资源利用率也很高 。Google开源了TensorFlow深度学习框架,让开发者可以在本地轻易地组合MLP、CNN和RNN等模块实现复杂的神经网络模型, 但TensorFlow只是一个数值计算库,并不能解决资源隔离、任务调度等问题,将深度学习框架集成到基于云计算的基础架构上将是下一个关键任务 。 除了Google、微软,国内的百度也

多巨头部署国产应用,国产化替代已势不可挡!

风流意气都作罢 提交于 2020-04-03 18:33:50
告别曾经发生的个别国家针对华为、中兴等的“卡脖子”事件,有了越来越多的突破口。 三个国产化替代案例,每一个都是里程碑 从三个标志性案例说起。 案例一:2013年5月17日,最后一台小型机在阿里巴巴支付宝下线,标志着阿里已经完成”去IOE”(IBM、Oracle、EMC)。 上海财大经济学院副教授、高等研究院市场机制设计和信息经济研究中心主任李玲芳当时曾经对媒体表示,阿里巴巴的“去IOE”为市场带来了一个成功的范本,证明“去IOE”是有可能的。众所周知,“IOE”三驾马车构成了一个从软件到硬件的企业计算、存储、数据库系统,占领了所在领域全球大部分商用市场份额。 案例二:2019年7月19日,山东移动CRM核心系统的软硬件成功实现替换升级,成为首个在核心系统中采用国产自研全套软硬件解决方案的运营商,本次项目的成功实施标志着华为自研系列自主可控解决方案正式上线商用。 山东移动CRM核心系统采用国产自研全套软硬件解决方案,在软件自主可控道路上具备重大里程碑意义。项目涉及的山东移动CRM系统,日交易量高达 7000 +万次,承载着山东移动B域60%+的业务量,实现了复杂场景下的全系列自主可控解决方案商用。 案例三:中兴通讯签约永洪科技,利用后者提供的拥有自主知识产权的一站式大数据平台与可视化分析方案,实现从企业管理到客户经营的精细化运营,提升企业运营效率,打造合作共赢的产业生态环境。 注

大快城市智慧停车管理系统架构体系介绍

我怕爱的太早我们不能终老 提交于 2020-04-03 17:06:55
最近几年随着大数据技术快速发展与应用,智慧城市随即被正式提出。而且,我们也可以深刻感受到 “智慧”正在慢慢改变我们的生活方式和城市。要让城市变智慧的地方太多太多,当前我们接触做多的可能就是外出停车,比如很多商场的停车系统,很多商城的停车场都实现了无人值守。这就是得益于智慧城市停车云平台。 很多人对智慧停车云的概念不是明白,智慧停车平台就是利用云计算、物联网、大数据处理技术等手段,通过可持续运营的商业服务模式,面向各类停车场实现跨区域、多层级的集中监控和管理,为政府、相关主管部门和运营企业提供远程监控、决策支持、统计分析和数据展现等服务,同时可面向公众提供多渠道停车即时讯息的平台。 汽车已经成为了家庭的重要代步工具,车方便了我们的出行,但停车却成为了最大的难题。传统的停车场存在的问题,如:车辆进出场的效率低、找车位难、找车也难、管理难度大、管理成本高。 为了解决传统停车的这些问题,智慧停车解决方案应用而生。市面上做智慧停车解决方案的可以说也是比较多的吧,这里就不与大家讨论解决方案了,还是聊一聊智慧停车云平台的体系与架构! 做智慧停车方案的很多,但能够做智慧停车云平台的就明显的比较少了,之所以少的原因也很简单,技术难度比较大!这里分享一个大快的城市智慧停车云平台解决方案的体系与架构。 关于 大快 的智慧停车云平台的体系与架构,我直接截图展示一下给大家看,结构脉络比较清晰

国内做超融合比较好的存储厂商有哪些?

不羁的心 提交于 2020-04-03 15:12:54
虽然不敢说我们杉岩超融合是全球做的最好的厂家,但是在国内超融合市场,我们也算是独树一帜。 杉岩超融合私有云业务,凭借在虚拟化和分布式存储领域超过十年的技术储备,以及对业务系统的深刻洞察,掌握了多项国际技术专利。目前,杉岩超融合已经是私有云的标准技术方案之一,成为为智能互联网、工业互联网的标准配置。在即将到来的5G时代,与边缘计算紧密结合,既可以作为行业私有云或者区域的专有云,也可以成为总部数据中心与边缘计算之间的雾计算单元。适用的行业广泛,匹配很多业务场景,不断为客户创造新的价值。 下面我给大家说说杉岩超融合一体机特点: SandStone HyperCube 超融合基础架构一体机融合虚拟化计算、软件定义存储和云管理平台于一体,经过预集成和调优的超融合单元可以快速稳定地提供一站式的私有云服务,一体机中集成的软件定义存储可以灵活满足企业传统应用和互联网创新应用的不同存储需求,对现有IT环境中的虚拟机应用和存储卷,都可以集中纳管,将虚拟机、容器等技术带来的复杂性隐藏在单一管理平台中,是云数据中心IT基础设施的一站式选择。 软件预集成开箱即用,业务快速上线 SandStone HyperCube预集成和优化了主流虚拟化和数据服务,实现了一站式交付、家电化安装,系统部署当天业务即可上线,软硬一体的融合平台稳定可靠,运维人员通过图形化的界面进行一键式业务部署,实现业务快速上线

Gartner 容器报告:阿里云与 AWS 并列第一,领先微软、谷歌

…衆ロ難τιáo~ 提交于 2020-04-03 03:46:54
近日,国际知名调研机构 Gartner 发布 2020 年容器公有云竞争格局报告,阿里云再度成为国内唯一入选厂商。Gartner 报告显示,阿里云容器服务在中国市场表现强劲,产品形态丰富,在如 Serverless 容器、服务网格、安全沙箱容器、混合云和边缘等领域,具备良好的技术发展策略。 2020 年 3 月,Gartner 第二次公开《竞争格局:公共云容器服务》年度调研报告,报告针对 Serverless Kubernetes、服务网格、容器镜像等十项功能维度进行对比,阿里云和 AWS 覆盖九项产品能力,产品丰富度领先 Google、微软、IBM 和 Oracle 四家厂商。 阿里云连续两年入选 Gartner 容器报告,一方面是因为阿里云拥有全球第三的市场份额,另一方面是因为其已经拥有近十年的容器技术储备。 目前,阿里云容器服务(ACK)已在中国及海外 19 个公有云可用区开服,同时也支持客户在自有机房和边缘端的部署使用 Kubernetes。同时,阿里云还提供了丰富的差异化产品:兼容 Istio 的托管版服务网格、基于弹性容器实例的无服务器 Kubernetes(ASK)、提供镜像扫描的独享版容器镜像服务 (ACR)、基于轻量虚拟机技术的安全沙箱容器运行时和托管服务网格(ASM)等等。在此前的 Forrester 公共云容器服务评测中,阿里云作为 Strong

五分钟学后端技术:一篇文章告诉你如何学习云计算!

五迷三道 提交于 2020-04-02 22:50:00
作者:刘超 转自【刘超的通俗云计算】 什么是云计算 早在十年前,市场上就出现了很多和云计算相关的岗位,当时正是云计算技术最火热的时代,不管是BAT还是华为等企业都开始布局云计算,于是OpenStack研发、容器研发、底层开发等相关岗位相应地也越来越多,虽然这几年大数据和AI的风头已经完全压过了云计算,但是这一门技术仍然在现如今的技术体系中占有很重要的位置。那么,到底什么是云计算,就是我们每一个要学习云计算技术的朋友要了解的事情了,根据百度百科的介绍 大数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》 [1] 中大数据指不用随机分析法(抽样调查)这样捷径,而采用所有数据进行分析处理。大数据的5V特点(IBM提出):Volume(大量)、Velocity(高速)、Variety(多样)、Value(低价值密度)、Veracity(真实性)。 [2] 思维导图 云计算的发展史 物理机时代 云计算的整个过程,用一个词来讲就是“分久必合,合久必分”。 云计算其实主要解决了四个方面的内容:计算,网络,存储,应用。前三者是资源层面的,最后是应用层面的。 计算是CPU和内存,为啥

免费灾备云

荒凉一梦 提交于 2020-04-02 16:30:36
(IDC彭帅) 您企业现在的数据保护真的可控吗? 物理环境、虚拟化和云环境混合架构是否让您在越来越复杂的IT架构中,不得不放弃数据的主动控制权,在数据的使用安全问题,数据保护方面做出让步?真的没有逻辑漏洞吗? 如果您能拥有和国家重保单位一样级别的异地灾备能力,同时能存储超过6倍单位容量的数据,您会感兴趣吗? 您是否愿意在保证现在架构不变的情况下,来增加企业异地容灾能力,来确保万无一失呢? UCACHE灾备云是一种能帮您轻松实现服务器定时备份的云服务,他能满足您要求的所有应用场景,满足公有云、虚拟环境、物理环境以及私有云和混合云状态下的所有数据定时备份、恢复的任务,目前是 免费开放 UCACHE灾备云介绍 一、按需扩容、按使用计费 不同于传统的灾备方式,需要建立完整的一套架构来对应生产中心可能的故障失效。而云灾备灾备即服务的模式,允许用户将传的采购模式转化为按服务交付使用的方式,因此底层架构的成本将由其他采用同样云灾备方式的企业所分担,从而大大减少了资源的开支与浪费。 二、高度的灵活性 云灾备具有云计算的特点,高可用、高安全、易扩展、无限扩容、模块化功能、24小时运维等特点,提高的用户可选择的灵活性,企业只需要做好前期云灾备服务商的选择即可。 三、快速迭代的复制与恢复技术 云灾备厂商一直致力于云灾备的技术迭代和功能更新,在一定的程度上比企业自建在功能及技术上要投入更多的资源

自述:中了勒索病毒后的一波挽救操作!(灾备云—数据备份、恢复)

匆匆过客 提交于 2020-04-02 08:15:50
(IDC彭帅) 自从用上了Ucache灾备云的云备份服务之后,简真方便的不得了,提醒大家数据千万条,安全第一条,一定要及时把想备份的内容做个备份!现在就和大家说说我自从中了勒索病毒之后怎么用上云灾备的故事吧! 一、事件起因:公司服务器中了“勒索病毒” 因为公司托管的服务器过年这段时间运维都放假了没人管理,结果就中招了“勒索病毒”。导致服务器里的OA系统、财务系统等文件全部被加密,因为平时也没有做备份的习惯,这下真是肠子都要毁青了。这也是我要告诉大家为什么要做这个数据备份的原因? 二、灾难分析:中招了“勒索病毒”后数据怎么恢复? 第一时间已经把服务器进行了远程关闭。之后,一方面IDC服务商那边说目前没有技术可以破解,数据恢复的可能性较小,另一方便之前也有用户交了赎金后发现对方不守信还是没给数据,或者给的数据不可用或者不完整。而且这类事件并不受国家法律保护!另一方面也要给公司个交待还是想办法从网上找了一家数据恢复的B公司,想尝试看看。 三、天赐良缘:ucache灾备云平台免费普及计划 也是一次偶然的机会,知道这个ucache灾备云平台有个免费普及计划,正好就用到了,确实也是因为像我们这种中小企业哪有几十万的资金去建一套自己的容灾系统呀,想都不敢想,正好这次数据需要搬迁,更重要的是领导说以后的备份做到位,但钱嘛,你懂的。低成本的解决公司的数据备份问题,还得不出问题,太难了吧!机会来了

为什么超融合正在成为数据中心的主流?

久未见 提交于 2020-04-01 17:53:35
随着数据不断增长以及互联网业务的兴起,新兴应用对IT架构需求的快速变化以及不确定性成为了主要挑战,因此催生出了一种创新的架构——超融合。近年来超融合发展如火如荼,替换传统架构已势不可挡,超融合正在成为数据中心基础架构的核心。 什么是超融合? 超融合基础架构(Hyper-Converged Infrastructure,或简称“HCI)是指在同一套单元设备中不仅仅具备计算、存储、网络和服务器虚拟化等资源和技术,且多套单元设备可以通过网络聚合起来,实现模块化的无缝扩展,形成统一的资源池。 超融合架构采用类似Google、Facebook后台的大规模基础架构模式,可以为数据中心带来最优的效率、灵活性、规模、成本和数据保护。 超融合技术成熟吗? 据《Hype cycle for ICT in China 2017》报告显示,超融合系统(Hyperconverged Integrated System)位于期望膨胀期顶点附近。这预示着超融合很快将渡过概念炒作期,开始规模化推广。Gartner连续几年的技术成熟度曲线预测,在2-5年超融合将真正成为市场的主流,而在国内市场,这个速度比Gartner预期更快。另外,Wikibon连续三年的预测显示,未来公有云、私有数据中心的集中存储,将被超融合为代表的技术取代。 为什么超融合架构比传统架构好? 在互联网、云计算、大数据等新兴技术快速发展的趋势下

超融合一体机全面升级,专为监控定制

|▌冷眼眸甩不掉的悲伤 提交于 2020-04-01 17:39:08
业界领先的企业级存储提应商Infortrend普安科技推出全新一代的超融合一体机EonServ 5000 Gen2,将NVR服务器和数据存储整合在一起,这套监控解决方案开机即用,无需复杂的安装部署。与上一代的解决方案相比,Gen2提高的方面包括更强劲的Intel CPU,高达64GB的内存空间,PB级存储容量,搭载SAS 12Gb / s高速通道。 服务器和存储的超融合,实现软件定义存储是企业应用未来的主要趋势。这降低部署和管理的复杂程度,减少成本的投入。Infortrend的EonServ超融合一体机经过Milestone XProtect®VMS认证,与市面上主流的IP摄像头和数字录像机都兼容。Milestone VMS作为开放平台,为用户提供多种功能满足自身的需求。除了Milestone VMS,EonServ还支持领先的VMS(例如,Genetic、Digifort),为客户提供最佳的视频表现。 EonServ 5000 Gen2搭载Intel Core i3和Xeon E,性能提高50%以上。内存容量和传输速度也都翻倍,内存可达64GB,硬盘接口采用12Gb / s。另外,OS磁盘插槽升级采用可插拔设计,更换维护更加容易。所有关键组件(电源、风扇到控制器)均采用模块化设计,降低维护的复杂性,让用户获得快速而精确的技术支持。 监控行业的存储特点是低成本大容量,系统在容量