网络硬件

路由器简介 Network（网络层）： 网络层负责对子网间的数据包进行路由选择。 此外，网络层还可以实现拥塞控制、网际互连等功能。 对应的连接设备：路由器。 路由器（router）是互联网的枢纽，是连接英特网中各局域网、广域网的设备： 它会根据信道的情况自动选择和设定路由，以最佳路径，按前后顺序发送数据。 作用在OSI模型的第三层（网络层），提供了 路由 与 转发 两种重要机制 路由： 收集网络拓扑信息并动态形成路由表 路由器控制层面的工作，决定数据包从来源端到目的端所经过的路由路径 （host到host至今的最佳传输路径） 转发： 根据转发表（FIB）转发IP数据包 路由器数据层面的工作，将路由器输入端的数据包移送至适当的路由器输出端（在路由器内部进行） 路由器实际上起到的作用是完成不同段之间网络的互联。 分段原理 TCP/IP V4 协议网络的分段原理： TCP/IP协议给网络中的每一个主机都会分配一个IP地址，它包含两部分信息： 网络地址和主机地址。 TCP/IP协议中的IP地址将网络地址和主机地址包装在一个32位的域里（ TCP/IP V4），分为四类： a、 1-126，A类 网络地址1个字节，主机地址3个字节。 b、 128-192，B类 网络地址2个字节，主机地址2个字节。 c、 192-223，C类 网络地址3个字节，主机地址1个字节。 d、 0，127，224

局域网(Local Area Network，简称LAN)，用于将有限范围内（例如一个实验室、一层办公楼或者校园）的各种计算机、终端与外部设备互联成网。公司局域网怎么建立？首先来了解下不同规模企业网络组建方式。 10人以下企业网络组建 10人以下，规模比较小的公司一般对网络应用需求较低，由于人数少，基本也不存在划分VLAN（虚拟局域网）的需求，所以，选择一个多口的交换机就足够了。 10人-100人规模的企业，需要路由功能和子网划分 满足这类需求，一般比较合适的是路由器+交换机的配置。路由器提供内网和外网的链接和VLAN（虚拟局域网）的划分，以及各种防火墙和路由功能的配置。而交换机一头连到路由器上，作为一个子网，另一头链接子网中的各台终端。划分几个子网，则从路由连出几台交换机即可。组建构结构如下图：现在比较流行的公司局域网一般选择树形拓扑结构进行组建（星型拓扑的延伸）。树形拓扑结构有以下优点：1、易于故障的诊断； 2、易于网络的升级。 路由器和交换机的区别 传输速度 路由器比交换机慢，同一网线上网相互影响 交换机比较路由器快，同一网线各自上网互不受影响 使用范围 路由器是必需的网络设备，在路由器无法全部连接电脑的情况下，再加交换机。 单独交换机无法实现上互联网功能，交换机在局域网中起到拓展的作用 网络地址 路由器可以把一个IP分配给很多个主机使用，但IP都是相同的

路由器工作原理浅谈 路由器是构建整个网络最核心的设备。比较著名的品牌为cisco、锐捷、华为、TP-LINK、H3C等等。之前工作中接触的较多的是思科和银河风云，思科的主要是7609，性能十分稳定，基本上全年每天24小时工作不会出问题。银河风云一般，十分笨重，板卡容易坏，2M接口不稳定（进行自环不是loopback状态），软件有bug（一次作业中发现其以太口如果正常工作中，当将网线从以太口中拔出再插上，和对端的路由器之间路由协议的邻居就建立不起来，必须将整个路由器进行重启才正常工作）。 路由器其实和我们普通使用的计算机类似，有cpu、输入输出接口、内存，操作系统（思科的是ios，华为的VRP）。思科公司从来不承认自己是硬件公司，而是一直声称自己是软件公司，由此可以路由器的操作系统是核心，操作系统的性能直接决定了路由器的性能。路由器和我们使用的计算机最大的不同之处就是路由器是用来进行转发数据包的，而我们使用的计算机只是接收数据包或者发送数据包。好比我们个人只会收快递或者发快递，只是作为叶子节点，但是快递中转站则接收来自各地的快递然后进行判断将每个包裹从正确的路线发送出去，这个快递中转站就和我们的路由器很相像了。 路由器有很多接口，我们的电脑一般只有一个以太网口。而路由器比较常见的接口有2M口、以太电口、以太光口、POS口等等，这也是为了满足整个网络的异构性

企业级路由器和家用路由器的区别有哪些 1. 企业级路由器 的CPU,缓存，内存等硬件参数更高，NAT转发数更多，支持同时接入上网的用户数量更多。 2.从软件功能上来看，企业级路由器支持的协议标准及软件管理功能更多，为满足企业各种网络的需求，有些支持VPN，有些支持流量控制，有些支持多种虚拟服务和更多路由协议。 3.企业级路由器价格比家用路由器更贵。 4.如果是无线路由器，企业级无线路由器支持的无线接入用户数及总的接入用户数都比普通家用路由器更多。 企业级路由器较家用路由器具体表现特点如下： 一、更高的转发性能、更高的带机量 一般企业的员工少则十几人，多则上百个，如果要同时满足这么多人的无线上网需求，则对于路由器的转发性能和带机量有很高的要求。而家用路由器密度低，信号强度小，覆盖范围小，转发性能和带机量有限，如果是在像企业那样的公共场合使用，就会存在严重的应用隐患。相比于家用路由器，企业级路由器在这方面性能更优越，能够满足更多人高速上网。企业级路由器大多采用高主频网络专用处理器，数据处理能力强，具有更远的传输距离，更大的覆盖面积，可以大幅度提高网络的传输速度和吞吐能力，运行也十分稳定，更好地满足企业多人高速上网需求。 二、更适合企业的功能定位 对于一个企业而言，路由器的使用环境要比家庭复杂得多，因此企业级路由器还拥有很多专门针对企业而设计的功能。以全国知名品牌爱快旗下的IK

硬件，网络，存储，数据库，操作系统，虚拟化系统，中间件程序 ，业务应用程序 1，部署规划，部署文档，配置记录 2，监控系统，报警 3，故障解决记录，文档 ， 巡检，安全检查 ，运维报告 4，日志系统 5，数据备份，数据恢复，数据恢复演练 6，自动扩容，自动缩容 7，系统优化，架构优化 8，运营数据 来源： https://www.cnblogs.com/li-tian-jun/p/11563831.html

调优概述 # 几乎在很多场景,MapRdeuce或者说分布式架构,都会在IO受限,硬盘或者网络读取数据遇到瓶颈.处理数据瓶颈CPU受限.大量的硬盘读写数据是海量数据分析常见情况. IO受限例子： 索引 分组 数据倒入导出 数据移动和转换 CPU受限例子： 聚类/分类 复杂的文本挖掘 特征提取 用户画像 自然语言处理 我们需要从硬件规划和软件规划等多方面结合实现性能和效率的提升。 硬件规划 # 评估集群规模 # 我们需要搭建多少节点的hadoop集群？回答这个问题考虑的因素比较多：预算？数据量？计算资源？ 需要多少计算资源可能不是特别好评估，推荐横向扩展，随业务规模和应用发展再考虑扩展。开始可以就按照数据量来评估数据规模，估计一下每天的数据增量？保存数据的周期是多少？有没有冷数据方案？ 假设每天增长的数据为600G、3备份存储，以一年规划为例,大概存储为600G 3 360天=633T, 再考虑增加%20的预留，考虑未来数据增长的趋势，考虑应用计算等空间需求。为节省空间可考虑压缩存储（大概可以节省70%空间）。 同时考虑一定冗余量，如果集群一部分节点不可用也要保证业务正常使用（根据集群规模评估冗余比例）。 然后结合节点硬件规划和预算，确定集群规模。假如我们需要650T存储，可以采用30台12 x 2TB的存储配置或者 60台6 x 2TB配置，但是节点数量翻翻

1、系统引导流程 （1）BIOS( Basic Input Output System ) 服务器主机开机以后，将根据主板BIOS中的设置对CPU (Central ProcessingUhit中央处理器) , 内存显卡,键盘等设备进行初步检测,检测成功后根据预设的启动顺序移交系统控制权,大多时候会移交给本机硬盘。 检测失败通常会通过显示器屏蒂或者蜂鸣器报警。 基本输入输出系统主要功能: BIOS存储硬件的配置信息, CPU虚拟化开关, 系统的引导顺序, 主机硬件时间( BIOS独立的电池、电池没电的效果,主机的时间不准,不会影响系统引导,但是硬件的部分配置信息会丢失，BIOS会恢复出厂设置) BIOS电池放电也是为恢复出厂设置 加电自检 硬件初始化 引导操作系统 （2）MBR引导 　　当从本机硬 盘中启动系统时,首先根据硬盘第个扇区中MBR (Master Boot Record主引导记录)的设置， 将系统控制权传递给包含操作系统引导文件的分区( /boot) ; 　　或者直接根据MBR记录中的引导信息调用启动菜单(如GRUB)。 （3）GRUB菜单 　　对于Linux操作系统来说, GRUB (GRand Unified Bootloader.统启动加载器) 是使用最为广泛的多系统引导器程序。 　　系统控制权传递给GRUB以后,将会显示启动菜单给用户选择，并根据所选项

一、网卡（Network Interface） 使计算连网的网络设备。 二、中继器（RP Repeater） 工作在物理层上的连接设备，OSI模型的物理层设备。 适用于完全相同的两类网络的互连，主要功能是通过对数据信号的重新发送或者转发，来扩大网络传输的距离。 中继器是对信号进行再生和还原的网络设备。 即使数据在链路层出现错误，中继器依然转发数据。 不改变传输速度。 不能在传输速度不一致的媒介之间转发。 有些中继器提供多个端口服务，这种中继器被称为中继集线器或集线器。 三、网桥（Bridge） 工作在OSI模型的第二层-数据链路层连接两个网络的设备。 根据数据帧内容转发数据给其他相邻的网络。 基本只用于连接相同类型的网络，有时候也连接传输速率不一致的网络。 网桥是一种对帧进行转发的技术，根据MAC分区块，可隔离碰撞。 具备“自学习”机制，网桥对站点所处网段的了解是靠“自学习”实现的，有透明网桥、转换网桥、封装网桥、源路由选择网桥。 以太网中常用的交换集线器也是网桥的一种。 四、路由器（Router） 工作在OSI的第三层-网络层连接网络与网络的设备。 可以将分组报文发送到另一个目标路由器地址。 基本上可以连接任意两个数据链路。 具有分担网络负荷、网络安全功能。 五、交换机（Switch） 交换机可以说同时是集线器和网桥的升级换代产品，因为交换机具有集线器一样的集中连接功能

　　号称网络硬件三剑客的集线器(Hub)、交换机(Switch)与路由器(Router)一直都是网络界的活跃分子，但让很多初入网络之门的菜鸟恼火的是，它们三者 不仅外观相似，而且经常待在一起，要想分清谁是谁，感觉有点难。我们一起来看看它们之间的区别和联系。 一、集线器 　　在认识集线器之前，必须先了解一下中继器。在我们接触到的网络中，最简单的就是两台电脑通过两块网卡构成“双机互连”，两块网卡之间一般是由非屏蔽双绞线来充当信号线的。由于双绞线在传输信号时信号功率会逐渐衰减，当信号衰减到一定程度时将造成信号失真，因此在保证信号质量的前提下，双绞线的最大传输距离为100米。当两台电脑之间的距离超过100米时，为了实现双机互连，人们便在这两台电脑之间安装一个“中继器”，它的作用就是将已经衰减得不完整的信号经过整理，重新产生出完整的信号再继续传送。 中继器就是普通集线器的前身，集线器实际就是一种多端口的中继器。集线器一般有4、8、16、24、32等数量的RJ45接口，通过这些接口，集线器便能为相应数量的电脑完成“中继”功能。由于它在网络中处于一种“中心”位置，因此集线器也叫做“Hub”。 二、交换机 　　交换机也叫交换式集线器，它通过对信息进行重新生成，并经过内部处理后转发至指定端口，具备自动寻址能力和交换作用，由于交换机根据所传递信息包的目的地址，将每一信息包独立地从源端口送至目的端口

　 　OSI 七层模型通过七个层次化的结构模型使不同的系统不同的网络之间实现可靠的通讯，因此其最主要的功能就是帮助不同类型的主机实现数据传输 。完成中继功能的节点通常称为中继系统。一个设备工作在哪一层，关键看它工作时利用哪一层的数据头部信息。网桥工作时，是以MAC头部来决定转发端口的，因此显然它是数据链路层的设备。具体说: 物理层：网卡，网线，集线器，中继器，调制解调器 数据链路层：网桥，交换机 网络层：路由器 网关工作在第四层传输层及其以上 　　集线器是物理层设备,采用广播的形式来传输信息。 　　交换机就是用来进行报文交换的机器。多为链路层设备(二层交换机)，能够进行 地址学习 ，采用 存储转发 的形式来交换报文.。 　　路由器的一个作用是 连通不同的网络 ， 另一个作用是选择信息传送的线路 。选择通畅快捷的近路，能大大提高通信速度，减轻网络系统通信负荷，节约网络系统资源，提高网络系统畅通率。 交换机的工作原理 　　交换机拥有一条很高带宽的内部总线和内部交换矩阵。交换机的所有的端口都挂接在这条总线上，控制电路收到数据包以后，处理端口会查找内存中的地址对照表以确定目的MAC（网卡的硬件地址）的NIC（网卡）挂接在哪个端口上，通过内部交换矩阵迅速将数据包传送到目的端口，目的MAC若不存在则广播到所有的端口，接收端口回应后交换机会“学习”新的地址，并把它添加入内部MAC地址表中。