proxmox

1.进入安装界面，选择第一项（默认为第一项），按回车键进行安装。 2.点击 i agree，进行下一步。 3.选择要安装的硬盘，如果有多块硬盘就在这一步选择，点击 next。 4.在Country处输入china，时区、键盘布局保持默认。next 5.输入登录的root密码，输入E-Mail地址，next。 6.management interface：选择管理网卡，这里就只有一张 hostname：输入一个全限定域名 后面就按照规划输入ip地址、dns服务器 next 7.坚持一下配置，看看有没有什么问题，没问题就点击install。 8.安装完成，点击reboot。 9.在浏览器里输入 https://ip:8080 访问proxmox，点击 高级。 10.点击 接受风险并继续。 11.输入用户名：root，密码（之前设置的密码） 12.进来之后就开始创建集群，数据中心-集群-创建集群 13.输入集群名称，点击 创建 14.出现这个界面说明集群创建成功。 15.点击 加入信息，这里的加入信息就是加入集群的凭证。 16.点击 拷贝信息，将集群加入信息拷贝到另一台proxmox主机上去粘贴。 17.来到另一台proxmox主机，点击 加入集群。 18.将拷贝的加入信息在此处粘贴，再在密码处输入源主机的密码，点击 加入。 19.加入成功后，就能看到这两个节点了。 来源： 51CTO

故障表现 Web管理后台发现告警，如下图所示： Pve40这个节点的某个盘down掉了。 问题排查 ssh登录pve40这个机器所在的系统，执行df –h查看磁盘挂接情况，得到如下输出： 通过挂接点名称（ceph-13）与故障osd的id相对照，可以准确无误的判断出物理磁盘/dev/sdc出现了故障。 修复尝试 在告知其它人发生故障以后，并确认故障处理不会导致任何负面作用的情况下，先试着从web管理界面选取故障osd，然后点击“启动”按钮尝试启动，但是很遗憾，不能获得成功。 再次回答系统命令行，执行ceph osd tree确认故障是否与web管理界面所变现的相一致。为了不对运维造成压力（其它人员看到有黄色报警，毕竟还是有点别扭，不懂的人还可能会发飙），决定对故障盘离线并进行如下尝试： 1、 df –h 查看一下磁盘是否被挂载 2、 ceph osd out osd.13 离线操作 3、 ceph auth del osd.13 ；ceph osd rm 13；ceph osd crush remove osd.13 4、 wipefs -af /dev/sdc 清空磁盘 5、 ceph-volume lvm zap /dev/sdc 创建ceph卷 6、 web界面尝试重新创建osd。 到最后一步执行创建的时候，界面一直在转圈，点开日志详情，可看到具体的原因，如下图所示：

故障表现 Web管理后台发现告警，如下图所示： Pve40这个节点的某个盘down掉了。 问题排查 ssh登录pve40这个机器所在的系统，执行df –h查看磁盘挂接情况，得到如下输出： 通过挂接点名称（ceph-13）与故障osd的id相对照，可以准确无误的判断出物理磁盘/dev/sdc出现了故障。 修复尝试 在告知其它人发生故障以后，并确认故障处理不会导致任何负面作用的情况下，先试着从web管理界面选取故障osd，然后点击“启动”按钮尝试启动，但是很遗憾，不能获得成功。 再次回答系统命令行，执行ceph osd tree确认故障是否与web管理界面所变现的相一致。为了不对运维造成压力（其它人员看到有黄色报警，毕竟还是有点别扭，不懂的人还可能会发飙），决定对故障盘离线并进行如下尝试： 1、 df –h 查看一下磁盘是否被挂载 2、 ceph osd out osd.13 离线操作 3、 ceph auth del osd.13 ；ceph osd rm 13；ceph osd crush remove osd.13 4、 wipefs -af /dev/sdc 清空磁盘 5、 ceph-volume lvm zap /dev/sdc 创建ceph卷 6、 web界面尝试重新创建osd。 到最后一步执行创建的时候，界面一直在转圈，点开日志详情，可看到具体的原因，如下图所示：

Proxmox 双因子认证 一、Proxmox支持两种方式的双因子认证： 1.通过认证域方式实现，也就是TOTP或YubiKey OTP实现。 使用这种方式，新建用户时需要将其持有的Key信息添加到系统，不然就没办法登录。使用TOTP的用户，如果被允许先登录，可以在登录后修改TOTP信息。 如果认证域未强制要求提供双因子认证，用户也可以通过TOTP选择自行启用双因子认证。如果服务器配置了AppID，且未强制开启其他双因子认证方式，用户也可以选择使用U2F认证。 2. U2F 认证： 如需使用U2F认证，服务器需要配置拥有合法https证书的域。还需要配置初始的AppID。 修改AppID会导致已有U2F注册失效。 （这要求还有点高，AppID一修改，也受影响，就略过不采用了） 二、实现方式： 先用TOTP时间令牌方式来实现 在用户管理中选中用户后，点TFA按钮 然后下载个FfreeOTP 打开扫一扫： 会出现6个数字。填到验证码里应用后就OK了。 或者你是个很有安全意识的运维人员，你的管理人员没这意识，你可以自行设置TFA： 如果你觉得下载个应用太烦，那可以安装个oathtool工具； 一条命令就出来了： oathtool --totp -b <这里写你的秘钥> 登陆时,险了密码，会强制要求输入一个OTP的code. 输入那6个数字，就OK了。 还有用YuBiKEY 硬件来实现的

作者：田逸（sery@163.com） 使用nfs的目的 Proxmox集群中，如果将ISO文件存储于本地，只能供本节点存取，要用于集群的其它节点进行安装，将无法如愿。 现已经在物理节点pve48的本地存储上传了可以使用的ISO镜像，接下来，试着创建虚拟机，用此ISO镜像来安装虚拟机操作系统。 此虚拟机创建在集群中另外一个物理节点pve50上，随便给其命名进行测试。 这样有些麻烦，如果要在每个节点给虚拟机安装操作系统，按常规的方式，每个物理节点，都得上传好所需的操作系统ISO镜像，既费时又浪费宝贵的存储资源。 那么，有没有好的解决方案呢？有的，nfs就是很好的工具。外挂nfs服务，即解决了容量扩展问题，又能让所有的虚拟机都可以共享读取。可能会有人质疑，这nfs可用性差，而超融合可行性确实极高，何必多此一举呢？ 我们用nfs来存储ISO镜像以及定时备份虚拟机，并不需要很高的可用性。因此，作为超融合高可用私有云的辅助手段，是非常经济和适用的。因为独立的物理nfs作为私有云集群的补充，并不需要较高的配置，只要磁盘容量足够大就行（不像集群计算节点，需要性能极佳的磁盘）。 挂接NFS服务 Proxmox web管理界面，在“数据中心”之下，选中“存储”，点击“添加按钮”。 只要nfs服务器权限设置正常，在管理界面输入nfs服务器的ip地址之后，可自动探测到设定的共享目录（实际是调用系统指令

Proxmox VE 6.1从零带你了解之--Cluster和HA的配置与管理 Proxmox的Cluster建立 pve:(172.20.9.50) root@pve:~# pvecm create test pve02:(172.20.9.53) root@pve02:~# pvecm add 172.20.9.50 pve:(172.20.9.54) root@pve03:~#pvecm add 172.20.9.50 三条命令成功执行完后，登录任意一个IP就可以管理Cluster了. Promox的HA配置 DataCenter(test)-->HA 第一步，创建HA的Groups DataCenter(test)-->HA-->Groups-->Create 这里可以有很多选项，我们就选择最最常用的。 DataCenter(test)-->HA-->Add 按照VM 100加入HA的情况，把其他所有机器都加入HA 特别需要注意的是Request State: 如果不需要开机的，选择stopped。 状态还有ignored和disabled两类状态。 如果觉得麻烦，可以命令行。 root@pve:~# ha-manager status quorum OK master pve03 (active, Sun Mar 15 20:37:20 2020) lrm pve

1.下载 安装包最新的2.1版本, 刻盘,安装(或用virtualbox虚拟机安装也行,虚拟机选其他系统其他版本) 2.安装很简单, 网上很多教程,但是安装好后出现一个问题,用另一台电脑 访问 https://IP:8006 控制页面时发现不稳定 老是打不开,ping这个ip测试 发现丢包率大于60% ,很严重, 找了好久原因,一开始以为是 网卡问题, 但是最后发现是我的 TP-link 路由器的问题,换了一个美国网件 路由器后, ping IP 就正常了, 难道我这个 TP-link 路由器 不支持linux 系统,也许有冲突吧. 这个问题纠缠了大半天,还好我有另外一个路由器. 3.安装好后 用IE8 访问 https://IP:8006 发现打不开 提示 js错误,于是用chrome 火狐等,但又出现另一个问题,在使用vnc 控制台时 提示安装java 插件,于是安装java, 安装后还是打不开控制台,提示错误 或一直提示安装java插件, 于是 google查资料, 发现是这个问题,我是win7 64的系统,安装的java 也是 64位的, 而chrome 或火狐 都是32位的,需要 装java32位 插件的才能正常使用,但是下载 32位 java插件后提示 装不了. 旁边有台 win7 32位的本,于是 用chrome 装32位java插件,于是控制台 能正常打开了

虚拟机环境： Windows7 64位。 按以下步骤做，思路是让WINDOWS 自己认 virtio 总线的驱动 1） 先从 http://www.linux-kvm.org/page/WindowsGuestDrivers/Download_Drivers下载 virtio 的ISO文件 注：我使用的是下面的ISO文件： http://alt.fedoraproject.org/pub/alt/virtio-win/latest/images/bin/virtio-win-0.1-30.iso 2） 下载ISO文件后作为一个“镜像”上传到 PROXMOX 3） 新建虚拟机安装Win7或者已经安装好的windows都没有问题（IDE或者SCSI总线都可以），安装完WINDOWS后，先关闭虚拟机，然后增加一个1GB的virtio总线格式的“硬盘”，同时增加一个以上面下载好的ISO文件为光驱（IDE总线即可），如果有需要“网卡”也可改为virtio总线 4） 重新启动该虚拟机，WINDOWS会自动认出新硬件（其实就是上面新建的那个1GB硬盘），这时就可以让WINDOWS搜索刚才新建的光驱里的驱动了，这里就不详细描述了，装好 virtio 总线驱动后关闭该虚拟机 5） 再次回到 Proxmox 配置界面里把新建或原有的IDE总线的硬盘“删除”，留意这里的删除不用担心

ProXmoX VE 介绍 Proxmox VE 是一个完整的开源服务器虚拟化管理软件。它基于 KVM 虚拟化和基于容器的虚拟化，并且管理 KVM 虚拟机、 Linux 容器 (LXC)、 存储、 虚拟化的网络和 HA 集群。 企业级功能和直观的 web 界面旨在帮助您提高您现有的资源的利用、并降低硬件成本和管理时间，可在商业以及家庭使用。即使是最苛刻的Linux和Windows应用程序工作负载，您也可以轻松地虚拟化。 Proxmox VE 是强大和轻量级的开源服务器虚拟化软件，优化了性能和可用性。最大的灵活性，Proxmox VE 支持两种虚拟化技术-基于内核的虚拟机 (KVM) 和基于容器的虚拟化与 Linux 容器 (LXC)。 1. 安装 Proxmox VE 2. 登录 3. 创建集群 4. 查看节点状态 5. 修改apt源 root @chengyinwu : ~ # cat /etc/apt/sources.list deb http: //mirrors.163.com/debian/ stretch main non-free contrib deb http: //mirrors.163.com/debian/ stretch-updates main non-free contrib deb http: //mirrors.163.com/debian/