> 技术文档 > (云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。

(云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。


维护管理

维护项目 检查项 正常状态 维护周期 查看系统告警 FusionCompute上的告警 无新增告警 每天 检查FusionCompute健康状态 健康检查报告 无”不合格“检查项 每天 检查设备运行状态 服务器、交换机和存储设备的指示灯状态 指示灯显示正常 每天 检查设备运行环境 温湿度
空气质量
防尘情况 符合运行环境对温度和湿度的要求
符合运行环境对空气质量的要求
无明显尘土附着 每周 查看预警整改公告 “http://support.huawei.com/enterprise”,选择“公告 > 产品公告 > 预警公告 > IT > 云计算数据中心 > FusionSphere > FusionSphere”,查看预警整改公告。 满足预警通知的要求 每月

为了保证系统长期正常、稳定的运行,维护工程师需要定期对系统进行检查,并根据检查出的异常结果排除故障

查看告警:

紧急:已经影响业务,需要立即采取纠正错误的告警为紧急告警

重要:已经影响业务,如果不及时处理会产生较为严重后果的告警为重要告警

次要:目前对业务没有影响,但需要采取纠正错误,以防止更为重要的故障的发送,这种情况下的告警为次要告警。

提示:检测到潜在的或即将发送的影响业务的故障,但是目前对业务还没有影响,这种情况下的告警为提示告警

(云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。

实时监控

管理员可以查看集群、主机以及虚拟机的监控信息,以便于了解集群在指定时间段内的运行状态

(云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。

备份与恢复策略

维护工程师在对系统进行重大操作(如升级、重大数据调整等)前,为了保证FusionCompute在出现异常或未达到预期结果时可以及时进行数据恢复,将对业务的影响降到最低,需要提前对VRM节点的数据进行备份。

FusionCompute同时支持对关键数据进行自动备份手工备份

  • 在对系统部件进行重大操作(如升级、重大数据调整等)后,系统有可能出现异常或未达到预期结果。此时,需要对其进行回退,回退过程中需要进行数据恢复操作。

故障处理

案例——HA迁移过程:

  1. 首先有两个主机的管理口通信,为的是查询对端主机是否有足够的空间让虚拟机迁移
  2. 对端主机会创建一个空壳虚拟机,然后通过存储链路将后端的存储信息发给对端主机
  3. 与VRM建立连接,也建立的心跳,由VRM来管控虚拟机
系统配置:

管理员可以根据业务需求对FusionCompute系统配置参数做出调整

  1. 配置域认证信息
  2. 更新License
  3. 修改系统Logo
  4. 配置登录超时时间
  5. 配置资源调度周期
  6. 配置SNMP管理站
  7. VRM单节点扩展为主备部署

集群控制管理:

  • 自动化级别:手动、自动

  • 衡量因素:CPU、内存、CPU+内存

  • 阈值:保守、较保守、中等、较激进、激进

    阈值根据衡量因素的使用情况迁移虚拟机

为什么没有默认开启DPM或DRS?

  1. 开启DRS的条件是要开启DPM
  2. 主机或虚拟机随时都处于就绪的状态,随时都有流量的产生,造成资源浪费,设备的性能会变差

IMC,用于屏蔽底层的CPU差异;

  • 在虚拟机迁移的过程中,不会因为对端的CPU版本不一致而导致迁移失败,目前只支持INTEL系列

FusionCompute账户:

  • FusionCompute账户分为:本地用户域用户接口对接用户
    本地用户用于登录、管理系统;
    在配置域后可用域用户登录系统;
    接口对接用户用于其他用户对接
FusionCompute登录账户:

普通模式:

  • 默认账户/密码:
    admin/laaS@PORTAL-CLOUD8

账户权限:具有系统管理员权限三员分立模式:

类型 默认账户/密码 账户权限 系统管理员 sysadmin/Sysadmin# 仅具有系统业务操作维护权限,以及创建、删除用户的权限 安全管理员 secadmin/Secadmin# 仅具有用户、角色的权限管理权,但不能创建用户 安全审计员 secauditor/Secaudito# 仅有日志查看和日志导出权限,用于对其他用户的操作进行审查

主机和集群故障处理

主机和集群创建流程

(云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。

  • FusionCompute主机和集群的故障处理,可以参考该流程顺序进行检查。

主机和集群的故障可能会涉及到如下关键故障点:

  1. 站点故障
  2. 集群故障
  3. 主机故障
  4. 系统接口故障
主机和集群故障点:
站点故障 集群故障 主机故障 系统接口故障 ①故障点 不能使用FusionCompute 不能创建、修改、移除集群 不能添加、修改、移除主机 网口绑定异常 ②故障点 不能配置级联 集群配置故障 主机配置故障 业务管理接口异常 ③故障点 存储接口异常

站点、集群故障分析

故障点 可能的故障原因 排除故障 1. 故障点 不能使用FusionCompute 网络异常 排除网络故障 2. 故障点 不能配置级联 VRM节点异常 排除VRM节点故障 3. 故障点 不能创建、修改、移除集群 站点配置异常 修复站点配置 4. 故障点 集群配置故障 集群配置异常 修复集群配置

FusionCompute使用VRM节点对资源统一调度管理,站点、集群故障和VRM节点强相关。

建不了VRM:
  1. CNA与VRM不同网段
  2. CNA能否ping通网关,CNA的IP段配置错了又或者是物理接口错了?
  3. 主机不可达、消息发送失败;
    针对软件安装CNA版本与软件包不一致
  4. CNA virsh list -all

站点、集群故障点分析:

  1. 找出故障点
  2. 查询出可能故障的原因
  3. 排除故障
案例 —— VRM虚拟机无法启动:
  1. 收集信息:
    • FusionCompute服务异常,无法启动VRM虚拟机
  2. 定位故障:
    • 可能在FusionCompute中对VRM虚拟机执行过关机操作
    • 可能在VRM虚拟机上执行过关机命令
    • 可能VRM操作异常而引发VRM自动关机
  3. 排除故障:
    • 使用 “PuTTY” ,登录VRM节点所在主机
    • 切换至 “root” 用户:su - root
    • 查找VRM虚拟机ID
    • 启动虚拟机:virsh start 虚拟机ID
  4. 检查确认:
    • 告警消失
    • 业务正常

主机故障点分析:

故障点 可能的故障原因 排除故障 1. 故障点 不能添加、修改、移除主机 网络异常 排除网络故障 2. 故障点 主机配置故障 代理服务异常 重装系统 系统异常 修复代理服务

主机上的计算资源经过虚拟化后,形成计算资源池,并分配给虚拟机使用。如果主机出现故障,将影响上层的虚拟机和业务。

案例 —— 添加主机失败:
  1. 收集信息:
    • 在FusionCompute界面上添加主机失败
  2. 定位故障:
    • VRM在CNA节点网络链路不通
    • 添加主机失败后,主机上可能残留网络配置数据,导致再次添加主机失败
  3. 排除故障:
    • 检查VRM与故障CNA节点网络连接
    • 删除故障CNA节点残留网络数据
  4. 检查确认:
    • 告警消失
    • 业务正常

系统接口管理:

FusionCompute管理如下几类接口:

绑定网口 绑定主机的网口,以提高网络的可靠性
一般是两个及以上的业务口做绑定,目的是替身业务可靠性,增加带宽 存储接口 在主机中添加存储接口,实现主机与存储设备对接
添加多个存储接口,可以实现存储的多路径传输
连接存储网口,使其多路径传输 业务管理接口 承载一些特殊业务流量的系统接口,这些特殊业务包括热迁移虚拟机、虚拟机主机容灾、虚拟机SAN存储心跳检测等 业务口 是服务器的业务数据访问接口,还是与VRM连接的接口,VRM通过心跳与VM/主机连接 管理口 mgmt,它是用于管理服务器的接口,相当于管理员
系统接口故障点分析:
故障点 可能的故障原因 排除故障 1. 故障点 网口绑定异常 网络异常 排除网络故障 2. 故障点 业务管理接口异常 主机异常 修复主机 存储接口异常 VRM异常 修复VRM

系统接口涉及到底层网络硬件,主机和VRM节点,排除故障时可自顶向下快速定位故障层次,然后再自底向上逐步排除故障点。

案例 —— 删除存储接口路由导致异常:
  1. 收集信息:
    • 删除存储接口路由后,提示存储链路中断,关联虚拟机不能使用
  2. 定位故障:
    • 主机与存储设备通过三层网络连接,主机的存储接口和存储设备的存储IP地址不在同一网段,需要设置静态路由,使存储平面能够互通
  3. 排除故障:
    • 登录主机
    • 为主机存储接口配置静态路由
  4. 检查确认:
    • 告警消失
    • 业务正常

两个虚拟机通信情况分析:

  1. 同主机、同 OVS、同 VLAN
    • 直接通信
  2. 同主机、同 OVS、不同 VLAN
    • 因为OVS是二层,所以不具备路由交换的功能
      需要通过上行接口到三层物理交换机上获取VM2的网关
  3. 不同主机、同 OVS、同 VLAN
    • 由 VM3 经过 主机2 的上行接口,到达三层交换机交换网关,获取路由,然后访问 主机1 的 VM1
  4. 不同主机、不同 OVS、相同 VLAN
    • 一般情况下,无法通信,但通过物理层面例如向两端虚拟机添加 DVS(OVS) 则可以
  5. 不同主机、不同 OVS、不同 VLAN
    • 由VM发出报文,从上行接口出去到达三层交换机获取路由,然后访问 主机1 的 VM1

两个虚拟机不通的原因:

  1. 同主机、同OVS、同VLAN
    • 对端vm ip网段是否为同一网段、对端的防火墙杀入软件没关彻底
      VM或主机异常
  2. 同主机、同OVS、不同VLAN
    • 对端vm ip网段是否为同一网段、对端的防火墙杀入软件没关彻底
      网络连接异常、端口配置异常

存储故障处理

  • 存储资源池故障点
存储资源故障 存储设备故障 数据存储故障 虚拟磁盘故障 ①故障点 不能添加、修改、删除存储资源 扫描不到存储设备 添加、修改、移除数据存储异常 创建、绑定、解绑定、删除虚拟机磁盘异常 ②故障点 不能关联存储资源 关联、解关联主机异常 调整容量异常 ③故障点 数据存储异常 快照异常 ④故障点 迁移异常

存储资源和存储设备故障

存储资源、存储设备故障点分析:
故障点 可能的故障原因 排除故障 1. 故障点 不能添加、修改、删除存储资源 存储网络链路异常 排除存储网络链路故障 2. 故障点 不能关联存储资源 对端存储设备异常 排除对端存储设备故障 3. 故障点 扫描不到存储设备 主机存储接口异常 修复主机存储接口配置 4. 故障点

FusionCompute存储资源、存储设备故障涉及到对端存储设备配置,存储链路,存储接口等,需要逐步排错。

案例——存储资源管理链路中断
  1. 收集信息:
    • FusionCompute上报告警信息:存储资源管理链路中断
  2. 定位故障:
    • 网络异常
    • 存储资源网口故障
  3. 排除故障:
    • 查看故障的存储资源的名称以及故障的存储资源管理IP
    • 登录VRM节点
    • 查看VRM与故障的管理链路的IP能否正常通信
    • 网络排查、修复
  4. 检查确认:
    • 告警消失
    • 业务正常

数据存储故障

数据存储故障点分析:
故障点 可能的故障原因 排除故障 1. 故障点 不能添加、修改、移除数据存储 存储网络故障 排除存储网络故障 2. 故障点 关联、解关联主机异常 虚拟化的本地存储文件系统损坏 修复文件系统损坏 3. 故障点 数据存储异常 对应存储设备损坏 修复磁盘损坏
案例 —— VIMS文件系统损坏:
  1. 收集信息:
    • 共享存储的VIMS文件系统损坏
  2. 定位故障:
    • 系统文件元数据损坏或用户文件元数据损坏
    • 超级块损坏或文件系统根目录损坏
  3. 排除故障:
    • 停止故障存储设备上的业务运行
    • fsck修复只读卷
    • 恢复故障存储设备上的业务运行
  4. 检查确认:
    • 告警消失
    • 业务正常

虚拟磁盘故障

虚拟磁盘故障点分析:
故障点 可能的故障原因 排除故障 1. 故障点 不能创建、绑定、解绑定、删除虚拟磁盘 数据存储异常 修复数据存储 2. 故障点 调整容量异常 磁盘类型限制 更改磁盘类型 3. 故障点 快照异常 磁盘配置模式限制 更改磁盘配置模式 4. 故障点 磁盘迁移异常 虚拟机状态限制 更改虚拟机状态

FusionCompute上的虚拟机,如果绑定的虚拟磁盘出现故障,会影响到业务和数据,故障排除时需提前备份数据。

案例 —— 磁盘无法在线扩容:
  1. 收集信息:
    • 虚拟机磁盘不能在线扩容
  2. 定位故障:
    • 磁盘所属的数据存储类型不支持扩容
    • 磁盘配置模式不支持在线扩容
    • 虚拟机操作系统不支持在线扩容
  3. 排除故障:
    • 迁移磁盘到支持扩容的数据存储上
    • 更改磁盘配置模式
    • 重启虚拟机
  4. 检查确认:
    • 磁盘扩容成功,业务正常

网络故障处理

(云计算)华为HCIP全笔记——FusionCompute篇(六)FC日常维护与故障处理:维护告警、实时监控、备份与恢复策略、存储与网络与虚拟机和模板故障点案例分析(包含VM通信问题处理)..._fusioncompute 发送消息到主机失败。

FusionCompute网络池的故障处理,可以参考该流程顺序进行检查。
网络池可能会涉及到如下关键故障点:

  1. 分布式交换机故障
  2. 上行链路故障
  3. VLAN池故障
  4. 子网故障
  5. 端口组故障

因网络池的各个组件关联紧密,可以统一概括成如下故障:

  1. 虚拟机之间通讯故障
  2. 虚拟机和外部网络通讯故障

虚拟机通信故障

虚拟机之间通讯故障:
故障点 可能的故障原因 排除故障 1. 故障点 同一主机上,虚拟机之间通讯故障 端口配置异常 修复端口组配置 2. 故障点 不同主机上,虚拟机之间通讯故障 分布式交换机配置异常 修复分布式交换机配置 3. 故障点 VALN池配置异常 修复VLAN池配置 4. 故障点 子网配置异常 修复子网配置

虚拟机可能分别属于不同分布式交换机,归属于不同端口组,使用不同上行链路,需要逐一进行故障排除。

案例 —— 两台虚拟机无法通讯:
  1. 收集信息:
    • 同一主机上的两台虚拟机无法通讯
  2. 定位故障:
    • 虚拟机自身网络异常
    • 虚拟机所属的端口不同
    • 虚拟机所属的分布式交换机不同
  3. 排除故障:
    • 修复故障虚拟机自身网络配置
    • 更改故障虚拟机所属端口组
    • 检查所属的分布式交换机
  4. 检查确认:
    • 网络正常,业务正常

虚拟机外部通信故障

虚拟机和外部网络通讯故障:
故障点 可能的故障原因 排除故障 1. 故障点 虚拟机不能访问外部网络 上行链路异常 修复上行链路 2. 故障点 虚拟机访问外部网络慢 主机网络服务异常 修复主机网络服务 3. 故障点 外部交换机配置异常 修复外部交换机配置 4. 故障点 硬件故障 排除硬件故障

虚拟机和外部网络通讯涉及到底层主机、网卡、外部交换机等,需要逐一进行故障排除。

案例 —— 绑定网口后网络不通:
  1. 收集信息:
    • FusionCompute绑定网口后网络不通
  2. 定位故障:
    • 上行链路绑定模式
    • 外部交换机链路汇聚模式
  3. 排除故障:
    • 修改上行链路绑定模式
    • 修改外部交换机端口汇聚模式
  4. 检查确认:
    • 网络正常,业务正常

虚拟机和模板故障处理

虚拟机创建方式

  1. 创建空虚拟机

    • 创建空虚拟机时,可选择创建在主机或集群上,并可自定义CPU、内存、磁盘、网卡等规格。

    • 空虚拟机创建完成后,需要在上面安装操作系统。

  2. 使用模板创建虚拟机

    • 按模板部署虚拟机或模板导入虚拟机时,以下属性继承自模板,其他属性可自定义。
    • 虚拟机的操作系统类型和操作系统版本号
    • 虚拟机磁盘的数量和容量
    • 虚拟机的网卡数
  3. 使用虚拟机创建虚拟机

    • 克隆虚拟机过程中,以下属性继承自原虚拟机,其他属性可自定义。
      • 虚拟机的操作系统类型和操作系统版本号
      • 虚拟机磁盘的数量和容量
      • 虚拟机的网卡数
    • 如果有一个要经常克隆的虚拟机,可以将该虚拟机转换为模板。

虚拟机创建流程

  1. 选择创建位置

    • 集群 或 主机
  2. 设置虚拟机属性

    • 虚拟机名称

    • 操作系统类型、版本号

    • 硬件规格(CPU/内存/磁盘数/网卡数)

    • 虚拟机蓝屏策略

  3. 设置网卡和磁盘

    • 网卡所属的分布式交换机和端口组
    • 磁盘属性
      1. 数据存储
      2. 配置模式
      3. 容量
      4. 是否受快照影响
      5. 持久化
  4. 创建虚拟机

    • 确认信息

FusionCompute三种虚拟机创建方式都需要经过以下四个过程。

  1. 选择创建位置
  2. 设置虚拟机属性
  3. 设置网卡和磁盘
  4. 创建虚拟机

虚拟机创建、调整、回收、操作和虚拟机模板转换、管理等故障都可以参考该流程逐一检查。

虚拟机和模板故障

虚拟机和模板故障分析:
故障点 可能的故障原因 排除故障 1. 故障点 创建、调整、回收虚拟机故障 虚拟机OS不兼容 更换虚拟机OS 2. 故障点 模板转换、部署、导入导出、管理故障 计算资源限制 满足计算资源限制 3. 故障点 网络资源限制 满足网络资源限制 4. 故障点 存储资源限制 满足存储资源限制 5. 故障点 外部共享目录访问异常 修复外部共享目录访问
案例 —— 使用模板部署虚拟机失败:
  1. 收集信息:
    • FusionCompute使用模板部署虚拟机失败
    • 错误提示 “指定 Location 下不存在网络条件满足虚拟机启动的节点”
  2. 定位故障:
    • 待部署虚拟机与模板不在同一集群
  3. 排除故障:
    • 更改虚拟机部署位置到模板同一集群
  4. 检查确认:
    • 部署正常,业务正常

❤️HCIP专栏——前文链接

  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(一)本篇涵盖 云计算概述,谈及虚拟化、云计算的介绍、云服务模式、部署模式的区别和主流云计算技术
  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(二)本篇介绍服务器基础、硬件结构、RAID冗余阵列
  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(三)本篇介绍网卡、华为服务器网卡类型、电源和风扇、服务器关键技术:BIOS、IBMC、BMC、IPMI
  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(四)本篇介绍 存储技术、硬盘类型、存储架构:DAS、SAN、NAS等
  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(五)本篇介绍存储形态、RAID技术特点与工作原理、RAID的常见级别介绍
  • (云计算HCIP)价值8k的上万字学习笔记,考华为云计算HICP的有福啦!HCIP全笔记(六)本篇介绍存储协议,包含:SCSI、iSCSI、FC协议、iFCP协议、FCoE协议;FC协议与TCP协议
  • (云计算HCIP)HCIP全笔记(七)本篇介绍网络技术基础,包含:网关、交换机、路由的介绍,OSI网络参考模型、TCP/IP协议栈、TCP和UDP协议、SSH协议
  • (云计算HCIP)HCIP全笔记(八)本篇介绍网络技术基础,包含:网络交换的流程、交换机原理、VLAN技术、VLAN划分与接口类型、路由原理、路由转发流程、静态路由和默认路由
  • (云计算HCIP)HCIP全笔记(九)本篇介绍操作系统基础,内容包含:操作系统组成、分类和定义,Linux的特性结构和Linux版本分类
  • (云计算HCIP)HCIP全笔记(十)本篇介绍操作系统基础,内容包含:linux命令使用、linux文件相关命令、vim的使用、配置openEuler静态IP地址、设置主机名 等
  • (云计算HCIP)HCIP全笔记(十一)本篇介绍虚拟化技术,内容包含:虚拟化介绍、虚拟化定义、虚拟化重要概念、虚拟机类型、虚拟化的特点:分区、隔离、封装、硬件独立
  • (云计算HCIP)HCIP全笔记(十二)本篇介绍虚拟化技术,内容包含:虚拟化资源、CPU虚拟化、KUMA、KVM介绍、模拟CPU指令、敏感指令区分、内存虚拟化、TLB技术、影子页表技术
  • (云计算HCIP)HCIP全笔记(十三)本篇介绍虚拟化技术,内容包含:虚拟化资源、虚拟化过程、I/O虚拟化、虚拟化架构KVM和Xen介绍、主流虚拟化技术介绍
  • (云计算HCIP)HCIP全笔记(十四)本篇介绍云计算存储基础,内容包含:物理存储内/外存、集中式和分布式存储差异、虚拟化和非虚拟化存储、文件系统、华为虚拟化产品的存储架构
  • (云计算HCIP)HCIP全笔记(十五)本篇介绍网络虚拟化,内容包含:网桥、虚拟交换模型、网络安全策略、安全组、Trunk口、流量走向、端口组…
  • (云计算HCIP)HCIP全笔记(十六)本篇介绍虚拟机VM特性:内存复用、虚拟机克隆、虚拟机快照、NUMA架构、资源迁移、磁盘扩容、HA集群迁移、VNC登录…

😎👉HCIP——Fusioncompute篇

  • (云计算)华为HCIP全笔记——FusionCompute篇(一):介绍华为云FusionSphere的架构组成、虚拟化套件特点,FusionCompute产品介绍
  • (云计算)华为HCIP全笔记——FusionCompute篇(二)FC计算虚拟化:CNA介绍、GPU虚拟化、GPU直通技术、内存复用、NUMA亲和度调度、虚拟机HA、IMC策略…
  • (云计算)华为HCIP全笔记——FusionCompute篇(三)FC存储虚拟化:FC存储虚拟化架构、VIMS心跳与分布式锁、存储热迁移、RDM技术、普通延时置零产品、FC存储类型…
  • (云计算)华为HCIP全笔记——FusionCompute篇(四)FC网络虚拟化:华为分布式交换方案、FC分布式交换机、Trunk口、OVS、DVS与EVS、VNC连接原理、网络QoS…
  • (云计算)华为HCIP全笔记——FusionCompute篇(五)FC虚拟机发放与管理:存储资源介绍、FC磁盘参数、FC安全组管理、虚拟机发放流程、虚拟机管理(回收、调整…)、Tools管理…

💕👉博客专栏

  • Golang专栏-包含基础、Gin、Goam等知识
  • 云原生专栏-包含k8s、docker等知识
  • 从0开始学习云计算-华为HCIP证书
  • JUC专栏-带你快速领悟JUC的知识!
  • JVM专栏-深入Java虚拟机,理解JVM的原理
  • 基于Java研究 数据结构与算法-包含贪心算法、加权图、最短路径算法等知识
  • Docker专栏-上手热门容器技术Docker
  • SpringBoot专栏-学习SpringBoot快速开发后端
  • 项目管理工具的学习-设计技术:Maven、Git、Gradle等相关管理工具
  • JavaSE-全面了解Java基础
  • JS专栏-使用JS作的一部分实例~
  • 使用CSS所作的一部分案例