部署一台大容量后端存储节点
采用nfs共享镜像池
结合linux硬链接技术
结合openstack hash值镜像ID生成代码
优点:快速启动、镜像备份、适合快速开发测试私有云环境
难点:环境要稳定、快速孵化、网络带宽、计算资源、存储资源要足
注析:
1、`/var/lib/nova/instances`目录是计算节点虚拟机文件目录
2、`/var/lib/nova/instance/_base`下面是存在的cache,这个本质是镜像,只是权限和宿舍用户不一样而已,同时,我们可以通过ln硬链接生成放在这个目录下,`_base`目录下的文件不能丢失,否则依赖cache创建的虚拟机将无法启动,如果想要重新使用这个虚拟机就需要将cache重新放回到目录下并在对于的计算节点执行如下命令:`nova restet-state --active error-vm-id`。如果删除了原来的镜像需要定期清理ln,防止撑爆磁盘!
3、`/var/lib/glance/images`是控制节点上存镜像的目录
如果要孵化一个很大的虚拟机(孵化时间长容易造成孵化失败),在dashboard创建的话速度会很慢(首次创建很慢)
查看流量的工具nload
使用命令:nload 查看流量
如果在生产环境中我们可以预先把镜像的ln(镜像ID值)移动到`/var/lib/nova/instances/_base`下,再创建虚拟机的时候会非常快,快的原因是不需要再下载虚拟机镜像了
总结:
0、nfs-backend节点 install build 网卡最好万兆
1、每个计算节点`/var/lib/nova/instance/_base` 都要预先有`image cache(ln硬链接生成的)`
2、`/var/lib/glance/images ---ln---> /var/lib/glance/imagecache` 这两个目录是在一个`nfs-backend`节点上的,而且都是一个文件系统下的
3、定时,自动,无缝隙(间隔时间要非常小) 做ln,写脚本:python脚本
脚本代码如下:
```
import os
import logging
import logging.handlers
import hashlib
import commands
LOG_FILE = ‘ln_all_images.log’
handler = logging.handlers.RotatingFileHandler(LOG_FILE, maxBytes = 1024*1024, backupCount = 5)
fmt = '%(asctime)s - %(filename)s:%(lineno)s - %(name)s - %(message)s'
formatter = logging.Formatter(fmt)
handler.setFormatter(formatter)
logger = logging.getLogger('images')
logger.addHandler(handler)
logger.setLevel(logging.DEBUG)
#imges_list = commands.getoutput("ls -l tr /var/lib/glance/images | awk 'NR>1{ print $NF }‘").strip().split('\n')
imges_list = commands.getoutput("""glance image-list | awk -F"|" '{print $2}' |grep -v -E '(ID|^$'""").strip().split()
status = commands.getoutput("""openstack image list | awk 'NR>2{ print $6} |grep -v -E '(ID|^$'""").strip().split()
queued = "queued"
saving = "saving"
#print status
#print type(staus)
if queued in status or saving in stauts:
image_list_1 = commands.getoutput(ls -l tr /var/lib/glance/images | awk 'NR>1 {1[NR]=$0} END {for (i=1;i<=NR-3;i++)print l[i]}' | awk '{print $9}' | awk '{ print $9}' |grep -v ^$").strip().split()
logger.info('new snapshoot is creating now...')
for ida in image_list_1:
image_id = ida.strip()
image_id_hash = hashlib.sha1()
image_id_hash.update(ida)
newid1 = image_id_hash.hexdigest()
commands.getoutput('ln /var/lib/glance/images/{0} /var/lib/glance/imagecache/{1}'.format(ida,newid1))
commands.getoutput('chown qemu:qemu /var/lib/glance/imagecache/{0}'.format(newid1))
commands.getoutput('chmod 644 /var/lib/glance/imagecache/{0}').format(newid1))
else:
image_list_2 = commands.getoutput("ls -l tr /var/lib/glance/images | awk 'NR>1{ print $NF }'").strip().split()
logger.info('no image take snapshoot, ln all images...')
for ida in image_list_2:
image_id = ida.strip()
image_id_hash = hashlib.sha1()
image_id_hash.update(ida)
newid2 = image_id_hash.hexdigest()
commands.getoutput('ln /var/lib/glance/images/{0} /var/lib/glance/imagecache/{1}'.format(ida,newid2))
commands.getoutput('chown qemu:qemu /var/lib/glance/imagecache/{0}'.format(newid2))
commands.getoutput('chmod 644 /var/lib/glance/imagecache/{0}').format(newid2))
#logger.info('in %s successful...' %(idb))
```
4、定时可以通过linux的crontab,自动用脚本`ln_all_images.py`,无缝隙定时执行,每10秒执行一次`* * * * * sleep 10`;
```
* * * * * source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
* * * * * sleep 10; source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
* * * * * sleep 20; source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
* * * * * sleep 30; source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
* * * * * sleep 40; source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
* * * * * sleep 50; source /root/admin-openrc && /usr/bin/python /root/ln_all_images.py
```
- 献给我的朋友们
- 一、个人对学习的看法
- 二、运维技能图谱
- 三、运维常用技能
- 3.1 Vim(最好用的编辑器)
- 3.2 Nginx & Tengine(Web服务)
- 1. Nginx介绍和部署
- 2. Nginx配置解析
- 3. Nginx常用模块
- 4. Nginx 的session 一致性问题
- 3.3 Tomcat(Web中间件)
- 3.4 Keepalived(负载均衡高可用)
- 3.5 Memcache(分布式缓存)
- 3.6 Zookeeper(分布式协调系统)
- 3.7 KVM(开源虚拟化)
- 1. 虚拟化介绍
- 2. KVM基础
- 3. 设置VNC和时间同步
- 4. kvm虚拟机快照备份
- 5. kvm虚拟机在线扩展磁盘
- 6. kvm虚拟机静态迁移
- 7. kvm虚拟机动态迁移
- 8. kvm虚拟机存储池配置
- 9. cpu添加虚拟化功能
- 3.8 GitLab(版本控制)
- 3.8.1 GitLab安装与汉化
- 3.9 Jenkins(运维自动化)
- 3.10 WAF(Web防火墙)
- 3.10.1初探WAF
- 四、常用数据库
- 4.1 MySQL(关系型数据库)
- 1. MySQL源码安装
- 4.2 Mongodb(适用与大数据分析的数据库)
- 4.3 Redis(非关系数据库)
- 五、自动化运维工具
- 5.1 Cobbler(系统自动化部署)
- 5.2 Ansible(自动化部署)
- 5.3 Puppet(自动化部署)
- 5.4 SaltStack(自动化运维)
- 六、存储
- 6.1 GFS(文件型存储)
- 6.2 Ceph(后端存储)
- 七、运维监控工具
- 7.1 对监控的理解
- 7.2 Zabbix(运维监控)
- 7.2.1 Zabbix简介
- 7.2.2 Zabbix服务部署
- 1. Zabbix服务端部署
- 2. Zabbix客服端部署
- 3. 配置前端展示
- 4. zabbix告警配置
- 7.2.3 Zabbix监控服务
- 1. 监控网络设备
- 2. 自定义Nginx监控
- 7.3 云镜(安全监控)
- 7.4 ELK(日志收集展示)
- 八、运维云平台
- 8.1 OpenStack(开源云操作系统)
- 8.1.1 OpenStack简介
- 8.1.2 实验架构设计
- 8.1.3 集群环境准备
- 8.1.4 controller节点部署
- 1. 安装Mariadb Galera Cluster集群
- 2. 安装RabbitMQ Cluster集群
- 3. 安装Pacemaker
- 4. 安装HAProxy
- 5. 安装配置Keystone
- 6. 安装配置glance
- 1. 制作镜像模板
- 7. 安装配置nova
- 8. 安装配置neutron
- 1. 配置虚拟机网络
- 9. 安装Dashboard
- 10. 安装配置cinder
- 8.1.5 compute节点部署
- 1. 安装相关软件包
- 2. 安装Neutron
- 3. 配置cinder
- 4. 创建第一个虚拟机
- 8.1.6 OpenStack报错处理
- 1. cinder僵尸卷删除
- 8.1.7 快速孵化虚拟机方案
- 8.1.8 Kolla容器化部署OpenStack
- 1. 单点部署
- 2. 多节点部署
- 8.2 Tstack(腾讯云平台)
- 8.3 K8s(微服务容器化)
- 九、运维编程技能
- 9.1 Shell(运维必会语言)
- 9.2 Python(万能的胶水语言)
- 十、Devops运维
- 10.1 理念
- 10.2 Devops实战