利用LXCFS提升容器资源可见性

2020-02-26 22:00:15 阅读：343 来源： 互联网

标签：容器 x86 可见 var LXCFS proc el7 lxcfs

1.技术背景;

Linuxs利用Cgroup实现了对容器的资源限制，但在容器内部依然缺省挂载了宿主机上的procfs的/proc目录，其包含如：meminfo, cpuinfo，stat， uptime等资源信息。一些监控工具如free/top或遗留应用还依赖上述文件内容获取资源配置和使用情况。当它们在容器中运行时，就会把宿主机的资源状态读取出来，引起错误和不便。

2.LXCFS简介

CNCF社区中常见的做法是利用 lxcfs来提供容器中的资源可见性。lxcfs 是一个开源的FUSE（用户态文件系统）实现来支持LXC容器，它也可以支持Docker容器。

githup网站:https://github.com/lxc/lxcfs

LXCFS通过用户态文件系统，在容器中提供下列 procfs 的文件。

/proc/cpuinfo
/proc/diskstats
/proc/meminfo
/proc/stat
/proc/swaps
/proc/uptime

3.LXCFS工作示意图:

比如，把宿主机的 /var/lib/lxcfs/proc/memoinfo 文件挂载到Docker容器的/proc/meminfo位置后。容器中进程读取相应文件内容时，LXCFS的FUSE实现会从容器对应的Cgroup中读取正确的内存限制。从而使得应用获得正确的资源约束设定

4.Docker 实战提升容器资源可见性;

注：

本文采用CentOS 7.2 作为测试环境，并已经开启FUSE模块支持。

fuse用途:

传统的文件系统是操作系统的一部分，放在操作系统内核里面实现。Fuse(Filesystem in Userspace), 一个用户空间文件系统框架，提供给我们一组用于实现一个文件系统的API，使我们可以在用户态实现自已的文件系统。

Docker for Mac/Minikube等开发环境由于采用高度剪裁过的操作系统，无法支持FUSE，并运行LXCFS进行测试。
安装 lxcfs 的RPM包

4.1.环境信息:

系统版本	内核版本	软件依赖	软件版本	备注说明
CentOS Linux 7.2.151	3.10.0-1062.4.1.el7.x86_64	fuse-libs fuse fuse-devel	fuse-devel-2.9.2-7.el7.x86_64 fuse-libs-2.9.2-7.el7.x86_64 fuse-2.9.2-7.el7.x86_64	用户态实现自已的文件系统。
		docker	docker-1.13.1-102.git7f2769b.el7.centos.x86_64	docker服务
		lxcfs	lxcfs-3.1.2-0.2.el7.x86_64.rpm	LXCFS主程序软件包

4.2 安装依赖获取软件包并启动服务

yum -y install fuse-devel fuse docker lxc-templates 
wget https://copr-be.cloud.fedoraproject.org/results/ganto/lxc3/epel-7-x86_64/01041891-lxcfs/lxcfs-3.1.2-0.2.el7.x86_64.rpm
rpm -ivh lxcfs-3.1.2-0.2.el7.x86_64.rpm
systemctl start docker
lxcfs /var/lib/lxcfs &

4.3 运行docker 测试镜像

docker run -itd -m 256m \    
-v /var/lib/lxcfs/proc/cpuinfo:/proc/cpuinfo:rw \
-v /var/lib/lxcfs/proc/diskstats:/proc/diskstats:rw \
-v /var/lib/lxcfs/proc/meminfo:/proc/meminfo:rw \
-v /var/lib/lxcfs/proc/stat:/proc/stat:rw \
-v /var/lib/lxcfs/proc/swaps:/proc/swaps:rw \   
-v /var/lib/lxcfs/proc/uptime:/proc/uptime:rw  \  
ubuntu:16.04 /bin/bash

注意:

container_linux.go:247: starting container process caused "process_linux.go:258: applying cgroup configuration for process caused \"Cannot set property TasksAccounting, or unknown property.\""/usr/bin/docker-current: Error response from daemon: oci runtime error: container_linux.go:247: starting container process caused "process_linux.go:258: applying cgroup configuration for process caused \"Cannot set property TasksAccounting, or unknown property.\"".

解决：主要原因还是centos系统版本兼容性问题，如果将系统做更新升级

yum update

4.4 查询实验结果;

(1).设置过lxcfs 容器和设置lxcfs 对比内存对比

(2).未进行设置容器;

(1).设置过lxcfs 容器和设置lxcfs 对比 uptime 对比;

5.Kubernetes 实战提升容器资源可见性;

一些同学问过如何在Kubernetes集群环境中使用lxcfs，我们将给大家一个示例方法供参考。

首先我们要在集群节点上安装并启动lxcfs，我们将用Kubernetes的方式，用利用容器和DaemonSet方式来运行 lxcfs FUSE文件系统。

通过Github上获得

git clone https://github.com/denverdino/lxcfs-initializer
cd lxcfs-initializer

标签：容器,x86,可见,var,LXCFS,proc,el7,lxcfs
来源： https://blog.51cto.com/breaklinux/2473877

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

利用LXCFS提升容器资源可见性