HDFS部署详解 Hadoop是一个由Apache基金会所开发的分布式系统基础架构,充分利用集群的威力进行高速运算和存储,Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），其中一个组件是HDFS,HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供
文章目录 一、sed工作流程二、命令格式1 处理单个文件的命令格式2 处理多个文件的命令格式 三、支持正则表达式四、sed基本用法1 打印2 搜索替换 -- 这是重点 实际中用的最多 五、sed扩展六、sed命令1 替换命令：s2 追加命令：a3 插入命令：i4 修改命令：c 七、sed常见操作八、多重
环境centos7 1）安装依赖 yum -y install gcc gcc-c++ yum -y install zlib zlib-devel openssl openssl-devel pcre-devel 2）解压 tar xf nginx-1.14.2.tar.gz cd nginx-1.14.2/ 3)添加nginx组，用户 groupadd www useradd www -g www -s /sbin/nologin -M 4)对ngnix进行配置安
首先得确保这些服务器都能ping通否则是无法时间同步的。否则会报错“no server suitable for synchronization found” NTP服务器(上海) ：ntp.api.bz 中国ntp服务器：cn.pool.ntp.org pool.ntp.org 安装NTP客户端： yum -y install ntp 修改时区为Asia： cp /usr/share/zoneinfo/Asia/
1 脚本中的命令 # 查看系统环境变量 echo $PATH # 符号$()作用是命令替换，括号中是命令，可以使用“·”（键盘左上角的字符）代替 # 执行ls -l命令 echo 'Current directory' $(ls -l) # 符号$(())作用是对内容进行计算 # 将变量a和变量b相加 echo $((a+b)) # 符号${}作用是变量
起因： 在内网安装hadoop集群时，集群之间需要时间同步，由于内网状态，所以手动下载rpm包安装ntp rpm -ivh /tmp/ntpdate-4.2.6p5-29.el7.centos.2.x86_64.rpm rpm -ivh /tmp/ntp-4.2.6p5-29.el7.centos.2.x86_64.rpm --force --nodeps 然后启动ntp服务 service ntpd start 报错： /
实验环境 centos7 iptables关闭 selinux关闭 nginx服务器 nginx是个高性能、企业常用的web服务器 apache和nginx相比，nginx的安装、配置、管理等比较方便 lnmp和lamp架构 lnmp -> linux + nginx + mysql + php (主流php开发架构) lamp -> linux + apache + mysql + php nginx的下
1、官网下载nginx 官网下载：http://nginx.org/en/download.html 随便选一个 2、安装依赖 sudo apt-get install gcc zlib1g zlib1g-dev libpcre3-dev openssl libssl-dev 3、解压安装 # 解压缩 tar -zxvf linux-nginx-1.16.6.tar.gz cd nginx-1.16.1/ # 执行配置 ./configure
正则表达式 grep/egrep grep -c：打印符合要求的行数 # grep -c 'halt' /etc/passwd 1 -C：后面跟一个数字，打印符合要求的行及上下两行 # grep -C2 'halt' /etc/passwd sync:x:5:0:sync:/sbin:/bin/sync shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown halt:x:7:0:halt:/sbin:/sbin
>作者：JackTian 来源：公众号「杰哥的IT之旅」 ID：Jake_Internet 原文链接：[Nginx系列教程（一）| 手把手教你在Linux环境下搭建Nginx服务](https://mp.weixin.qq.com/s?__biz=MzAwMjg1NjY3Nw==&mid=2247488784&idx=2&sn=03646237396703c418d4f262ced56041&scene=21#wechat_redirect) 转载请
1.tar命令 tar 命令用于对文件打包压缩或解压，格式为∶tar [选项] [文件]。 打包并压缩文件∶"tar -czvf 压缩包名.tar.gz 文件名" 解压并展开压缩包∶"tar -xzvf 压缩包名.tar.gz" 例如： 将/www.baidu.com目录内文件打包并通过gzip格式压缩： [admin@iz2ze3qtjvut2waqz8moa8z
安装nginx nginx安装包下载地址, 或者直接通过命令行下载到服务器opt文件夹下： wget http://nginx.org/download/nginx-1.20.0.tar.gz 安装依赖： yum -y install gcc zlib zlib-devel pcre-devel openssl openssl-devel yum -y install perl gcc make kernel-headers kernel-de
错误示例 在$HADOOP_HOME/sbin/start-yarn.sh文件中添加root用户的定义 YARN_RESOURCEMANAGER_USER=root HADOOP_SECURE_DN_USER=yarn YARN_NODEMANAGER_USER=root HDFS_NAMENODE_USER=root 说明 master、slave都需要修改start-dfs.sh|stop-dfs.sh|star-yarn.sh|stop-ya
认识linux SHELL和终端 查看shells： cat /etc/shells 查看当前shell ： echo $SHELL linux区分大小写 vim编译器 VM编辑器是所有unix及linux系统下标准的编辑器。 vi/vim编辑器模式 命令模式：刚进入vim的时候，默认就是命令模式，可以复制行，删除行等。 输入模式：可以输入内容 输
目录 一、正则表达式一、基础正则表达式二、扩展正则表达式 二、Linux文本处理工具一、三剑客之grep二、三剑客之sed一、格式二、常用选项及匹配模式三、三剑客之awk一、选项及变量二、格式三、简单实例 一、正则表达式 一、定义 1、正则表达式，又称正规表达式、常规表
文章目录 一、正则表达式概述1. 基础正则表达式2.扩展正则表达式 二、Sed工具概述1.Sed基本语法2.Sed用法示例示例1 删除文件每行第一个字符示例2 删除文件每行里的所有数字示例3 删除test.txt中所有特殊字符示例4 用sed修改ssh服务配置文件，去掉所有以#开头的行和空行，改变
内核启动加载根文件系统后，执行的第一个脚本是init，具体参见内核源码kernel/init/main.c static int __ref kernel_init(void *unused) { ... ... ... if (!try_to_run_init_process("/sbin/init") || !try_to_run_init_process("/etc/init") || !t
1.查看nginx进程 ps -aux | grep nginx 2.测试Nginx配置文件 /usr/local/nginx/sbin/nginx -t
正则表达式基础 准备 (1)alias grep='grep --color=auto' 易于显示 (2)LC_ALL=C，字符集，设置环境变量，字符顺序 基础正则 1)^word 匹配以Word开头的内容 vi/vim 里^代表一行的开头 2)word$ 匹配以Word结尾的内容 vi/vim 里$代表一行的结尾 3)^$ 表示空行 #过滤空行，并
linux常用快捷键 Ctrl + e 切换到命令行末尾 Ctrl + a 切换到命令行前端 Ctrl + c 终止当前命令或脚本 Ctrl + d 退出当前shell，相当于exit，一个个删除光标后字将 Ctrl + l 清除屏幕内容，clear Ctrl + u 清除（剪切）光标之前的内容 Ctrl + k 清除（剪切）光标之后的内容 Ctrl + r 查找 Ta
网上查到的没有主机路由问题提到的大多是防火墙问题： 查看防火墙状态：firewall-cmd --state 关闭防火墙：(需注意的是，必须关闭防火墙自启动，再启动datanode才会正常) centos7： [al@node01 sbin]$ sudo systemctl stop firewalld //关闭防火墙 [al@node01 sbin]$ sudo systemctl sta
在python中可以使用file模块和opne可以打开文件，注意python3中已经不支持file！open(file, mode='r', buffering=-1, encoding=None, errors=None, newline=None, closefd=True, opener=None) ========= ============================================================
安装基本包 yum install gcc-c++ yum install -y pcre pcre-devel yum install -y zlib zlib-devel yum install -y openssl openssl-devel 下载 wget http://nginx.org/download/nginx-1.16.0.tar.gz 解压 tar -zxvf nginx-1.16.0.tar.gz 编译 、安装 cd nginx-1.16.0
文章目录 inittab文件简介inittab文件内容Default RunlevelSystem InitializationTrap CTRL-ALT-DELETEPowerfail ConditionRun Gettys init 0/6 与 shutdown/reoot参考完 inittab文件简介 /etc/inittab文件是Linux初始化系统使用的配置文件，在不同发行版Linux的位置不同，
进程操作相关命令 ps 显示当前系统中由该用户运行的进程列表 kill 输出特定的信号给指定的进程，并根据该信号而完成指定的行为 top 动态显示当前系统中由该用户运行的进程列表 renice 修改一个正在运行的进程的优先级 pstree 列出当前的进程，以及它们的树状结构 ps Linux ps （英
