最新文章

• 服务器 docker实验

  nginx下载nginx镜像 后台方式启动，重命名为nginx01，映射80端口至外部机器的端口3344docker run -d --name nignx01 -p 3344:80 nginx测试是否可以访问（curl localhost:3344）tomcat搜索tomcat镜像下载tomcat镜像启动镜像因为是阉割版，所以需要复制文件访问相应端口即可看到效果docker 可视化docker run -d -p 9000:9000 --restart=always -v /var/run/docker.sock:/var/run/docker.sock --privileged=true portainer/portainer

  2020-09-09 11:43:15 浏览（420） 阅读原文>>

• 服务器 docker常用命令

  docker常用命令docker version 版本信息docker info 系统信息 docker 命令 --help 帮助命令帮助文档地址 https://docs.docker.com/engine/reference/commandline/docker/镜像命令docker images 查看本机的镜像docker search 搜索镜像docker pull 下载镜像（指定版本：docker pull 镜像名:版本）docker rmi 删除镜像（docker rmi -f id）删除全部（docker rmi -f $(docker images -aq)）容器命令新建容器并启动docker run[可选参数] image#参数说明--name="tomcat1" 容器名字-d 后台方式运行-it 使用交互方式运行，进入容器查看内容-p 指定容器端口  -p 8080:8080    -p     ip:主机端口:容器端口    -p    主机端口:容器端口(常用)    -p 容器端口    容器端口-P 随机指定端口-v 主机目录:容器内目录，数据集（卷）挂载，实现持久化和同步操作，可以做数据共享-e 环境配置--name 容器名字示例docker run -d -p 3310:3306 -v /home/mysql/conf:/etc/mysql/conf.d -v /home/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 --NAME root mysql:5.7docker ps 查看运行的镜像     -a查看运行过的镜像    -n=？ 显示最近创建的容器    -q 只显示容器的编号退出容器    exit 直接容器停止并退出    ctrl+ p+ q 不停止退出删除容器    docker rm 容器id，删除指定的容器，不能删除正在运行中的，强行删除rm -f    docker rm -f $(docker ps -aq) #删除所有的容器    docker ps -a -q|xargs docker rm 删除所有的容器启动/停止操作docker start 容器id       启动容器docker restart 容器id   重启docker stop 容器id    停止docker kill 容器id 强制停止其他常用命令后台启动容器docker run -d 镜像名如果没有前台进程，docker发现没有应用，会自动停止查看日志docker logs -f -t --tail 100 容器id查看容器中进程信息docker top 容器id查看镜像中的元数据进入正在运行的容器方式一:docker exec -it 容器id bashShell（进入容器会开启一个新的终端，可以在里面操作，如果从这个容器退出，不会导致容器的停止）方式二:docker attach 容器id（进入正在运行的终端，不会启动新的进程，因为此退出容器终端，不会导致容器的停止）从容器内拷贝文件到主机上docker cp 容器id:容器内部路径 主机目的路径提交副本容器docker commit -m="提交的描述信息" -a="作者" 容器id 目标镜像名:[tag]

  2020-09-07 10:28:54 浏览（785） 阅读原文>>

• 服务器 centos安装docker

  官方文档安装地址 https://docs.docker.com/engine/install/centos/centos系统必须在7以上，否则不支持安装前需要先卸载旧版本$ sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrotate \ docker-logrotate \ docker-engine安装基本需要的东西$ sudo yum install -y yum-utils设置镜像仓库（设置为阿里云的）yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo安装docker$ sudo yum install docker-ce docker-ce-cli containerd.io启动docker$ sudo systemctl start docker使用docker version 判断是否安装成功测试是否启动成功，使用镜像hello world测试sudo docker run hello-world查看已下载的镜像docker images卸载docker1.卸载依赖sudo yum remove docker-ce docker-ce-cli containerd.io2.删除资源sudo rm -rf /var/lib/docker镜像加速由于本人使用腾讯云服务器，则运行命令sudo mkdir -p /etc/dockersudo tee /etc/docker/daemon.json <<-'EOF'{ "registry-mirrors": ["https://mirror.ccs.tencentyun.com"]}EOFsudo systemctl daemon-reloadsudo systemctl restart docker阿里云则改为https://n560le9s.mirror.aliyuncs.com  

  2020-09-04 17:08:25 浏览（650） 阅读原文>>

• 服务器 mongodb还原备份文件和将数据导出

      最近运营叫导数据，问题是有些数据是在mongodb里面的，有些数据是在mysql里面的，由于连接不上正式环境的mongodb，所以需要把正式环境的mongodb的备份数据导入本地，再把查询结果导出来，再导入mysql连接查询，得到最后结果。    以下为windows系统的操作     先下载mongodb的备份文件到本地，主要含有两个文件:PageViewLogMongo.metadata.json和PageViewLogMongo.bson文件。    把备份文件导入到本地mongodb中,打开cmd，进入mongodb的目录下    cd C:\Program Files\MongoDB\Server\4.0\bin    mongorestore.exe -d db_name E:\cshop_mongo_db  注:(db_name)是表名，后面试备份文件的目录    相应的查询语句为:db.PageViewLogMongo.aggregate([ { $match:{ type: "UserVisit", userId:{$ne:null}, timeStr:{$regex:/2019-02-19/}, } }, { $group:{ _id: "$darenId", count: {$sum:1} } }, ]) .forEach( function(document) { print(document._id + "," + document.count ); })    forEach前是查询语句，forEach部分是把查询结果打印出来    把这段代码保存为一份js文件    在mongodb目录下中执行命令    mongo.exe localhost:27017/db_name E:\asd.js > E:\result.csv    (localhost:27017/db_name)对应mongodb的地址/接口/数据库名    (E:\asd.js)对应查询代码的路径文件    (E:\result.csv)对应输出接口的路径和文件名    

  2019-02-22 17:50:18 浏览（1,150） 阅读原文>>

• 服务器 nginx笔记(一)

  一.nginx简述    nginx是一个开源高性能、可靠的http中间件、代理服务。     特点：    1 io多路复用epoll:多个描述符的I/O操作都能在一个线程内并发交替地顺序完成，这就叫I/O多路复用，这里的"复用"指的是复用同一个线程。    io多路复用的实现方式select、poll、epoll    1.1 select    缺点:(1)能够监视文件描述符的数量存在最大限制            (2)线性扫描效率低下    2. epoll模型        (1)每当FD就绪，采用系统的回调函数之间将FD放入，效率更高        (2)最大连接无限制

  2019-01-17 15:20:35 浏览（966） 阅读原文>>

• 服务器 zookeeper客户端的使用

  常用的zk java客户端一.zookeeper原生api 不足之处1.超时重连，不支持自动，需要手动操作；2.watcher注册一次后会失效，每次触发之后都需要重新进行注册；3.不支持递归创建删除节点；4.异常处理繁琐，Zookeeper提供了很多异常，对于开发人员来说可能根本不知道该如何处理这些异常信息；5.只提供了简单的byte[]数组的接口，没有提供针对对象级别的序列化；6.创建节点时如果节点存在抛出异常，需要自行检查节点是否存在；二.zkclient不足之处1.几乎没有参考文档；2.异常处理简化（抛出RuntimeException）；3.重试机制比较难用；4,没有提供各种使用场景的实现；三.curator优势解决连接重连、反复注册Watcher和NodeExistsException异常等；api简单易用，提供了一套易用性和可读性更强的Fluent风格的客户端API框架；提供更多解决方案并且实现，比如 共享锁服务、Master选举机制和分布式计算器  ；提供常用的zookeeper工具类；编程风格优雅；

  2018-11-22 11:41:12 浏览（889） 阅读原文>>

• 服务器 zookeeper acl命令

  前言 acl(access control lists)权限控制针对节点可以设置相关读写等权限，从而保障数据的安全性权限permission可以指定不同的权限范围以及角色acl命令行通过客户端help命令，我们可以看到关于acl的一些命令getAcl获取某个节点的acl权限信息setAcl设置某个节点的acl权限信息addauth:输入认证授权信息，注册时输入明文账号密码，但是在zookeeper系统里，密码都是以加密形式存在的acl的构成zookeeper的acl通过[scheme:id:permissions]来构成权限列表(scheme:代表某种权限机制,id:代表允许访问的用户，permissions:权限组合字符串)world:world下只有一个id，即只有一个用户，也就是anyone，那么组合的写法就是world:anyone[permissions]auth:代表认证登录，需要注册用户有权限即可，形式为auth:user:password:[permissions]digest:需要对密码加密才能访问，形式为:digest:username:BASE64(SHA1(password)):[permissions]简而言之，auth和digest的区别就在于，前者明文，后者密文 setAcl /path auth:lee:lee:cdrwa与setAcl /path digest:lee:BASE64(SHA1(password))cdrwa是等价的，在通过addauth digest lee:lee 后都能操作指定节点的权限ip:当设置为ip指定的ip地址，此时显示ip进行访问，比如ip:192.169.1.1[permissions]super:代表超级管理员，拥有所有权限权限字符串缩写crdwacreate 创建子节点read 获取节点/子节点write设置节点数据delete删除子节点admin设置权限命令world:anyone:cdrwa图中我们把/lin的delete权限去掉，创建子节点，尝试删除它，可以看到删除失败，值得注意的是，但是我们是可以删除/lin的,只能控制子节点auth:user:pwd:cdrwa第一次添加失败是因为我们没有加上用户，所以我们要把用户添加才能进行该设置权限的操作（备注合理）虽然我们再次进行设置，但是我们发现用户密码还是没有变，还是按照第一个来digest:user:BASE64(SHA1(pwa)):cdrwa我们通过设置密文的权限我们发现退出后无法访问，通过明文密码登录才能进行操作addauth digest user:pwaip:192.168.1.1:cdrwa接下来我们讲最后一种:super，步骤如下1.修改zkServer.sh增加super管理员2.重启zkServer.sh通过操作我们可以发现，/lin是没有访问权限的，但是用管理员账号登录后就可以操作了ACL的常用使用场景开发/测试环境分离，开发者无权操作测试库的节点，只能查看生产环境上控制指定ip的服务可以访问相关节点，防止混乱

  2018-08-31 16:50:07 浏览（1,885） 阅读原文>>

• 服务器 基于Linux的zookeeper客户端命令

  前言       之前我们已经通过“初探zookeeper“一文，对它有了初步的了解，这一节让我们更深入了解一下。      注：作者运行环境是centos，其实跟linux命令差别也没多大。基本操作首先我们进入zookeeper目录 cd /usr/local/zookeeper进入bin目录 cd bin重新启动zookeeper zkServer.sh restart打开zookeeper客户端 zkCli.shls+节点，可以看到该节点下有哪些节点stat+节点，可以看到节点的基本信息ls2+节点，就可以看到该节点下的节点和节点的一些基本信息,可以说ls2是ls和stat的合成体get+节点，可以看到该节点下存储的数据（当前为空）接下来我们解释一下这些基本信息的含义：cZxid 是创建之后分配的idctime 节点创建时间mZxid 修改时分配的idmtime 修改时的时间pZxid 子节点的idcversion 节点的版本号dataversion 当前节点数据的版本号aclVersion 权限版本号ephemeralOwner 判断是节点类型 0x0是永久节点dataLength 数据长度numChildren 下面子节点数量create创建临时节点只需要加参数 -e重启后发现temp消失了创建有序节点 -sset命令用来设置值通过get命令可以看到/lin下的数据参数如果我们执行就会报版本不一致的错误，这时我们只要输入正确的version才会执行成功，相应的version也会累加一通过get就可以看到设置值已经成功delete命令，不用说大家也都知道了，就是删除节点需要注意的是，如果节点有子节点会删除失败watcher机制针对每一个节点的操作都会有一个监督者->watcher当监控的某个对象(znode)发生变化时，则触发watcher事件zk中的watcher是一次性的，触发后就销毁父节点子节点增删改都能触发其watcher事件不同类型的操作，触发watcher事件也不同通过help命令，我们看到部分命令都有watch命令watch事件类型创建父节点触发：nodeCreated  修改父节点数据触发：nodeDataChanged删除父节点触发：nodeDeletedls为父节点设置watcher，创建删除子节点都触发nodeChildrenChanded事件，修改子节点不会触发事件说明：因为触发后就会销毁，所以每次触发完后都必须再设置watch事件watcher使用场景：统一资源配置（不同服务器统一配置）

  2018-08-30 17:58:21 浏览（1,976） 阅读原文>>

• 服务器 初探zookeeper

  前言         由于公司项目每次运行前都要启动zookeeper，之前并不太深入了解这个东西，所以就学习了一下，并记录下来。zookeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。来源于百度介绍，想了解更多可以自行搜索。下面进入正题。安装配置首先登陆官网 http://zookeeper.apache.org/点击调到下载页面我是下载历史版本-3.4.11版本然后把zookeeper-3.4.11.tar.gz上传至/home目录下进入该路径 cd /home解压  tar -zxvf  zookeeper-3.4.11.tar.gz重命名 mv zookeeper-3.4.11 zookeeper移动到/usr/local目录 mv zookeeper /usr/local配置zookeeper环境，修改/etc/profile文件添加内容备注：需要安装配置jdk目录介绍首先我们进入zookeeper目录cd /usr/local/zookeeper查看目录ll1.bin目录主要是一些运行命令进入bin目录cd bin.cmd主要是windows下的可执行命令，.sh是Linux下的命令2.conf存放配置文件具体设置内容tickTime 用于计算时间的单元，比如session超时:H*tickTimeinitLimit 用于集群，允许从节点链接并同步到master节点的初始化链接时间,以tickTime的倍数来表示syncLimit 用于集群,master主节点与从节点之间发送消息，请求和应答时间长度（心跳机制）dataDir 存放数据目录（必须配置）；dataLogDri 日志目录。如果不配置就会与dataDir共用clientPort 链接服务器的端口3.contrib附加的一些功能4.dist-maven mvn编译后的目录5.doc 文档打开index文件就可以看到详细文档6.lib需要依赖的jar包7.recipes案例demo代码8.src源码zoo.cfg配置详细tickTime 用于计算时间的单元，比如session超时:H*tickTimeinitLimit 用于集群，允许从节点链接并同步到master节点的初始化链接时间,以tickTime的倍数来表示syncLimit 用于集群,master主节点与从节点之间发送消息，请求和应答时间长度（心跳机制）dataDir 存放数据目录（必须配置）；dataLogDri 日志目录。如果不配置就会与dataDir共用clientPort 链接服务器的端口zookeeper基本数据模型1.树形结构2.每一个节点都成为znode,可以有子节点，也可以有数据3.每个节点分为临时节点和永久节点，临时节点在客户端断开后消失4.每一个zk节点都有各自的版本号，可以通过命令行来显示节点信息5.每当节点数据发生变化，那么该节点的版本号会累加（乐观锁）6.删除/修改过时节点，版本号不匹配会报错7.每个zk节点存储的数据不宜过大，几k即可8.节点可以设置权限ACL，可以通过权限来限制用户的访问zookeeper作用体现1.master节点选举，主节点挂了以后，从节点就会接受工作，并且保证这个节点是唯一的，这就是所谓的首脑模式，从而保证我们的集群是搞可用的2.统一的配置文件管理，即只需要部署一台服务器，则可以把相同配置文件同步到其他的服务器，此操作在云计算中用的比较多（比如统一修改redis配置）3.发布与订阅，类似消息队列MQ，dubbo发布者把数据存在node上，订阅者会读取这些信息4.提供分布式锁，分布式环境中不同进程之间争夺资源，类似多线程的锁5.集群管理，集群中保证数据的强一致性zookeeper特性-session基本原理客户端与服务端之间存在会话每个回话都可以设置超时时间心跳介绍，session过期session过期，临时节点node会被抛弃心跳机制，客户端会向服务端发送ping包请求单机版进入配置文件cd /usr/local/zookeeper/conf复制一份配置文件cp zoo_samle.cfg zoo.cfg修改zoo.cfgdataDir=/usr/local/zookeeper/dataDirdataLogDir=/usr/local/zookeeper/dataDirLog在该目录下创建这两个目录mkdir dataDirmkdir dataLogDir进入bin目录执行./zkServer.sh start启动其他命令：status可查看状态restart重启stop停止这个时候我们已经启动了让我们来连接客户端，看看里面的内容输入help，我们就可以看到相关的指令我们可以输入ls+节点名就可以看到相关节点下的内容如果我们需要退出客户端，只需要按ctrl+c就可以退出，输入pwd就可以看到当前所在的文件下（持续优化更新）

  2018-08-29 22:32:06 浏览（1,897） 阅读原文>>

• 服务器 centos安装mariadb

  由于数据库有一下比较新的东西，所以要安装一下新版本的数据库 原计划是安装mysql的，由于各种原因就决定安装mysql的另一个分支mariadb了首先新增/修改这个文件""  '' /etc/yum.repos.d/MariaDB.repo往里面写入内容[mariadb]name = MariaDBbaseurl = http://mirrors.aliyun.com/mariadb/yum/10.3/centos7-amd64/gpgkey = http://mirrors.aliyun.com/mariadb/yum/RPM-GPG-KEY-MariaDBgpgcheck = 1由于我比较想省事吧，就用工具直接打开这个文件，复制保存就行了然后运行安装命令yum -y install MariaDB-server MariaDB-client等一会安装完后再启动systemctl start mariadb开机启动systemctl enable mariadb然后是初始化设置mysql_secure_installation接下来是初始化设置了，复制粘贴一下网上的首先是设置密码，会提示先输入密码Enter current password for root (enter for none):<–初次运行直接回车设置密码Set root password? [Y/n] <– 是否设置root用户密码，输入y并回车或直接回车New password: <– 设置root用户的密码Re-enter new password: <– 再输入一次你设置的密码其他配置Remove anonymous users? [Y/n] <– 是否删除匿名用户，回车Disallow root login remotely? [Y/n] <–是否禁止root远程登录,回车,Remove test database and access to it? [Y/n] <– 是否删除test数据库，回车Reload privilege tables now? [Y/n] <– 是否重新加载权限表，回车初始化MariaDB完成，接下来测试登录mysql -uroot -ppassword完成。附上一些用户配置创建用户命令mysql>create user username@localhost identified by 'password';直接创建用户并授权的命令mysql>grant all on *.* to username@localhost indentified by 'password';授予外网登陆权限 mysql>grant all privileges on *.* to username@'%' identified by 'password';授予权限并且可以授权mysql>grant all privileges on *.* to username@'hostname' identified by 'password' with grant option;后记：其实大部分设置都可以用Navicat去完成。

  2018-08-27 15:28:35 浏览（2,100） 阅读原文>>