如何在CentOS 7中安装pgAdmin4(docker安装)

 

获取镜像 首先,获取docker版的pgadmin4。使用命令: 运行docker容器 根据官方文档介绍,需要一些环境变量,针对HTTPS时更多,这里仅介绍两个最重要的(HTTP时仅需要的两个,HTTPS也是必须的)。 PGADMIN_DEFAULT_EMAI … 阅读全文

EFK收集nginx日志无法读取问题

 

问题描述 EFK日志收集系统,通过td-agent(Fluentd组件)收集nginx日志过程中,报无权限读取错误,如下: 解决方法 修改nginx日志生成的权限,修改/etc/logrotate.d/nginx 如下: 重启nginx生效

EFK集群之td-agent部署

 

td-agent安装 适于于Redhat&Centos的安装方式: 测试一下td-agent是否正常工作: td-agent默认被配置为从http获取日志,并将其路由到/var/log/td-agent/td-agent.log文件中 td-agent … 阅读全文

阿里云两台ECS主机flanneld配置

 

概述 阿里云上有两台主机(interface和vpc-test1)没有安装k8s集群,只起了docker服务,要实现两台云主机上的docker容器内网互通,拟通过flanneld和etcd来配置实现。 配置步骤 环境说明: 主机 IP地址 部署服务 inter … 阅读全文

Flannel配置详解

 

1、Flannel简介 Flannel是一种基于overlay网络的跨主机容器网络解决方案,也就是将TCP数据包封装在另一种网络包里面进行路由转发和通信。 Flannel配合etcd可以实现不同宿主机上的docker容器内网IP的互通。 Flannel是Cor … 阅读全文

Hadoop分布式文件系统使用指南

 

目的 本文档的目标是为Hadoop分布式文件系统(HDFS)的用户提供一个学习的起点,这里的HDFS既可以作为Hadoop集群的一部分,也可以作为一个独立的分布式文件系统。虽然HDFS在很多环境下被设计成是可正确工作的,但是了解HDFS的工作原理对在特定集群上 … 阅读全文

Hadoop分布式文件系统:架构和设计

 

引言 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署 … 阅读全文

Hadoop集群搭建

 

目的 本文描述了如何安装、配置和管理有实际意义的Hadoop集群,其规模可从几个节点的小集群到几千个节点的超大集群。 如果你希望在单机上安装Hadoop玩玩,从这里能找到相关细节。 先决条件 确保在你集群中的每个节点上都安装了所有必需软件。 获取Hadoop软 … 阅读全文

Hadoop快速入门(一)

 

目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。 先决条件 支持平台 GNU/Linux是产品开发和运行的平台。 Ha … 阅读全文

spark开发环境配置

 

搭建spark本地环境 java环境安装 (1)到官网下载JDK下载地址:点击这里(2)解压缩到指定的目录 (3)设置路径和环境变量 在文件的最后加上 (4)让配置生效 (5)验证安装是否成功 安装Scala (1)到官网下载安装包点击这里 (2)解压缩到指定 … 阅读全文

docker创建ansible

 

环境 Centos 7.6 Docker version 18.09.6, build 481bc77156 关键点: Dockerfile 编写优化 Docker-compose.yml 编写 ansible-ssh 免密钥登录 … 阅读全文

Oracle数据库SCN存在可能在2019年6月导致宕机问题

 

当前的问题 Oracle日前发布了两个公告在其官网上,简单描述为对应的数据库都需要打上对应的最小补丁,否则在2019年6月的时候可能会导致大范围宕机的情况。 SCN是System Change Number的缩写,是在某个时间点定义数据库已提交版本的时间戳标记 … 阅读全文

k8s 批量删除Evicted pod

 
k8s 批量删除pod

问题描述 之前k8s集群的Node节点磁盘超过90%,触发节点上pod的Evicted(驱赶),但由于pod指定了节点运行,导致产生很多Evicted状态的pod,节点恢复后,失败节点仍然存在。 dashboard 上查看 如何批量删除Evicted pod … 阅读全文

Elasticsearch运维宝典——监控实战篇

 

Elasticsearch(文中简称 ES)是分布式全文搜索引擎,产品提供高可用、易扩展以及近实时的搜索能力,广泛应用于数据存储、搜索和实时分析。很多服务的可用性对 ES 重度依赖。因此,保障 ES 自身可用性,是实现服务高可用的重中之重。 ES监控概述 针对 … 阅读全文

重要的Elasticsearch配置说明

 
elasticsearch配置

虽然Elasticsearch只需要很少的配置,但有许多设置需要手动配置,并且在投入生产之前一定要配置。 path.data 和 path.logs cluster.name node.name bootstrap.memory_lock network.ho … 阅读全文

Docker 容器动态增加映射端口

 

在对已经运行的docker容器动态添加端口映射(expose 端口) 增加宿主机10051->容器20022的端口映射。