Tag-elasticsearch

alpine docker下elasticsearch2.3 以root用户启动

elasticsearch linux Docker alpine 2017-07-19 20:31:27 849

在自己构建elasticsearch的Docker镜像的时候，使用最小化的linux系统alpine遇到不能用root用户启动的问题（也许对alpine不太熟悉，无法使用user相关命令），所以网上搜了些资料，记录及梳理自己的操作步奏

参考文章：http://stackoverflow.com/questions/34920801/how-to-run-elasticsearch-2-1-1-as-root-user-in-linux-machine

临时使用root账号启动

启动命令添加如下语句：

-Des.insecure.allow.root=true

即

bin/elasticsearch -Des.insecure.allow.root=true

默认以root账号启动

或者修改/bin/elasticsearch文件，修改如下语句：

exec "$JAVA" $JAVA_OPTS $ES_JAVA_OPTS -Des.path.home="$ES_HOME" -cp "$ES_CLASSPATH" \

修改为：

exec "$JAVA" $JAVA_OPTS $ES_JAVA_OPTS -Des.path.home="$ES_HOME" -Des.insecure.allow.root=true -cp "$ES_CLASSPATH" \

by 刘迎光@萤火虫工作室
OpenBI交流群：495266201
MicroService 微服务交流群：217722918
mail: liuyg#liuyingguang.cn
博主首页（防止爬虫）：http://blog.liuyingguang.cn
OpenBI问答社区：http://openbi.liuyingguang.cn/

More

构建属于自己的elasticsearch Docker镜像

elasticsearch docker Dockerfile 2017-07-19 20:25:33 983

官方给出的elasticsearch镜像需要做不少的修改，并且个人感觉镜像有点太大，所以萌生了自己做镜像的想法

此Docker镜像基于alpine的jre8镜像（使用alpine的原因就是没有太多不必要的组件和命令，docker内部也不需要太多组件）

所需文件目录及介绍：

# 文件目录介绍

* elasticsearch 目录为build docker镜像必要文件，主要替换elasticsearch启动文件（bin目录，主要是修改以root用户启动，参考文章：http://blog.csdn.net/gsying1474/article/details/51939294）和添加中文分词插件IK（plugins目录，主要添加了中文分词插件，参考文章：http://blog.csdn.net/gsying1474/article/details/51909027）

Dockerfile文件代码：

FROM anapsix/alpine-java:jre8
MAINTAINER firewarm LightingLiu <liuyg@liuyingguang.cn>
ENV ES_PKG_NAME elasticsearch-2.3.3
ADD $ES_PKG_NAME.tar.gz /usr/share/
ADD elasticsearch/ /usr/share/$ES_PKG_NAME/
RUN cd /usr/share/ && \
mv $ES_PKG_NAME elasticsearch && \
chmod +x /usr/share/elasticsearch/bin/*
ENV PATH /usr/share/elasticsearch/bin:$PATH
# Define default command.
CMD ["elasticsearch"]
EXPOSE 9200
EXPOSE 9300

# 此处的Dockerfile解决了如下问题：

1. Docker内部以root启动

2. elasticsearch中文分词插件IK

# build命令

docker build -t firewarm/elasticsearch:2.3.3.1 .

# 镜像使用方式

docker run -v /home/elasticsearch/config:/usr/share/elast

More

CentOS7 安装EFK（elasticsearch、fluent、kibana）进行Docker下日志搜集

CentOS7 EFK docker elasticsearch fluent kibana 日志 2017-07-19 20:11:59 970

Fluentd并非是专用于日志文件收集的，而是一个通用的信息收集、整理、转发的流式数据处理工具，日志收集只是它十分典型的一个运用场景。重要的是，Fluentd的日志收集功能对容器支持十分完备，远远胜于Logstash等传统日志收集工具。一方面得益于Fluentd社区开发了几种专用于Docker日志文件的收集插件，这些插件能够在Fluentd收集完Docker日志以后自动为它加上容器相关的信息，比较推荐其中的fluent-plugin-docker-metadata-filter这一款插件，它提供的信息颇为齐全。Logstash对于这方面依然比较空缺，GitHub上唯一能够找到的一款社区插件也已经在一年前就停止开发。另一方面，当前Docker官方支持的日志驱动除了默认的使用本地目录，还可以直接发送到远程的日志存储或日志采集服务，而其中日志采集服务目前仅仅支持Splunk和Fluentd，同样没有Logstash等老一辈开源日志工具的踪影。

安装elasticsearch

安装JDK或者openJDK（这里以openJDK为例）

[root@elk elk]# yum install java-1.8.0-openjdk -y

安装elasticsearch

[root@elk elk]# wget -c https://download.elastic.co/elasticsearch/release/org/elasticsearch/distribution/rpm/elasticsearch/2.3.3/elasticsearch-2.3.3.rpm
[root@elk elk]# yum localinstall elasticsearch-2.3.3.rpm -y
.....
  Installing : elasticsearch-2.3.3-1.noarch                                                                                             1/1
### NOT starting on installation,

More

CentOS7 安装EFK（elasticsearch、fluent、kibana）

CentOS7 EFK elasticsearch fluent kibana 2017-05-26 13:11:54 1201

Fluentd并非是专用于日志文件收集的，而是一个通用的信息收集、整理、转发的流式数据处理工具，日志收集只是它十分典型的一个运用场景。重要的是，Fluentd的日志收集功能对容器支持十分完备，远远胜于Logstash等传统日志收集工具。一方面得益于Fluentd社区开发了几种专用于Docker日志文件的收集插件，这些插件能够在Fluentd收集完Docker日志以后自动为它加上容器相关的信息，比较推荐其中的fluent-plugin-docker-metadata-filter这一款插件，它提供的信息颇为齐全。Logstash对于这方面依然比较空缺，GitHub上唯一能够找到的一款社区插件也已经在一年前就停止开发。另一方面，当前Docker官方支持的日志驱动除了默认的使用本地目录，还可以直接发送到远程的日志存储或日志采集服务，而其中日志采集服务目前仅仅支持Splunk和Fluentd，同样没有Logstash等老一辈开源日志工具的踪影。

安装elasticsearch

安装JDK或者openJDK（这里以openJDK为例）

[root@elk elk]# yum install java-1.8.0-openjdk -y

安装elasticsearch

[root@elk elk]# wget -c https://download.elastic.co/elasticsearch/release/org/elasticsearch/distribution/rpm/elasticsearch/2.3.3/elasticsearch-2.3.3.rpm
[root@elk elk]# yum localinstall elasticsearch-2.3.3.rpm -y
.....
  Installing : elasticsearch-2.3.3-1.noarch                                                                                             1/1
### NOT starting on installation,

More

Lighting@刘迎光