问题说明Logstash用的UTC时间,logstash在按每天输出到elasticsearch时，因为时区使用utc，造成每天8:00才创建当天索引，而8:00以前数据则输出到昨天的索引#使用logstash写入elasticsearch时的配置output{elasticsearch{id=>"logstas...

今天在消费kafka数据到elasticsearch（以下简称es）中的时候遇到一个问题，也是一个坑，折腾了半天，后来发现得来全不费工夫，全是白忙活啊！！！问题如下：kafka数据中有一个字段是时间字符串，格式为：‘2018-05-3116：33:45：234’为了方便以后根据日期检索数据，es...

目录前言动态映射（dynamic：true）静态映射（dynamic：false）严格模式（dynamic：strict）返回主目录回到顶部一般的，mapping则又可以分为动态映射（dynamicmapping）和静态（显示）映射（explicitmapping）和精确（严格）映射（strictmappings），具...

在大数据的应用环境中，往往使用反范式设计来提高读写性能。假设我们有个类似简书的系统，系统里有文章，用户也可以对文章进行赞赏。在关系型数据库中，如果按照数据库范式设计，需要两张表：一张文章表和一张赞赏历史记录表，赞赏历史记录表包括了赞赏者姓名和赞赏金额。在Elasticsearch中，由于都是json格式存储，则可以在一...

一、前言 为什么要在elasticsearch中要使用ik这样的中文分词呢，那是因为es提供的分词是英文分词，对于中文的分词就做的非常不好了，因此我们需要一个中文分词器来用于搜索和使用。二、IK分词器的安装和使用 2.1、安装ik  我们可以从官方github上下载该插件，我们下...

Elasticsearch的mapping一旦创建，只能增加字段，而不能修改已经mapping的字段。但现实往往并非如此啊，有时增加一个字段，就好像打了一个补丁，一个可以，但是越补越多，最后自己都觉得惨不忍睹了。怎么办？？这里有一个方法修改mapping，那就是重新建立一个index，然后创建一个新的mapping。你...

引子：在上一篇文章Elasticsearch入门（一）：CentOS7.6安装ES7.0.0中，我们讲了如何在CentOS7.6环境下安装Elasticsearch7.0。下面，我将讲一讲，如何安装ES必备插件之——elasticsearch-head，并且记录下在安装过程中所遇到的问题，以及我...

修改配置文件elasticsearch.yml，增加http.cors.allow-headers:Authorization访问head时，url如下所示：http://192.168.100.100:9100/?auth_user=elastic&auth_password=changeme...

最近正在学习服务器应用平台的搭建的相关知识。有幸从朋友与书上了解到Elastic套件的使用，我花了两天的时间把最新的套件部署在我的服务器上，中间踩了数不清的坑。我把整个过程都记录了下来与各位有需要的朋友们分享一下。Update经过测试该安装破解方案已兼容Elasticsearch6.4.2至Kibana6.5.1版本环...

December12,2018update:ThisarticlehasbeenpublishedonElastic’swebsiteas: https://www.elastic.co/blog/elasticsearch-security-configure-tls-ssl-pki-authe...

elasticsearch官网建议生产环境需要设置bootstrap.memory_lock:true重新启动elasticsearch，报错信息如下：[baoshan@test-43.dev.rokid-inc.com/home/baoshan/elk/elasticsearch-5.3.0]$bin/elastic...

简单讲ES开箱即用，不用任何配置也能玩转搜索引擎；以下内容是根据易企秀线上实际使用场景进行的安装和配置，支持冷热数据分离1、安装Linux环境下载安装包curl-L-Ohttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.0.0-lin...

说起来甚是惭愧，博主在写这篇文章的时候，还没有系统性的学习一下ES，只知道可以拿来做全文检索，功能很牛逼，但是接到了任务不想做也不行，leader让我搭建一下分布式的ES集群环境，用来支持企业信用数据的检索，刚开始宝宝一脸蒙逼，只是之前自己本地搭建过一个测试玩过，开发任务也是忙的不行，一直也没时间好好的研究一下，惭愧。...

平台： CentOS类型： 虚拟机镜像软件包： elasticsearch-2.3applicationserver basicsoftware bigdata elasticsearch open-source restful ...

logstash.confinput{#Fordetailconfigforlog4jasinput,#See:https://www.elastic.co/guide/en/logstash/file{type=>"log"#log名path=>"/home/wwwlogs/a.log"#log路径}}f...