背景：一个强大的软件产品是由许多不同的组件结合完成的，其中在每一个产品中离不开的就是api系统，api系统在整个产品中居于中枢地位，包括系统内部组件，及客户对产品的对接都要与api打交道，这就需要最大限度的提高api的处理能力，并且防范无效请求，还有黑客的恶意攻击。限流可以在nginx层进行设置，当然在api业务层做更...

安装pipinstallflask-limite使用组件的第二种初始化⽅方式flask-limiter也可以⽣生成⽇日志,⽇日志器器名称为flask-limiter...

测试环境：系统：CentOS7.1Mem:8GCPU:虚拟机16核Python版本：python3.6Flask版本：0.12.2Golang版本：1.6.31.首先写一个Flask的web程序，只返回一个Helloword!fromflaskimportFlask,render_templateapp=Flask(_...

问题说明Logstash用的UTC时间,logstash在按每天输出到elasticsearch时，因为时区使用utc，造成每天8:00才创建当天索引，而8:00以前数据则输出到昨天的索引#使用logstash写入elasticsearch时的配置output{elasticsearch{id=>"logstas...

今天在消费kafka数据到elasticsearch（以下简称es）中的时候遇到一个问题，也是一个坑，折腾了半天，后来发现得来全不费工夫，全是白忙活啊！！！问题如下：kafka数据中有一个字段是时间字符串，格式为：‘2018-05-3116：33:45：234’为了方便以后根据日期检索数据，es...

目录前言动态映射（dynamic：true）静态映射（dynamic：false）严格模式（dynamic：strict）返回主目录回到顶部一般的，mapping则又可以分为动态映射（dynamicmapping）和静态（显示）映射（explicitmapping）和精确（严格）映射（strictmappings），具...

在大数据的应用环境中，往往使用反范式设计来提高读写性能。假设我们有个类似简书的系统，系统里有文章，用户也可以对文章进行赞赏。在关系型数据库中，如果按照数据库范式设计，需要两张表：一张文章表和一张赞赏历史记录表，赞赏历史记录表包括了赞赏者姓名和赞赏金额。在Elasticsearch中，由于都是json格式存储，则可以在一...

一、前言 为什么要在elasticsearch中要使用ik这样的中文分词呢，那是因为es提供的分词是英文分词，对于中文的分词就做的非常不好了，因此我们需要一个中文分词器来用于搜索和使用。二、IK分词器的安装和使用 2.1、安装ik  我们可以从官方github上下载该插件，我们下...

Elasticsearch的mapping一旦创建，只能增加字段，而不能修改已经mapping的字段。但现实往往并非如此啊，有时增加一个字段，就好像打了一个补丁，一个可以，但是越补越多，最后自己都觉得惨不忍睹了。怎么办？？这里有一个方法修改mapping，那就是重新建立一个index，然后创建一个新的mapping。你...

引子：在上一篇文章Elasticsearch入门（一）：CentOS7.6安装ES7.0.0中，我们讲了如何在CentOS7.6环境下安装Elasticsearch7.0。下面，我将讲一讲，如何安装ES必备插件之——elasticsearch-head，并且记录下在安装过程中所遇到的问题，以及我...

修改配置文件elasticsearch.yml，增加http.cors.allow-headers:Authorization访问head时，url如下所示：http://192.168.100.100:9100/?auth_user=elastic&auth_password=changeme...

最近正在学习服务器应用平台的搭建的相关知识。有幸从朋友与书上了解到Elastic套件的使用，我花了两天的时间把最新的套件部署在我的服务器上，中间踩了数不清的坑。我把整个过程都记录了下来与各位有需要的朋友们分享一下。Update经过测试该安装破解方案已兼容Elasticsearch6.4.2至Kibana6.5.1版本环...

December12,2018update:ThisarticlehasbeenpublishedonElastic’swebsiteas: https://www.elastic.co/blog/elasticsearch-security-configure-tls-ssl-pki-authe...

elasticsearch官网建议生产环境需要设置bootstrap.memory_lock:true重新启动elasticsearch，报错信息如下：[baoshan@test-43.dev.rokid-inc.com/home/baoshan/elk/elasticsearch-5.3.0]$bin/elastic...

简单讲ES开箱即用，不用任何配置也能玩转搜索引擎；以下内容是根据易企秀线上实际使用场景进行的安装和配置，支持冷热数据分离1、安装Linux环境下载安装包curl-L-Ohttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.0.0-lin...