包含关键字 elasticsearch 的文章

elasticsearch以及ik分词插件部署及测试

elastic 分词器对比 https://www.cnblogs.com/cjsblog/p/10171695.html分词测试 https://blog.csdn.net/xsdxs/article/details/72853288准备使用ik分词器/usr/local/elasticsearch-6.1.2/bin/elasticsearch-plugin install https...

一步一重天 2020 年 05 月 03 日 暂无评论

python使用多线程快速把大量mysql数据导入elasticsearch

使用python多线程,运行时自定义线程数,自动计算每个线程处理的数据量,连接mysql读取数据,处理成需要的字段入到elasticsearch。运行效果图:10个线程 运行会在这里实时刷新,方便查看每个线程处理到的id数:[root@localhost shw]# python put_album.py {"0": "2105success ",...

一步一重天 2019 年 12 月 28 日 暂无评论

logstash 按周创建Elasticsearch索引

最近做了一个日志收集中心,按月创建的Elasticsearch索引名称,index => "nginx-%{beat[hostname]}-access-%{+YYYY.MM}" 还没到月底,日志6千多万行,服务器顶不住了。于是决定按周创建Elasticsearch索引,在某度半天没找到,只好爬出去找。总算找到了logstash 按周创建Elasticsearch索...

一步一重天 2019 年 12 月 21 日 暂无评论

一次docker elasticsearch启动就Exited的排查

最近总是迁移docker,在不同的vps换来换去,也再一次敲打自己,还是有很多的VPS商家不靠谱的。这次把docker从某不靠谱VPS上迁移到自己的便宜百度云上,发生了由于配置低而导致docker跑不起来的情况。现像为 docker start es 之后 再docker ps -a 一看,已经停止了。通过docker logs es 看到OpenJDK 64-Bit Server VM w...

一步一重天 2019 年 10 月 07 日 暂无评论

centos7 基于docker下的elasticsearch快速部署

yum install -y wget vim #查看当前的源网址 cat /etc/yum.repos.d/CentOS-Base.repo #换成阿里的 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.bak wget -O /etc/yum.repos.d/CentOS-Base.repo h...

一步一重天 2019 年 09 月 16 日 暂无评论

thinkphp5扩展使用sphinx coreseek类,tp5的extend

在thinkphp5中使用sphinx相对比较简单,标准规范的方法自然是把sphinx api文件放到extend中。根据tp5的规范说明#如果你需要在核心之外扩展和使用第三方类库,并且该类库不是通过Composer安装使用,那么可以直接放入应用根目录下面的#extend目录下面,该目录是官方建议的第三方扩展类库目录。 #类的命名规范遵循PSR-2及PSR-4规范,例如,如果有一个扩展类库...

一步一重天 2019 年 02 月 23 日 2 条评论

elasticsearch-6.1.2环境配置调整(20180829)

#内存锁定 config下 vim elasticsearch.yml bootstrap.memory_lock: true #bin下 #最大内存占用 vim elasticsearch export ES_HEAP_SIZE=6g #以下配置esuser是运行es的用户 vim /etc/security/limits.conf esuser soft memlock unlimi...

一步一重天 2018 年 08 月 29 日 暂无评论

elasticsearch-6.1.2 linux安装部署指定非root运行

之前的记录有点混乱 ,今天有这个需求刚好重装安装配置下 。2020新增链接方法,可使用无密码nologin用户直接运行程序, https://www.isres.com/linux/610.html

一步一重天 2018 年 07 月 30 日 暂无评论

Elasticsearch php curl操作类,python创建索引函数

感觉elasticsearch 的 phpclient 没有自己写的curl快,因此封装curl类。<?php /** * Created by PhpStorm. * User: shw * Date: 2017/12/28 * Time: 10:37 */ class Elasticsearch{ private $host = "192.168.0.1...

一步一重天 2018 年 02 月 28 日 暂无评论

Composer -- PHP依赖管理的用法 --安装Elasticsearch php客户端

Composer -- PHP依赖管理的用法安装es的php客户端autoloadcomposer的安装ln -s /usr/local/php/etc/bin/php /usr/bin/php curl -sS https://getcomposer.org/installer | php cp composer.phar /usr/bin/composer #就能直全局接用 compos...

一步一重天 2018 年 02 月 25 日 暂无评论

elastic,xpack,kibana的linux部署与测试

elastic就不多介绍了,一句话,牛逼的数据搜索中间件。以下内容已经过时,太混乱了,重新整理于 https://www.isres.com/linux/117.html安装jdk ,但只能是 9.0https://blog.pucipuci.cn/post/59.htmlwget https://artifacts.elastic.co/downloads/elasticsearch/el...

一步一重天 2018 年 01 月 22 日 暂无评论

python多线程post和插件创建Elasticsearch索引

以下内容已过时,请参考最新博客文章 python使用多线程快速把大量mysql数据导入elasticsearch以下内容已过时,请参考以上最新博客文章 1.基于网络http post#!/usr/bin/python #coding:utf-8 import urllib2 import MySQLdb import threading import sys import re import...

一步一重天 2017 年 12 月 23 日 暂无评论