下载APP
关闭
讲堂
前端训练营
极客商城
客户端下载
兑换中心
企业版
渠道合作
推荐作者

提示信息

字幕
    倍速
      清晰度
        音轨

          Elasticsearch核心技术与实战

          视频课程 约1000分钟
           写留言

          精选留言(49)

          • 老男孩
            2019-07-02
            老师,建议以后加一节java整合es的课
            展开

            作者回复: 好的,记下这个需求了。之前没有这方面的计划。目前有收到2位同学提出这方面的需要了。

            7
            33
          • .两个调味罐
            2019-07-01
            老师,课后面会教怎么和java或者springboot整合吗?
            展开

            作者回复: 暂时没有这个计划。如果有很多同学有这个需求,我可以➕一节

            5
            21
          • 王俊杰
            2019-07-02
            老师,建议以后加一节java整合es的课
            展开

            作者回复: 👌

            1
            11
          • 施小江
            2019-07-01
            老师,你好,能不能保持每天或者隔天更新一到两集,这样可以保持一个学习的习惯。
            展开

            作者回复: 具体的更新节奏,编辑同学会有所控制,已经录制了一部分课程

            7
          • 天琪
            2019-07-01
            ik分析器安装:
            bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.1.0/elasticsearch-analysis-ik-7.1.0.zip

            kibana 演示:

            POST _analyze
            {
              "analyzer": "ik_smart",
              "text": "中华人民共和国国歌"
            }

            POST _analyze
            {
              "analyzer": "ik_max_word",
              "text": "中华人民共和国国歌"
            }

            ik_max_word: 会将文本做最细粒度的拆分,比如会将“中华人民共和国国歌”拆分为“中华人民共和国,中华人民,中华,华人,人民共和国,人民,人,民,共和国,共和,和,国国,国歌”,会穷尽各种可能的组合,适合 Term Query;

            ik_smart: 会做最粗粒度的拆分,比如会将“中华人民共和国国歌”拆分为“中华人民共和国,国歌”,适合 Phrase 查询
            展开

            作者回复: 谢谢分享!

            6
          • 有铭
            2019-07-06
            给各位使用docker跑Elasticsearch安装插件的简单办法,无需dockerFile自制镜像。以本帖的双es启动为例:
            1.进入es的容器并启动bash。 命令 docker exec -it es7_01 bash
            注:es7_01 即容器名称
            2..第一步成功你会发现你已经在容器内部,此时输入 pwd 命令会发现自己处于/usr/share/elasticsearch 路径。此时即可输入插件安装命令 bin/elasticsearch-plugin install analysis-icu
            等待插件下载并安装完毕
            3.输入exit退出容器bash。
            4.如法炮制es7_02并安装插件。
            5.docker-compose restart 重启容器
            6.重启后,检查安装是否成功,输入 curl 127.0.0.1:9200/_cat/plugins,输出:
            es7_01 analysis-icu 7.2.0
            es7_02 analysis-icu 7.2.0
            代表成功
            展开

            作者回复: 非常棒的分享。这样操作更为方便。

            1
            3
          • Dev.M
            2019-07-02
            老师讲得很好,不过更新速度有些慢呀
            展开

            作者回复: 可以多看一些相关文档,自己多做一些练习。争取夯基础,一下看很多的内容也未必一下记得住,细水长流,贵在坚持。

            3
          • soul
            2019-07-02
            老师你好,我现在的项目也用到了es,但是不怎么深入,以后会有es结合springboot系列吗,还有就是es怎么保证和MySQL的数据增删改差同步
            展开

            作者回复: 数据库可以通过external version控制。springbot我原本没有计划,现在会考虑增加一节讲解

            3
          • 无笔秀才
            2019-06-30
            其实个人项目中已经在重度使用es,也遇到了一些问题,购买课程主要是想向老师学习,并请教一些问题的解决方案。
            1. 自动创建的mapping 如text.keyword 后面如果想修改怎么办,比如按月分 index_201901/ index_201902
            ,那么新旧不一致,导致查询语句 也不一致。
            如:
            "title": {
              "type": "text",
              "fields": {
                "keyword": {
                  "type": "keyword",
                  "ignore_above": 256
                }
              }
            }
            现在想改成
            "title": {
              "type": "keyword"
            }
            由于之前的查询语句都已经写成title.keyword了。 如果修改了之后就会导致index_201901 - index_201906都是带keyword的。但是index_201907及以后的都都是不带keyword的。这种情况是需要将前面的index数据先备份,再删除重新建立mapping 再导入原来的数据吗?

            2. 由于需求要对某些字段(如title)进行复杂条件查询,and / or ,我就想到了query_string, 查找性能较慢。有时候甚至会超时。

            3. 副本数设置的多,那么稳定性就会增强,那么势必会造成同步的成本,这里想跟老师确认一下副本同步过程是强一致性,还是最终一致性?一个写请求过来,是等所有副本都同步完了 才返回给客户端,还是先把主节点操作完成就返回主节点呢?我个人感觉应该是强一致性。不然副本同步失败 也无法通知客户端了。

            4. 我们现在想存文章正文但是不想分词,于是我就设置成了如下格式。但是遇到了一些变态文章很长,超长了。就会写入失败,而不是被截断。再确认一点我看文档说 ignore_above 设置的是字节数,而不是字数。
            "content": {
                  "type": "keyword",
                  "ignore_above": 20000
                }

            5. 在课程中也发现ik分词可以自定义词库等,这里有一个疑惑就算是用自己的词库,那么加入当发现一个新词的时候,我需要热更新自定义词库,这时候文章已经写入es了,但还是按照旧的词库去分词的。 还有热更新词库会不会较慢影响读写性能。以至于要停机更新?

            多谢老师指教
            展开

            作者回复: 1. mapping修改,需要做reindex。基于时间序列的index可以结合index template来创建。可以配置index alias来解决index改名产生的问题


            2查询的性能问题,你能给出具体的例子吗?否则我不知道如何回答

            3. 分片数的设定 ,读写文件的流程。在后续会做讲解。简单来说,如果写入频率不高,设置多个副本会提升读取性能

            4. 我觉得你不应该设置keyword,而是应该在mapoing中将那个字段设置成ignore。

            5.ik和hanlp等分析器 支持词库的动态更新的。后续课程会讲。


            希望这些简单的回答对你有用。

            3
          • 石将从
            2019-07-03
            使用中文分词时报错,
            POST /_analyze
            {
              "analyzer": "icu_analyzer",
              "text": "北京大学"
            }

            {
              "error": {
                "root_cause": [
                  {
                    "type": "remote_transport_exception",
                    "reason": "[F2nqCBO][127.0.0.1:9300][indices:admin/analyze[s]]"
                  }
                ],
                "type": "illegal_argument_exception",
                "reason": "failed to find global analyzer [icu_analyzer]"
              },
              "status": 400
            }
            展开

            作者回复: 不知道你是否已经安装了icu-analyzer?

            http://localhost:9200/_cat/plugins
            查看插件。否则使用elasticsearch-plugin install analysis-icu

            1
            2
          • 种菜大哥
            2019-07-09
            Python和es的整合,也加一点吧
            展开

            作者回复: 有部分例子有用到python

            1
          • 暖色浮余生
            2019-07-08
            我也提一下spring boot整个es😬
            展开

            作者回复: ➕1

            1
          • 醉美柳舞之众星捧月
            2019-07-05
            我也需要Java整合ES的,我是用的springCloud,谢谢老师
            展开

            作者回复: 好!

            1
          • 塘渡
            2019-07-01
            课程更新频率是怎么安排的?
            展开

            作者回复: 应该会在2个月内更新完毕

            1
          • 无笔秀才
            2019-06-30
            老师你好,在进行区间聚合的时候,如根据age 年龄段进行聚合,0-18 , 18-* 分为未成年人和成年人。
            聚合如下:
            {
                "aggs" : {
                    "age_ranges" : {
                        "range" : {
                            "field" : "age",
                            "keyed" : true,
                            "ranges" : [
                                { "key" : "未成年", "to" : 18 },
                                { "key" : "成年人", "from" : 18 }
                            ]
                        }
                    }
                }
            }
            现在有10条记录 ,结果是未成年3条, 成年的4条。 发现有3条记录 根本就没有age字段,现在产品想把剩下的3条放到"其他"项里。 这里我想到的办法是先count 一下,再减去aggs 里每一项的值。 就是其他的数量。请老师赐教。
            展开

            作者回复: 你需要为空值设置默认值,在你的例子里设置成“其他”的keyword即可

            文档

            https://www.elastic.co/guide/en/elasticsearch/reference/5.2/null-value.html

            1
          • oldriver
            2019-06-30
            老师, docker环境怎么安装cu analyzer
            展开

            作者回复: docker如何需要安装 需要自己写 Dockerfile。把es的image作为base image。然后执行install icu,然后打成新的image。在compose中使用你自己生成的新的image

            1
            1
          • 飞翔
            2019-06-29
            在elasticsearch 中,怎么配置使用什么analizer呀?
            展开

            作者回复: 在后续的maaping中会讲解。默认采用standard analyzer

            2
            1
          • 孙建中
            2019-06-28
            老师 ,您好!请教下,比如我安装了icu插件,我在分词是怎么知道填写的是icu_analyzer呢,而不是icu呢?因为之前在kibana中调试出错,是因为我一直填写的是icu。谢谢老师
            展开

            作者回复: 这个anakyzer的名字应该通过帮助文档查看后填写

            1
          • wangdexing
            2019-07-17
            分词器 包含 Character Filters、Tokenizer、Token Filter这3部分。比如 Tokenizer有Whitespace,Keyword,Pattern等很多种。Token Filter也一样存在Standard,Lower Case,Stop等好多种. 生产中感觉分词不会直接用Simple Analyzer 这种分词器吧,应该都是自己去从Tokenizer集合中选择一种或多种 再从Token Filter中选择一种或多种 自定义搭配使用吧。

            作者回复: 这个还是要看场景的。而且很多时候,甚至会创建多个子字段,使用不同的分词器。例如使用English分词器,然后创建一个子field,使用standard分词器。然后使用most_fileds的方式对不同字段的算分进行相加返回。

          • Bob
            2019-07-17
            老师,什么时候分享一下es7.2.0 整合springboot ,项目中正准备用es , 在实验过程中发现最新的ES7.2.0 整合springboot 2.1.6 链接不上集群 报错NoNodeAvailableException[None of the configured nodes are available 配置都正确 把es版本降低到6.x就没有问题

            作者回复: 如果使用spring data的部分,估计还不支持新版本。如果是用java rest call,版本就不会是什么大的问题