V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
wico97

Elasticsearch 无故停止

  •  
  •   wico97 · Dec 21, 2018 · 6529 views
    This topic created in 2684 days ago, the information mentioned may be changed or developed.

    RPM 安装的,使用的 ES 6 版本,在 ubuntu 16.04 上,已经禁止 swap,把 ulimit 提高到 40000。还是发现 ES 会无故停止,没有 error log,目前还是在内部测试阶段,写入也不大。请 V 友分析什么原因

    Supplement 1  ·  Dec 26, 2018
    原因找到了,原来是我设置了 momerylock 为 true 了。因为后来我把内存调成 16G 还会出现内存不够的问题。后来把 momerylock 改为 false 就没问题。 所以这个设置是个坑呀。可官方文档为啥还让这么设置。
    16 replies    2018-12-21 18:35:02 +08:00
    srx1982
        1
    srx1982  
       Dec 21, 2018
    内存不够了吧,我猜的
    DawN1ng
        2
    DawN1ng  
       Dec 21, 2018
    有 Monitoring 的监控信息吗? JVM 分配了多少? nofile 和 memlock 这种常用配置修改了吗?
    wico97
        3
    wico97  
    OP
       Dec 21, 2018
    @srx1982 现在是 4G 内存。分 2G 给 ES 的。
    lihongjie0209
        4
    lihongjie0209  
       Dec 21, 2018
    输出 gc 日志
    wico97
        5
    wico97  
    OP
       Dec 21, 2018
    @DawN1ng 没修改 nofile 和 memlock。我回去修改试试
    zhoulouzi
        6
    zhoulouzi  
       Dec 21, 2018
    在 ubuntu 上 rpm 安装的. ??????
    lsongiu
        7
    lsongiu  
       Dec 21, 2018
    oom killer 给 kill 了吧,dmesg |grep 查询一下
    GuryYu
        8
    GuryYu  
       Dec 21, 2018
    ES 只给 2G 内存太少了吧,当然也要看数据量有多大
    szq8014
        9
    szq8014  
       Dec 21, 2018
    怀疑 OOM +1
    OctopusGO
        10
    OctopusGO  
       Dec 21, 2018
    OOM +2
    Navee
        11
    Navee  
       Dec 21, 2018
    OOM +3
    wph95
        12
    wph95  
       Dec 21, 2018
    1. 如果怀疑 OOM 去 kernel log 里按时间找一找,上面给了方法了
    2. 多搭台机器,用新版本 version > 6 的 Elasticsearch + kibana,xpack 开起来,xpack 自带 monitor [免费功能]非常方便,会记录 gc 内存使用。
    lincolnhuang
        13
    lincolnhuang  
       Dec 21, 2018
    2G 只不过给的堆内吧,堆外 Lucene 没有限制,会用更多,估计直接 OOM 了
    wico97
        14
    wico97  
    OP
       Dec 21, 2018
    @wph95 多谢。已经升到 8G 内存了
    tubaflute
        15
    tubaflute  
       Dec 21, 2018
    dmesg
    manmuy
        16
    manmuy  
       Dec 21, 2018 via Android
    我的是内存不够 偶尔会自动关闭 加了一个守护脚本
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3355 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 54ms · UTC 13:06 · PVG 21:06 · LAX 06:06 · JFK 09:06
    ♥ Do have faith in what you're doing.