搜索
查看
编辑修改
首页
UNITY
NODEJS
PYTHON
AI
GIT
PHP
GO
CEF3
JAVA
HTML
CSS
搜索
繁依Fanyi0
这个屌丝很懒,什么也没留下!
关注作者
热门标签
jquery
HTML
CSS
PHP
ASP
PYTHON
GO
AI
C
C++
C#
PHOTOSHOP
UNITY
iOS
android
vue
xml
爬虫
SEO
LINUX
WINDOWS
JAVA
MFC
CEF3
CAD
NODEJS
GIT
Pyppeteer
article
热门文章
1
JVM 调优实战 - 案例:每日百万交易的支付系统,如何设置JVM堆内存大小
2
第三层:网络层_无穷计数问题
3
【超详细教程】PyQt学习(三)QWidget介绍_pyqt qwidget
4
【用C语言轻松实现】- 扫雷【超详细教程】_扫雷怎么生成才能确保通过
5
信息安全体系建设☞开源入侵检测系统HIDS_开源hids
6
这个SD插件处理服装太给力了!_adetailer
7
VS Code 和 Visual Studio 哪个更好?
8
【三十三】springboot+序列化实现返回值脱敏和返回值字符串时间格式化问题_spring boot 返回日期序列化
9
android游戏开发大全第二版PDF,零基础学习android编程
10
python gps定位_GPS 测试汇总和python GPS 导航地图实现
当前位置:
article
> 正文
Elasticsearch优化_elasticsearch 10000限制
作者:繁依Fanyi0 | 2024-08-03 20:46:46
赞
踩
elasticsearch 10000限制
2.out of memory错误
因为默认情况下es对字段数据缓存(Field Data Cache)大小是无限制的,查询时会把字段值放到内存,特别是facet查询,对内存要求非常高,它会把结果都放在内存,然后进行排序等操作,一直使用内存,直到内存用完,当内存不够用时就有可能出现out of memory错误。
解决方法:
(1)设置es的缓存类型为Soft Reference,它的主要特点是据有较强的引用功能。只有当内存不够的时候,才进行回收这类内存,因此在内存足够的时候,它们通常不被回收。另外,这些引 用对象还能保证在Java抛出OutOfMemory 异常之前,被设置为null。它可以用于实现一些常用图片的缓存,实现Cache的功能,保证最大限度的使用内存而不引起OutOfMemory。在es的配置文件加上index.cache.field.type: soft即可。
(2)设置es最大缓存数据条数和缓存失效时间,通过设置index.cache.field.max_size: 50000来把缓存field的最大值设置为50000,设置index.cache.field.expire: 10m把过期时间设置成10分钟。
剩余磁盘空间达到es最小值,添加数据被block
PUT _all/_settings
{"index.blocks.read_only_allow_delete": null}
解除每次search最大10000size的限制
PUT [xxx]/_settings
{
"max_result_window" : 20000
}
删除单个index全部内容
DELETE /new_listings_investment
{ "query": { "match_all": {} } }
声明:
本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:
https://www.wpsshop.cn/w/繁依Fanyi0/article/detail/924762?site
推荐阅读
article
ELK
(
Elasticsearch
+
Logstash
+
Kibana
)
日志
分析系统_
elk
日志
...
本文主要介绍了
ELK
日志
文件系统的概念和部署过程,详细阐释了
Elasticsearch
、
Logstash
、
Kibana
三...
赞
踩
article
【
Elasticsearch
】
Elasticsearch
索引
创建
与
管理
详解_
es
创建
索引
...
Elasticsearch
是一个基于 Apache Lucene 的开源搜
索引
擎,具有分布式、近实时、RESTful ...
赞
踩
article
使用
ElasticSearch
作为
知识库,存储
向量
及
相似性
搜索
_
elasticsearch
向量
检...
在当今大数据时代,快速有效地
搜索
和分析海量数据成为了许多企业和组织的重要需求。`Elasticsearch`
作为
一款功...
赞
踩
article
【
Elasticsearch
】
安装
配置
与使用_
elasticsearch
配置
...
elasticsearch
安装
部署_
elasticsearch
配置
elasticsearch
配置
...
赞
踩
article
【ElasticSearch】
RestClient
查询
文档
_
resthighlevelclient
...
RestClient
查询
文档
_
resthighlevelclient
查询
文档
resthighlevelclient
查...
赞
踩
article
百亿
级
存储
架构
:
ElasticSearch
+
HBase
海量
存储
架构
与实现_elasticsear...
先看一下整体
架构
,整个数智枢纽(Data Intelligence Hub)服务 核心主要分为:数据统一接入层数据统一查...
赞
踩
article
ElasticSearch
新增表
字
段
_
elasticsearch
添加
字
段
...
1.新增表
字
段
(Elasticsearch中的mapping一旦创建,就不容易再修改。3.
ElasticSearch
数...
赞
踩
article
elasticsearch
SQL
:在
Elasticsearch
中启用和
使用
SQL
功能_
es
支持
s...
。
Elasticsearch
SQL
是
Elasticsearch
的扩展功能,允许用户
使用
SQL
语法查询Elasticse...
赞
踩
article
ElasticSearch
搜索
API(上)_
java
api
elasticsearch
multi...
Elasticsearch(后文除标题外,一律简写为ES)在
搜索
和数据分析场景中的卓越表现越来越引人注目,它在很多互联网...
赞
踩
article
Elasticsearch
搜索
API_
elasticsearch
搜索
api...
该API用于在
Elasticsearch
中
搜索
内容。用户可以通过发送带有查询字符串作为参数的get请求进行
搜索
,或者可以...
赞
踩
article
Elasticsearch
的
基本概念
_
electisearch
查询
的
开发库中
的
表吗...
作者:Medcl转自链接[三国]
Elasticsearch
的
基本概念
OriginalMedcl弹性搜索2019-06...
赞
踩
article
ElasticSearch
基础
(
四)之 常用
API
测试
...
本文示例以
ElasticSearch
8.6.2 版本演示,更详细的
API
参数及用法请参考官方文档。elastic...
赞
踩
article
干货
|
Elasticsearch
8
.X
节点
角色
划分
深入详解...
0、问题引出如果你的
Elasticsearch
集群是 7.9 之前的版本,在配置
节点
的时候,只会涉及
节点
类型的概念。...
赞
踩
article
Elasticsearch
中的一些重要概念:
cluster
,
node
,
index
, docu...
当我们开始使用
Elasticsearch
时,我们必须理解其中的一些重要的概念。这些概念的理解对于以后我们使用Elasti...
赞
踩
article
ElasticSearch
(六)—
全文检索
...
前面讲到的query中的查询,都是精准查询。可以理解成跟在关系型数据库中的查询类似。match系列的查询,是
全文检索
的查...
赞
踩
article
ElasticSearch
——精准
查询
_
elasticsearch
精确
查询
...
精确
查询
一般是查找keyword、数值、日期、boolean等类型字段。所以对搜索条件分词。_
elasticsearch
...
赞
踩
article
elasticsearch
对
SQL
的
支持
_es
的
客户端
支持
sql
语言开发吗...
关于Es对
sql
和 jdbc odbc
的
支持
情况_es
的
客户端
支持
sql
语言开发吗es
的
客户端
支持
sql
语言开发吗 ...
赞
踩
article
Elasticsearch
SQL_
elasticsearch
sql
查询...
一般使用的时候,会使用Query DSL来查询数据,从版本以后,已经支持SQL查询了。是一个X-Pack组件,它允许针对...
赞
踩
article
ElasticSearch
7
SQL
详解_
elasticsearch
-
sql
...
Elasticsearch
SQL
是一个X-Pack组件,它允许针对Elasticsearch实时执行类似
SQL
的查询....
赞
踩
article
Elasticsearch
SQL
详解...
一文了解 elasticsearch
SQL
的用法!_elasticsearch sqlelasticsearch s...
赞
踩
相关标签
elk
elasticsearch
大数据
数据库
运维
jenkins
搜索引擎
架构
hbase
java
后端
分布式