Elasticsearch简介
疫情已经持续了好几个月了，作为程序员滴我们也帮不上什么忙，只有老老实实呆在家里或者出门一定戴口罩准守一些规则，不给国家添乱。不过最近疫情开始有所扭转，但是还是对国家经济，对企业业务造成了很大的影响，我也被停止了实习。接下来，可能会面临着失业，破产等等严肃的问题。...
2024-01-10
Elasticsearch学习十
1、shard&replica机制再次梳理 2、图解单node环境下创建index是什么样子的------------------------------------------------------------------------------------------------1、shard&replica机制再次梳理（1）index包含多个shard （2）每个shard都是一个最小工作单元，承载部分数据，lucene实例，完整的建立索引和处理请求的能力 （3）增...
2024-01-10
Elasticsearch的学习
1.ES是 什么？es是一个基于Lucene的搜索服务器，是一个基于分布式多用户能力的全文搜索引擎，基于restful web接口。大白话：是一个分布式、高性能、高可用、可伸缩的搜索和分析系统。2.ES的功能？此种场景不支持包含频繁更新、事务（transaction）的操作。a.分布式的搜索引擎和数据分析引擎b....
2024-01-10
Elasticsearch内存问题
当我也尝试在Ubuntu中启动elasticsearch时，启动脚本给我以下错误：Java HotSpot(TM) Client VM warning: INFO: os::commit_memory(0x74800000, 201326592, 0) failed; error='Cannot allocate memory' (errno=12)## There is insufficient memory for the Java Runtime Environment to continue.# N...
2024-01-10
Elasticsearch查询过滤解惑
简介之前一直被查询(query)与过滤(filter)所困惑，为什么同样是bool在一个地方就是查询，在另一个地方就是过滤了。后来仔细的看了一下官方文档才发现，都是查询，只是区分：query context(查询上下文)filter context(过滤上下文)为什么要区分query context与filter context呢？因为效率不同，在 filter context中...
2024-01-10在Elasticsearch中转义斜线
我经营一个摄影网站。摄影师将其“ by_line”作为“ Some name / ourwebsite.com”。我有一个用于大多数查询的DSL，使用“条件”将“过滤”查询串在一起，这在90％的情况下都非常有效，但是在这种情况下，我通过这样的查询返回的结果为零（请注意我如何尝试逃脱正斜线）：body: {query: {filtered: {...
2024-01-10Elasticsearch：获取索引列表
是否可以获得与特定模式匹配的索引列表，例如这是获取索引列表的方法：curl -XGET 'localhost:9200/_stats/'但是我找不到过滤它们的方法，因此该列表仅包含匹配“ my_index_nr_1 ”的索引，其中“ ”是通配符解在使用ES一段时间后，这里是我现在使用的东西，希望它能对其他人有所帮助：curl -XGET '/_cat/indi...
2024-01-10Elasticsearch动态脚本已禁用
我正在尝试对聚合执行以下查询：aggs:{ total:{ sum:{ script: "doc['comments'].value + doc['likes'].value + doc['shares'].value" } }}并引发以下异常：ScriptException[dynamic scripting disabled]任何想法我该如何解决。参考：http://www.elasticsearch.org/guide/zh-CN/e...
2024-01-10如何修复Elasticsearch中超时的读取
我使用Elasticsearch-1.1.0为推文编制了索引。索引过程可以。然后我升级了版本。现在我使用Elasticsearch-1.3.2，并且我随机收到此消息：Exception happened: Error raised when there was an exception while talking to ES.ConnectionError(HTTPConnectionPool(host='127.0.0.1', port=8001): Read timed out. (read timeo...
2024-01-10MySQL查询到ElasticSearch
我正在尝试将MYSQL查询转换为Elasticsearch。该查询包括在不同字段上的多个条件。让我解释一下我要达到的目标。我的MySQL查询是Select * from data_fl where city IN 'miami,miamibeach,etc' AND phone!=0 AND (name like '%abc%' OR address like '%abc%' OR zip_code like '%abc%' OR phone Like '%abc')如何在Elasticsearch中复制此...
2024-01-10在Elasticsearch中查找不同的内部对象
我们正在尝试在Elasticsearch中找到不同的内部对象。这将是我们案例的最小示例。我们一直坚持下面的映射（更改类型或索引或添加新字段不会有问题，但结构应保持原样）：{ "building": { "properties": { "street": { "type": "string", "store": "yes", "index": "not_analyzed" }, "house number": {...
2024-01-10Elasticsearch聚合排名（按热门得分）
我想按top_hit的doc.score订购存储桶。我当前的实现如下。 group_by_iid: { terms: { field: 'iid', order: { max_score: 'desc' }, size: 0 }, aggs: { max_score: { max: { script: 'doc.score' } }, top_hit: { top_hits: { sort: [{ sour...
2024-01-10
Elasticsearch系列生产集群的索引管理
概要索引是我们使用Elasticsearch里最频繁的部分日常的操作都与索引有关，本篇从运维人员的视角，来玩一玩Elasticsearch的索引操作。基本操作在运维童鞋的视角里，索引的日常操作除了CRUD，还是打开关闭、压缩、alias重置，我们来了解一下。创建索引[esuser@elasticsearch02 ~]$curl -XPUT "http://elasticsearch02:920...
2024-01-10来自Elasticsearch的打开文件警告过多
持续获取以下警告消息。不知道该怎么办。看到一些相关的帖子要求增加文件描述符的数量。怎么做呢？即使现在增加，在添加新索引时也会遇到同样的问题。（目前使用约400个索引，6个分片和1个副本）。指数的数量往往会增加。[03:58:24,165][WARN ][cluster.action.shard ] [node1] received shard failed for [index9][...
2024-01-10ElasticSearch中的排序和最新记录
我有两个与ElasticSearch有关的问题。1）有什么方法可以指定我想要特定字段的结果以降序排列吗？等效SQL查询为：select * from table1 where a="b" order by myprimarykey desc;2）如何获得第一和最后（最新）记录？回答：1）Elasticsearch具有相当完善的SortingAPI，可让您控制排序顺序。因此，在elasticsearch中，等效于...
2024-01-10ElasticSearch和Java环境变量
对于Windows 7，我已经安装了32位和64位版本的JDK。所有四个安装的版本均为8，更新为20。http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html当我下载并解压缩elasticsearch并运行/bin/service.bat或/bin/elasticsearch.bat文件时，我进入了终端：JAVA_HOME environment variable must be set! Pres...
2024-01-10
如何在python中使用Elasticsearch
什么是 Elasticsearch 想查数据就免不了搜索，搜索就离不开搜索引擎，百度、谷歌都是一个非常庞大复杂的搜索引擎，他们几乎索引了互联网上开放的所有网页和数据。然而对于我们自己的业务数据来说，肯定就没必要用这么复杂的技术了，如果我们想实现自己的搜索引擎，方便存储和检索，Elasticsear...
2024-01-10以位置顺序返回Elasticsearch高亮结果吗？
我目前正在使用Elasticsearch在查询中提供的突出显示功能。但是，我不太清楚的一件事是关于结果的排序方式。我希望他们order that theyappear在段落而不是重要性/得分中返回。这样一来，我就可以按照与...原始文档中相同的顺序将它们与连接在一起（类似于Google结果）。但是，他们目前正在根据最佳匹配...
2024-01-10在Elasticsearch中建立索引时如何进行映射
我ElasticSearch在一个网站中使用，其中我从中索引了数据MongoDB。def postToEs(self): """ put data to the elasticsearch """ es = Elasticsearch() cursor = self.getMongoData() for document in cursor: esdoc={} esdoc["category"] = document.get("category...
2024-01-10Elasticsearch如何使用通配符进行OR查询
我很难用Elasticsearch构建查询。我想查询类似的东西：WHERE field_1 is 'match' $string OR field_2 is 'wildcard_match' $string OR field_3 is 'fuzzy' $string所以我试图构造的是这样的：{ "bool" : { "should" : [ { "match" : { "field_1" : "testing" } ...
2024-01-10直接删除所有Elasticsearch索引而不会卷曲
我开始elasticsearch，并得到错误：java.lang.IllegalStateException: unable to upgrade the mappings for the index [[documents/xOOEXQB-RzGhQp7o7NNH9w]] at org.elasticsearch.cluster.metadata.MetaDataIndexUpgradeService.checkMappingsCompatibility(MetaDataIndexUpgradeSe...
2024-01-10如何在Elasticsearch集群上最大化CPU核心
我必须设置多少个分片和副本才能使用群集中的每个cpu核心（我希望100％的负载，最快的查询结果）？我想使用Elasticsearch进行聚合。我读到Elasticsearch使用多个cpu核心，但是没有找到关于cpu核心在分片和副本方面的确切细节。我的观察是，单个分片在查询时使用的内核/线程不超过1个（考虑到一次仅查...
2024-01-10指定在ElasticSearch中建立索引的字段
我有一个文档，其中包含许多我从未查询过的字段，因此我想关闭这些字段的索引以节省资源。我相信我需要禁用该_all字段，但是如何指定要对哪些字段建立索引呢？回答：默认情况下，所有字段也都在_all特殊字段内建立索引，该字段开箱即用地提供了所谓的catchall功能。但是，可以通过以下include_in...
2024-01-10从Elasticsearch的索引中仅获取过滤的嵌套对象
我有一个包含嵌套对象的文档，如下所示：{ "title" : "Title 1", "books": [{ "book_title": "b title 1", "year": 2014 }, { "book_title": "b title 2", "year": 2015 }]}现在，我需要按书名（不是book_title）和年份（比如2014）来过滤书籍。我需要的输出将是：{ "title" : "Title 1",...
2024-01-10ElasticSearch多个滚动Java API
我想从索引中获取所有数据。由于项数太大而无法存储，因此我使用了Scroll（很好的功能）：client.prepareSearch(index) .setTypes(myType).setSearchType(SearchType.SCAN) .setScroll(new TimeValue(60000)) .setSize(amountPerCall) .setQuery(MatchAll()) .execute().actionGet();调用时效果很好：client.pr...
2024-01-10
