ES 是否可以修改字段类型或者删除字段???

大佬们, ES有方法 可以修改字段类型或者删除字段吗?除了索引重建

1个回答

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
ES地址位置映射,如果字段不存在,或者映射对应字段类型问题
ES地理位置映射,导入数据的时候如果对字段不存在,会报错400怎么解决? ![图片说明](https://img-ask.csdn.net/upload/201807/10/1531210759_194190.png) ES地理位置映射,Double数组的形式存储位置,映射发生错误 大家又遇到这种问题的吗? ![图片说明](https://img-ask.csdn.net/upload/201807/10/1531210773_727426.png)
es如何实现某个时间段内的(a字段-b字段)/a字段的最大值、最小值、平均值、95值
es如何实现某个时间段内的(a字段-b字段)/a字段的最大值、最小值、平均值、95值
关于es中integer_range类型字段聚合的问题
该字段索引结构如下 ![图片说明](https://img-ask.csdn.net/upload/201911/23/1574478193_943813.png) 索引聚合语句如下 ![图片说明](https://img-ask.csdn.net/upload/201911/23/1574478287_125497.png) 求大家帮忙看看,怎么解决这问题
ES 搜索 一个字段里面包含这个搜索内容,但是搜索不到。。
ES 一个type里面,有两条数据,根据其中一个字段查询。该字段为标签id字段 两条数据如下: A数据(无法通过这个字段查询到):tag_ids ZHN0LXs5;7wJa0wm1;59NSi8Y8; B数据(可以通过match查询到) tag_ids ZHN0LXs5;Z3kRIatY;7wJa0wm1; A就怎么都查不到。。 请问大神,,该怎么解决啊。。
slf4j+logback+logstash把自定的字段与原始的日志信息一起写入到ES
slf4j+logback+logstash把生成的日志用logstash插入到ES,插入到ES默认的字段不满足需求,我现在需要再增加五个自定义字段以及默认的字段,用logstash一起存到ES,这自定的五个字段的值需要从Java代码中获取,是动态变化的,有谁会,请教一下,非常感谢,我研究了一天多,没有找到合适的方法解决。
oracle数据库同步至ES
oracle同步至ES 需求: 1、全量、增量都具备 2、当数据库中有修改删除操作时,ES也能做相应变动 3、oracle数据库中无更新时间字段,且无自增字段 有没有大佬能告诉我用什么技术可以实现这个需求。 logstash我已经试过了,虽然全量、增量可以实现,但是当数据库中有字段变动时,无法同步至ES
elasticsearch根据字段值长度过滤
es如果要根据字段长度过滤查询,除了用script还有别的方法吗?目前用doc[‘field’].values.size过滤查询结果时有时空?
使用spring-data API 搜索es 集合类型数据
使用spring-data-es API进行 es 搜索 建的索引中 有个 字段 List<String> 类型。 如何搜索这种类型。 尝试了下面这种方式,没法搜索成功。 ``` boolQueryBuilder.must(QueryBuilders.termQuery("consignCodeList",invoiceQueryPageB.getInvoiceConsignCode())); ``` 请求下,有遇到类似问题的大神吗,指点一下。
es 查询怎么排除那些只要有一条数据是空的字段
es 查询怎么排除那些只要有一条数据是空的字段 比如我es中的数据是这样的: ``` { "took": 28, "timed_out": false, "_shards": { "total": 5, "successful": 5, "failed": 0 }, "hits": { "total": 3, "max_score": 1, "hits": [ { "_index": "shop", "_type": "book", "_id": "AWlTdeg9-uKcfYQht2cG", "_score": 1, "_source": { "id": 10006573, "name": "Elasticsearch action", "author": "Radu Gheorghe", "num": 120, "content": "这本实战型的书籍聚焦在使用HTTP协议的Elasticsearch REST API代码片段的书写多数是使用cURL的bash脚本,所以很容易翻译成其他编程语言。", "price": 39.5, "published": "2018-10-01" } }, { "_index": "shop", "_type": "book", "_id": "AWlTkwr8-uKcfYQht2cH", "_score": 1, "_source": { "id": 20004812, "name": "Spring action", "author": "Radu go", "num": 120, "content": "这是一本简要简介spring d的书籍。", "price": 39.5 } }, { "_index": "shop", "_type": "book", "_id": "AWlTlIUH-uKcfYQht2cI", "_score": 1, "_source": { "id": 20004812, "name": "elasticsearch action", "author": "john" } } ] } } ``` 我要查询出来每条数据都不为空的字段,正确的结果应该是: { "id": 20004812, "name": "elasticsearch action", "author": "john" }
关于logstash从mysql导数到es中之后,sql中写的字段自动变小写,导致es查询不出数据。
select id,taskCode,taskSign,riskCode,classCode,policyCodes,createTime,updatTime from f_policytask 导入之后查询出数据的字段变成了小写,我建索引的时候写的是驼峰,所以模糊查询的时候查询不出来。 ![图片说明](https://img-ask.csdn.net/upload/201805/07/1525662592_62354.png) (目前有个解决办法是把驼峰改成下划线,但是java里面写的很别扭,有没有其他的解决办法?谢谢大家)
logstash 解析csv格式的txt文件如何跳过第一行的字段行
logstash 解析csv格式的txt文件如何跳过第一行的字段行 ![图片说明](https://img-ask.csdn.net/upload/201907/25/1564039983_80317.png) 如图 怎么样跳过第一行的字段行啊,不让它导入es
oracle查询字段在where中无效
当我使用如下语句的时候没有任何问题,可以查询出2条数据 ``` SELECT dd_isShare, 'aaa' ledger_id, 'FK01' coa_type_code from v_cem_voucher_detail where md_id = 'BI2017120700072938' and (instr('@(N)', '@(' || dd_isShare || ')') > 0 AND instr('@(SY2017090700059015)', '@(' || dd_invoiceType || ')') = 0) ``` 但是当我使用如下语句: ``` SELECT --dd_isShare, 'aaa' ledger_id, 'FK01' coa_type_code from v_cem_voucher_detail where md_id = 'BI2017120700072938' and (instr('@(N)', '@(' || dd_isShare || ')') > 0 AND instr('@(SY2017090700059015)', '@(' || dd_invoiceType || ')') = 0) ``` 把dd_isShare和dd_invoiceType中2个字段在select注释掉,就查询不到任何数据,v_cem_voucher_detail 是一个视图,而且该情况在生产上出现,测试服务器上没有问题,个人觉得很奇怪,已经排除是语句或者视图的问题,剩下的不知道还有什么情况? 其中dd_isShare 是一个子查询的转换(decode((select count(1) from t_aaa_es es where d.no = es.connno and d.mainid = es.mainid and d.corpid = d.corpid),0,'N','Y')) dd_isShare, 求解答
求助各位大神上千个字段实现分组统计,有没有什么好的办法
首先排除es,因为现在用的就是es效率并不是很好 业务场景就是给每条数据贴上多个标签,然后全文模糊查询(不考虑分词索引) 可以考虑任何数据库类型
从MySQL数据库拿数据做实时报表?
公司业务越来越多,刚开始时使用的是MySQL数据库,现在数据库有很多了,估计有20多个系统,目前不允许直接从MySQL查询,以及关联操作,只能从其备库里面拉取binlog文件。同时又想做实时处理。 现在使用的是MySQL+canal+kafka+flink+数据库(Tidb\clickhouse\mysql\ES)。其中大的问题是前面的MySQL容易出现DDL语句(比如:添加字段删除字段等),会导致canal出问题,或者写数据库对应不上等。。。
ES IK 分词搜索,搜索结果不符合预期
ES IK 分词搜索,搜索结果不符合预期,我搜索“西红柿鸡蛋”,搜索结果顺序是"白象 西红柿鸡蛋面"、“花菜西红柿鸡蛋”、"西红柿鸡蛋面"、"西红柿鸡蛋汤",并且这几项score得分一样,期望的是长度最短的出现在最前面,已经将index的分片数量设置成1个了,并且rescore之后还是这样的结果,怎么能实现字段长度最多的再最前面,用Explain看了一下得分的情况,结果这几项的FieldLength 和AvgFieldLength 长度竟然都一样,真心的请教大家,感谢,用的是ES5.6.0版本
ES聚合ipv6自动格式化问题
### 如题: ``` mapping : "DEST_ADDRESS": { "type": "ip", "fields": { "search": { "type": "text" } } } 原始字段值: "DEST_ADDRESS": "2001:0000:0000:0000:0000:0000:0000:000B", terms聚合结果: "key": "2001::b", ``` 为什么会出现这种情况? 如何禁止自动格式化?(不考虑改变mapping)
spring-data-elasticsearch 字段如何驼峰转下划线
最近使用spring-data-elasticsearch,但是想在es中存储的时候使用下划线,请问各位大神有啥解决方案
es查询很慢,求优化方法
集群现在5个master、3个client、8个data,master和client都是16核cpu、data是8核cpu,都开了超线程,内存都128G,jvm内存xms和xmx都设置30G。elasticsearch.yml见[elasticsearch.yml](https://elasticsearch.cn/file/download/file_name-ZWxhc3RpY3NlYXJjaC55bWxfLnJhcg==__url-aHR0cHM6Ly9lbGFzdGljc2VhcmNoLmNuL3VwbG9hZHMvcXVlc3Rpb25zLzIwMTgwNzE1LzhhNmUwZTU2NjJmYWQ1NGIzNDFkYmNiMThlYjkzOTAx "elasticsearch.yml")。 索引按小时分表,每个索引是5千万-1.2亿条记录,每条记录30个字段。索引会预先建立好mapping,语句如下: curl -XPUT "http://node1:9200/transcode_2018071401&quot; -d '{"settings" : {"number_of_shards" : 5,"number_of_replicas" : 1, "index.refresh_interval":"30s","index.translog.sync_interval":"5s","index.translog.flush_threshold_size":"4096mb", "index.translog.durability": "async","index.unassigned.node_left.delayed_timeout":"5m"},"aliases":{"transcode_20180714":{},"transcode_201807":{}},"mappings":{"data":{"properties":{"time":{"type":"integer"},"pkgCount":{"type":"integer"},"bytesNum":{"type":"integer"},"stream_id":{"type":"keyword","norms": false}}}}}' -H "Content-type:application/json" 用java程序多线程并行插入数据,插入时指定了routing,值为stream_id字段的值,每秒大概2.5w条数据。 现在需要查询某个时间段内,按照字段stream_id和ip字段的int_ip(ip为struct结构)的值过滤,返回大量的数据(因为前端要用折线图展示,得一下子返回全量数据),查最近两三个小时的数,大概有10000条吧。 目前的处理方式是,在代码里,根据时间段,找到对应的几个小时索引,然后一个索引一个请求 curl node1:9200/_search/ xxx ,多个请求同时发出,并行查询,再对返回的多个结果进行汇总。查询的时候按stream_id字段值路由,请求语句如下: curl "http://node1:9200/transcode_20 ... ot%3B -X GET -H "Content-type:application/json" -d '{"size":"1001","query":{"bool":{"filter":{"bool":{"must":[{"term":{"stream_id":"jcd9734d813ad"}},{"term":{"ip.int_ip":-776921847}},{"range":{"time":{"from":1531647004,"to":null}}}]}}}},"_source":{"includes":["ip","time","pkgCount","bytesNum"]},"sort":[{"_doc":{"order":"asc"}}]}' 第一次拉取,返回的数据都是几百条的情况下,耗时慢的要十几秒,快的几百毫秒 然后拿到一批返回的_scroll_id, 同样对这批_scroll_id并行使用: curl "http://node1:9200/_search/scroll&quot; -X GET -H "Content-type:application/json" -d \'{"scroll":"30s","scroll_id":"'.$scrollId.'"}\'' 查询,再对返回的_scroll_id并行查询,直到拉完数据。 这步的速度也不稳定,一次拉取有的时候只要几百毫秒,有的时候要一两秒。 跪求优化建议
elasticsearch 父子查询和聚合
求大神,我用es的父子关系,查询数据,然后对查询出来的数据的任一字段进行聚合,怎么实现。我现在走到这一步了![图片说明](https://img-ask.csdn.net/upload/201703/22/1490178331_27849.jpg) 但是只能聚合父或者反过来聚合子的,没法聚合inner_hit里边的,看了5天的ES,就来任务了,亚历山大,求支援
在中国程序员是青春饭吗?
今年,我也32了 ,为了不给大家误导,咨询了猎头、圈内好友,以及年过35岁的几位老程序员……舍了老脸去揭人家伤疤……希望能给大家以帮助,记得帮我点赞哦。 目录: 你以为的人生 一次又一次的伤害 猎头界的真相 如何应对互联网行业的「中年危机」 一、你以为的人生 刚入行时,拿着傲人的工资,想着好好干,以为我们的人生是这样的: 等真到了那一天,你会发现,你的人生很可能是这样的: ...
【JSON解析】浅谈JSONObject的使用
简介 在程序开发过程中,在参数传递,函数返回值等方面,越来越多的使用JSON。JSON(JavaScript Object Notation)是一种轻量级的数据交换格式,同时也易于机器解析和生成、易于理解、阅读和撰写,而且Json采用完全独立于语言的文本格式,这使得Json成为理想的数据交换语言。 JSON建构于两种结构: “名称/值”对的集合(A Collection of name/va...
《MySQL 性能优化》之理解 MySQL 体系结构
本文介绍 MySQL 的体系结构,包括物理结构、逻辑结构以及插件式存储引擎。
程序员请照顾好自己,周末病魔差点一套带走我。
程序员在一个周末的时间,得了重病,差点当场去世,还好及时挽救回来了。
一名大专同学的四个问题
【前言】   收到一封来信,赶上各种事情拖了几日,利用今天要放下工作的时机,做个回复。   2020年到了,就以这一封信,作为开年标志吧。 【正文】   您好,我是一名现在有很多困惑的大二学生。有一些问题想要向您请教。   先说一下我的基本情况,高考失利,不想复读,来到广州一所大专读计算机应用技术专业。学校是偏艺术类的,计算机专业没有实验室更不用说工作室了。而且学校的学风也不好。但我很想在计算机领...
复习一周,京东+百度一面,不小心都拿了Offer
京东和百度一面都问了啥,面试官百般刁难,可惜我全会。
Java 14 都快来了,为什么还有这么多人固守Java 8?
从Java 9开始,Java版本的发布就让人眼花缭乱了。每隔6个月,都会冒出一个新版本出来,Java 10 , Java 11, Java 12, Java 13, 到2020年3月份,...
达摩院十大科技趋势发布:2020 非同小可!
【CSDN编者按】1月2日,阿里巴巴发布《达摩院2020十大科技趋势》,十大科技趋势分别是:人工智能从感知智能向认知智能演进;计算存储一体化突破AI算力瓶颈;工业互联网的超融合;机器间大规模协作成为可能;模块化降低芯片设计门槛;规模化生产级区块链应用将走入大众;量子计算进入攻坚期;新材料推动半导体器件革新;保护数据隐私的AI技术将加速落地;云成为IT技术创新的中心 。 新的画卷,正在徐徐展开。...
轻松搭建基于 SpringBoot + Vue 的 Web 商城应用
首先介绍下在本文出现的几个比较重要的概念: 函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。Fun: Fun 是一个用于支持 Serverless 应用部署的工具,能帮助您便捷地管理函数计算、API ...
讲真,这两个IDE插件,可以让你写出质量杠杠的代码
周末躺在床上看《拯救大兵瑞恩》 周末在闲逛的时候,发现了两个优秀的 IDE 插件,据说可以提高代码的质量,我就安装了一下,试了试以后发现,确实很不错,就推荐给大家。 01、Alibaba Java 代码规范插件 《阿里巴巴 Java 开发手册》,相信大家都不会感到陌生,其 IDEA 插件的下载次数据说达到了 80 万次,我今天又贡献了一次。嘿嘿。 该项目的插件地址: https://github....
Python+OpenCV实时图像处理
目录 1、导入库文件 2、设计GUI 3、调用摄像头 4、实时图像处理 4.1、阈值二值化 4.2、边缘检测 4.3、轮廓检测 4.4、高斯滤波 4.5、色彩转换 4.6、调节对比度 5、退出系统 初学OpenCV图像处理的小伙伴肯定对什么高斯函数、滤波处理、阈值二值化等特性非常头疼,这里给各位分享一个小项目,可通过摄像头实时动态查看各类图像处理的特点,也可对各位调参、测试...
2020年一线城市程序员工资大调查
人才需求 一线城市共发布岗位38115个,招聘120827人。 其中 beijing 22805 guangzhou 25081 shanghai 39614 shenzhen 33327 工资分布 2020年中国一线城市程序员的平均工资为16285元,工资中位数为14583元,其中95%的人的工资位于5000到20000元之间。 和往年数据比较: yea...
为什么猝死的都是程序员,基本上不见产品经理猝死呢?
相信大家时不时听到程序员猝死的消息,但是基本上听不到产品经理猝死的消息,这是为什么呢? 我们先百度搜一下:程序员猝死,出现将近700多万条搜索结果: 搜索一下:产品经理猝死,只有400万条的搜索结果,从搜索结果数量上来看,程序员猝死的搜索结果就比产品经理猝死的搜索结果高了一倍,而且从下图可以看到,首页里面的五条搜索结果,其实只有两条才是符合条件。 所以程序员猝死的概率真的比产品经理大,并不是错...
害怕面试被问HashMap?这一篇就搞定了!
声明:本文以jdk1.8为主! 搞定HashMap 作为一个Java从业者,面试的时候肯定会被问到过HashMap,因为对于HashMap来说,可以说是Java集合中的精髓了,如果你觉得自己对它掌握的还不够好,我想今天这篇文章会非常适合你,至少,看了今天这篇文章,以后不怕面试被问HashMap了 其实在我学习HashMap的过程中,我个人觉得HashMap还是挺复杂的,如果真的想把它搞得明明白...
毕业5年,我问遍了身边的大佬,总结了他们的学习方法
我问了身边10个大佬,总结了他们的学习方法,原来成功都是有迹可循的。
python爬取百部电影数据,我分析出了一个残酷的真相
2019年就这么匆匆过去了,就在前几天国家电影局发布了2019年中国电影市场数据,数据显示去年总票房为642.66亿元,同比增长5.4%;国产电影总票房411.75亿元,同比增长8.65%,市场占比 64.07%;城市院线观影人次17.27亿,同比增长0.64%。 看上去似乎是一片大好对不对?不过作为一名严谨求实的数据分析师,我从官方数据中看出了一点端倪:国产票房增幅都已经高达8.65%了,为什...
推荐10个堪称神器的学习网站
每天都会收到很多读者的私信,问我:“二哥,有什么推荐的学习网站吗?最近很浮躁,手头的一些网站都看烦了,想看看二哥这里有什么新鲜货。” 今天一早做了个恶梦,梦到被老板辞退了。虽然说在我们公司,只有我辞退老板的份,没有老板辞退我这一说,但是还是被吓得 4 点多都起来了。(主要是因为我掌握着公司所有的核心源码,哈哈哈) 既然 4 点多起来,就得好好利用起来。于是我就挑选了 10 个堪称神器的学习网站,推...
这些软件太强了,Windows必装!尤其程序员!
Windows可谓是大多数人的生产力工具,集娱乐办公于一体,虽然在程序员这个群体中都说苹果是信仰,但是大部分不都是从Windows过来的,而且现在依然有很多的程序员用Windows。 所以,今天我就把我私藏的Windows必装的软件分享给大家,如果有一个你没有用过甚至没有听过,那你就赚了????,这可都是提升你幸福感的高效率生产力工具哦! 走起!???? NO、1 ScreenToGif 屏幕,摄像头和白板...
阿里面试,面试官没想到一个ArrayList,我都能跟他扯半小时
我是真的没想到,面试官会这样问我ArrayList。
曾经优秀的人,怎么就突然不优秀了。
职场上有很多辛酸事,很多合伙人出局的故事,很多技术骨干被裁员的故事。说来模板都类似,曾经是名校毕业,曾经是优秀员工,曾经被领导表扬,曾经业绩突出,然而突然有一天,因为种种原因,被裁员了,...
大学四年因为知道了这32个网站,我成了别人眼中的大神!
依稀记得,毕业那天,我们导员发给我毕业证的时候对我说“你可是咱们系的风云人物啊”,哎呀,别提当时多开心啦????,嗯,我们导员是所有导员中最帅的一个,真的???? 不过,导员说的是实话,很多人都叫我大神的,为啥,因为我知道这32个网站啊,你说强不强????,这次是绝对的干货,看好啦,走起来! PS:每个网站都是学计算机混互联网必须知道的,真的牛杯,我就不过多介绍了,大家自行探索,觉得没用的,尽管留言吐槽吧???? 社...
良心推荐,我珍藏的一些Chrome插件
上次搬家的时候,发了一个朋友圈,附带的照片中不小心暴露了自己的 Chrome 浏览器插件之多,于是就有小伙伴评论说分享一下我觉得还不错的浏览器插件。 我下面就把我日常工作和学习中经常用到的一些 Chrome 浏览器插件分享给大家,随便一个都能提高你的“生活品质”和工作效率。 Markdown Here Markdown Here 可以让你更愉快的写邮件,由于支持 Markdown 直接转电子邮...
看完这篇HTTP,跟面试官扯皮就没问题了
我是一名程序员,我的主要编程语言是 Java,我更是一名 Web 开发人员,所以我必须要了解 HTTP,所以本篇文章就来带你从 HTTP 入门到进阶,看完让你有一种恍然大悟、醍醐灌顶的感觉。 最初在有网络之前,我们的电脑都是单机的,单机系统是孤立的,我还记得 05 年前那会儿家里有个电脑,想打电脑游戏还得两个人在一个电脑上玩儿,及其不方便。我就想为什么家里人不让上网,我的同学 xxx 家里有网,每...
史上最全的IDEA快捷键总结
现在Idea成了主流开发工具,这篇博客对其使用的快捷键做了总结,希望对大家的开发工作有所帮助。
阿里程序员写了一个新手都写不出的低级bug,被骂惨了。
这种新手都不会范的错,居然被一个工作好几年的小伙子写出来,差点被当场开除了。
谁是华为扫地僧?
是的,华为也有扫地僧!2020年2月11-12日,“养在深闺人不知”的华为2012实验室扫地僧们,将在华为开发者大会2020(Cloud)上,和大家见面。到时,你可以和扫地僧们,吃一个洋...
AI 没让人类失业,搞 AI 的人先失业了
最近和几个 AI 领域的大佬闲聊 根据他们讲的消息和段子 改编出下面这个故事 如有雷同 都是巧合 1. 老王创业失败,被限制高消费 “这里写我跑路的消息实在太夸张了。” 王葱葱哼笑一下,把消息分享给群里。 阿杰也看了消息,笑了笑。在座几位也都笑了。 王葱葱是个有名的人物,21岁那年以全额奖学金进入 KMU 攻读人工智能博士,累计发表论文 40 余篇,个人技术博客更是成为深度学习领域内风向标。 ...
2020年,冯唐49岁:我给20、30岁IT职场年轻人的建议
点击“技术领导力”关注∆每天早上8:30推送 作者|Mr.K 编辑| Emma 来源|技术领导力(ID:jishulingdaoli) 前天的推文《冯唐:职场人35岁以后,方法论比经验重要》,收到了不少读者的反馈,觉得挺受启发。其实,冯唐写了不少关于职场方面的文章,都挺不错的。可惜大家只记住了“春风十里不如你”、“如何避免成为油腻腻的中年人”等不那么正经的文章。 本文整理了冯...
作为一名大学生,如何在B站上快乐的学习?
B站是个宝,谁用谁知道???? 作为一名大学生,你必须掌握的一项能力就是自学能力,很多看起来很牛X的人,你可以了解下,人家私底下一定是花大量的时间自学的,你可能会说,我也想学习啊,可是嘞,该学习啥嘞,不怕告诉你,互联网时代,最不缺的就是学习资源,最宝贵的是啥? 你可能会说是时间,不,不是时间,而是你的注意力,懂了吧! 那么,你说学习资源多,我咋不知道,那今天我就告诉你一个你必须知道的学习的地方,人称...
立即提问