elastic
【年度盛会】Elastic 中国开发者大会 2021 八折购票火热进行中
活动 • liaosy 发表了文章 • 0 个评论 • 96 次浏览 • 1 天前
Elastic日报 第1295期 (2021-12-29)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 75 次浏览 • 1 天前
【1月8日】Elastic 中国开发者大会 2021 日程新鲜出炉！福利票抢先购！
Elasticsearch • liaosy 发表了文章 • 0 个评论 • 94 次浏览 • 3 天前
重要的事情说三遍
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
关于本次大会
Elastic 中国开发者大会 2021 是由 Elastic 官方、Elastic 足球社区和极限科技联合主办的开发者大会，作为中国国内唯一一个专门讨论 Elasticsearch 开源技术的大会，是中国最权威和最具实力干货的技术大会，其专业性和内容的质量一直以来在业内都是有口皆碑。本次大会邀请的演讲嘉宾有来自 Elastic 官方、Google、腾讯、阿里巴巴、字节跳动、vivo等众多公司的技术专家，为中国广大的 Elasticsearch 开发者提供一个技术交流和学习切磋的地方，汇集业界众多的成功案例，集思广益，发散思维，促进社区和行业的进步。
更多详细介绍请参见大会官网：
关于大会议程
精彩内容不容错过，八折购票火热进行中（折扣码: 80OFF），扫码购买。
Elastic日报 第1288期 (2021-12-22)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 91 次浏览 • 3 天前
Elastic日报 第1281期 (2021-12-15)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 179 次浏览 • 2021-12-15 10:04
Elastic日报 第1274期 (2021-12-08)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 186 次浏览 • 2021-12-08 10:37
Elastic日报 第1267期 (2021-12-01)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 200 次浏览 • 2021-12-01 14:44
Elastic日报 第1260期 (2021-11-24)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 224 次浏览 • 2021-11-24 11:54
Elastic日报 第1247期 (2021-11-12)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 200 次浏览 • 2021-11-13 23:20
Elastic 中国开发者大会 2021 开启了，预热铁粉票已开抢，手慢无！
活动 • liaosy 发表了文章 • 0 个评论 • 429 次浏览 • 2021-11-11 17:45
父子查询排序
Elasticsearch • zcc_vv 回复了问题 • 6 人关注 • 3 个回复 • 1794 次浏览 • 2021-09-22 14:47
es每天早上第一次搜索都非常慢
Elasticsearch • 匿名用户 回复了问题 • 5 人关注 • 2 个回复 • 1097 次浏览 • 2020-11-22 18:51
训练营报名中 | 5天突破Elasticsearch全观测日志分析能力
Elasticsearch • zengcici 发表了文章 • 0 个评论 • 1168 次浏览 • 2020-09-08 11:43
报名时间：截止 2020年9月13日 23:59分 报名链接：
训练营介绍
奖品介绍
云栖大会 | Elasticsearch 场景化应用专场，将于2020年9月18日 下午13:00开始，如果你不想错过，马上订阅吧
更多Elasticsearch 场景化应用，请下载白皮书【Elasticsearch 八大经典应用】 下载链接：
报名时间：截止 2020年9月13日 23:59分 报名链接：
训练营介绍
奖品介绍
云栖大会 | Elasticsearch 场景化应用专场，将于2020年9月18日 下午13:00开始，如果你不想错过，马上订阅吧
更多Elasticsearch 场景化应用，请下载白皮书【Elasticsearch 八大经典应用】 下载链接：
请教大神，关于MultiSearch传入多个查询请求后，查询出来的多个结果怎么和传参关联上
Elasticsearch • zec 回复了问题 • 4 人关注 • 3 个回复 • 4867 次浏览 • 2020-01-14 15:58
ES多盘shard分配原理
假设现在单机环境中有两块磁盘，es的配置文件elasticsearch.yml中的path.... 显示全部 »
ES多盘shard分配原理
假设现在单机环境中有两块磁盘，es的配置文件elasticsearch.yml中的path.data：/index/data,/data2/index/data
配置了两块盘，对应了两个路径。那么我现在要创建hrecord1索引的2个主shard分配原理如下：
首先会创建shard1（我估计ES会优先创建shard编号大的shard，但是影响不大），创建shard1的时候会找出两个路径对应的磁盘空间大的那个盘，然后将shard1放到那个路径下。
创建shard0的时候，会将/index和/data2磁盘的剩余可用空间相加，然后将这个总和乘以百分之五
将前面创建shard1的磁盘空间减去这个百分之五的值，然后再将这个差值与/data2磁盘剩余空间进行比较，找出磁盘空间大的，然后把shard0放到那个大的磁盘空间上。
说白了，这个百分之五的空间是ES为那个创建的shard1设置的预留空间吧。
有错误的地方也欢迎大家指出，一起交流哈！
主要代码在ShardPath.java里面
[code]public static ShardPath selectNewPathForShard(NodeEnvironment env, ShardId shardId, IndexSettings indexSettings,
long avgShardSizeInBytes, Map<Path,Integer> dataPathToShardCount) throws IOException {
final Path dataPath;
final Path statePath;
if (indexSettings.hasCustomDataPath()) {
dataPath = env.resolveCustomLocation(indexSettings, shardId);
statePath = env.nodePaths()[0].resolve(shardId);
} else {
BigInteger totFreeSpace = BigInteger.ZERO;
for (NodeEnvironment.NodePath nodePath : env.nodePaths()) {
totFreeSpace = totFreeSpace.add(BigInteger.valueOf(nodePath.fileStore.getUsableSpace()));
}
// TODO: this is a hack!! We should instead keep track of incoming (relocated) shards since we know
// how large they will be once they're done copying, instead of a silly guess for such cases:
// Very rough heuristic of how much dtisk space we expec the shard will use over its lifetime, the max of current average
// shard size across the cluster and 5% of the total available free space on this node:
BigInteger estShardSizeInBytes = BigInteger.valueOf(avgShardSizeInBytes).max(totFreeSpace.divide(BigInteger.valueOf(20)));
// TODO - do we need something more extensible? Yet, this does the job for now...
final NodeEnvironment.NodePath[] paths = env.nodePaths();
NodeEnvironment.NodePath bestPath = null;
BigInteger maxUsableBytes = BigInteger.valueOf(Long.MIN_VALUE);
for (NodeEnvironment.NodePath nodePath : paths) {
FileStore fileStore = nodePath.fileStore;
BigInteger usableBytes = BigInteger.valueOf(fileStore.getUsableSpace());
assert usableBytes.compareTo(BigInteger.ZERO) >= 0;
// Deduct estimated reserved bytes from usable space:
Integer count = dataPathToShardCount.get(nodePath.path);
if (count != null) {
usableBytes = usableBytes.subtract(estShardSizeInBytes.multiply(BigInteger.valueOf(count)));
}
if (bestPath == null || usableBytes.compareTo(maxUsableBytes) > 0) {
maxUsableBytes = usableBytes;
bestPath = nodePath;
}
}
statePath = bestPath.resolve(shardId);
dataPath = statePath;
}
return new ShardPath(indexSettings.hasCustomDataPath(), dataPath, statePath, shardId);
}[/code]
改用keyword字段来索引就快了， 深层次原因还在看... 显示全部 »
改用keyword字段来索引就快了， 深层次原因还在看代码探寻。
当cluster.routing.allocation.enable设置为"none"的时候，不会allocate任何UNASSIGNED状态的shard，但是有一个特例:
本地的因为重启而变成UNASSIGNED... 显示全部 »
当cluster.routing.allocation.enable设置为"none"的时候，不会allocate任何UNASSIGNED状态的shard，但是有一个特例:
本地的因为重启而变成UNASSIGNED状态的primary shard不受这个参数约束
怎么理解这个规则呢？举个例子吧。
假设集群索引都有设置复制片，然后重启了某一个结点，该结点上的shard会经历下面这个过程:
replica变成UNASSIGNED
primary在其他结点上对应的replica被推举为primary，而本地的这些primary变成replica，并且状态变成UNASSIGNED
由于cluster.routing.allocation.enable设置为none， 这些replica不会再其他结点上复制恢复，保持在UNASSIGNED状态
因此集群状态应该是yellow，意味着所有索引的primary都存在可用，只是部分复制片因为上述参数设置的原因，没有立即进行恢复。
重启的结点加入集群，通过master恢复状态信息以后，可以得知那些UNASSIGNED的shard，在这个结点上存在数据。
重新设置cluster.routing.allocation.enable" : "all" ，master得到指令，开始恢复那些UNASSIGNED的shard
对于不再更新的冷shard，由于synced_flush， master知道这些数据在重启的结点上存在并且和primary一致，只需要更新一下集群的状态，将他们allocate到刚启动的结点，并且状态置为started。所以这个过程非常快，看起来瞬间可以完成。
由于集群持续有数据写入，部分primary由于新写入了数据，重启结点上对应的replica已经out of sync，因此需要进入数据的recovery过程，这个过程可能需要在主副片之间拷贝数据，或者利用translog重放热数据。 该过程取决于shard大小，以及实时数据写入量的大小，需要一些时间，可能几分钟到几个小时，直到primary -replica完全in-sync，才会将replica置为started。
如果同时重启2个或者更多结点，会是怎样的？
这种情况下，有可能某个shard的primary和replica同时变成UNASSIGNED了，集群状态变成red。 如果结点重启好全部加入集群，即使cluster.routing.allocation.enable设置为none，本地的primary shard因为不受这个参数约束，会立即开始做existing_store类别的恢复。 等全部primary恢复好以后，集群状态变成yellow，然后不再继续恢复replica，直到重新设置cluster.routing.allocation.enable为all。
所以，cluster.routing.allocation.enable: "none"，实际上影响的是已有索引(local存在)的replica，以及新创建索引的primary和replica。
至于停掉结点后，集群查询延迟增加，是因为重启结点上的查询会由剩余的结点分担，多少延迟会增加一些。
Elastic 中国开发者大会 2021 开启了，预热铁粉票已开抢，手慢无！
活动 • liaosy 发表了文章 • 0 个评论 • 429 次浏览 • 2021-11-11 17:45
Shay Banon: 关于“Open” Distro、开源和公司建设的几点思考
资讯动态 • medcl 发表了文章 • 1 个评论 • 2685 次浏览 • 2019-03-13 10:19
9月8日 Elastic Meetup 北京线下沙龙报名中
活动 • medcl 发表了文章 • 15 个评论 • 4543 次浏览 • 2018-08-16 17:57
- 58到家搜索服务化实践和演进 -- 邢天宇/五八到家
- Elasticsearch在百度aladdin日志系统的应用 -- 王鹏/百度
- elasticsearch 在58集团信息安全部的应用 -- 亢伟楠/五八集体
- Waterdrop：构建在Spark之上的简单高效数据处理系统 -- 霍晨/新浪网
- 基于 ElasticSearch 构建个性化推荐和高级搜索 -- 周金阳/果壳网/在行
开放公开，火力全开：Elastic 宣布公开其商业产品 X-Pack 的源代码
资讯动态 • medcl 发表了文章 • 21 个评论 • 12353 次浏览 • 2018-02-28 12:47
by Elastic CEO Shay Banon
我很高兴的宣布，我们将公开我们 X-Pack 特性的所有代码 - Security、Monitoring、Alerting、Graph、Reporting、专门的 APM UI、Canvas、Elasticsearch SQL、Search Profiler、Grok Debugger、Elastic Maps Service zoom levels 以及 Machine Learning - 为了促进我们与客户及社区的更大的协作，正如我们今天为我们的开源代码所做的一样。
我为我们公司围绕我们的开源产品而自豪，一直以来我们都没有破坏创新或放弃对开放的承诺。当我们展望未来的时候，我们看到了一个机会，让我们更加坚信开放，甚至更加彻底，同时引入一个新的、更加高效的模式来构建一个成功的、可持续的围绕开源的商业模式。
这篇博客概述了我们做出这些改变的想法和细节，不过，让我澄清一件事 - 我们是一家开源软件公司。我们将继续保持为一家开源软件公司。我们比以往任何时候都要更加开放，我个人，我的团队，整体而言，都致力于此。
为什么开源?
当我第一次开始写 Elasticsearch 的时候，我知道它必须是开源的。开源作为一种开发模式和分发方式，提供了接触更多人的机会。所有这些人都能做出贡献。当然，通过代码可以做出贡献，但也可以通过使用免费的软件，持续不断的推进可能的边界。
与社区的合作可以确保，当你的项目成功时，会有一群热情的、专门的开发者指导你的特性开发，并将产品推向新的有趣的方向。例如，将聚合功能引入 Elasticsearch 让其可被当做一个可扩展的用于数据分析的产品。而像 Kibana 和 Logstash 这样的项目，以及后来的 Beats 的加入，无不令人鼓舞。随着我们用户的需求变得更加深入和专业，我们总能找到新的方法来支持他们，有些是通过新的功能、有些是产品，比如机器学习、APM 和站内搜索。
我们对开源的承诺深入了。这是我们花费大部分工程力量投入的地方，我们的社区贡献者和用户对我们创新进程也同样至关重要。但是，像我们这样快速推进产品的发展，需要大量的投资，这也是我们围绕这些技术成立一家公司的原因。
为什么商业软件?
那么，如果我们对开源软件已有如此深的见解，那为什么还是编写了商业软件呢？
我们是一家企业。作为企业的一部分，我们相信那些能够付款给我们的企业，应该付款给我们。而那些不能的，他们也不必付款给我们。作为回报，我们有义务确保我们继续添加功能和价值给我们所有的用户，并确保与我们的商业关系对客户有益。这是一家健康的公司所需要的平衡。
销售支持订阅服务是一个常见的开源软件的商业模式。可悲的是，只有支持的商业模式会朝向关于什么对用户最好以及什么对公司最好这样的冲突之中。在这种情况下，公司将没有动力让他们的产品更加简单好用，更加稳固和可扩展，因为那意味着这将吞噬其技术支持的利益。我们从来没有，也永远不会忍受为了确保公司继续经营而不让我们的软件变的更好。我们想要继续改进，我们支持服务的目标是让你的项目成功，然后你能成为你自有 Elastic Stack 部署的专家。
另外一种办法 -- 如果你们听过我的演讲，你们可能听我讨论过这个问题 -- 即构建一个‘企业版’的软件。这种，从本质上来讲，导致了社区的分裂，并在客户和用户之间产生了分歧。它的结果就是创建一种版本 -- 要么企业版，要么社区版 -- 被认为是权威的，往往滞后 master 很多。一个缺少特性的版本。一个在不同周期测试和发布的版本。一个有效的关闭了源代码的版本，因为您无法知道为了支持商业特性而更改了哪些内容。在 Elastic，所有我们的客户同时也是我们开源软件用户，使用相同版本的软件产品。我们不会创建一个社区版与企业版的版本。
那还有什么？识别高价值特性并将其作为核心软件的商业扩展。这种商业模式，我们有时候叫它“open core”，这是我们创造 X-Pack 的最终产物。为了构建和集成由我们维护知识产权（IP）的特性和功能，并提供订阅服务或免费的基础授权。保持我们对知识产权的控制，使我们能够有能力投资我们大部分的工程资源和时间，可以继续改进我们的核心，我们的开源产品。
这种方法使我们能够在世界各地建立一个分布式的公司，让我们感到惊讶的是，Elastic Stack 是如何被用来解决各种实际的、具体的问题的。添加适用于我们用户的特性和功能，并开发一些使我们能够持续到未来的功能。
但是这种方法也存在挑战…
更加开放
你是否知道 X-Pack 提供了一层免费的功能？这些能力诸如 Monitoring、Search Profiler、Grok Debugger 以及额外的 Elastic Maps 缩放级别。你是否知道我们还将在这一层继续添加更多功能，如 Canvas 和 Elasticsearch SQL？
当我们往X-Pack 里添加免费功能的时候，我们这么做是因为我们知道这些功能可以帮助用户更好的使用 Elastic Stack。不幸的是，太多功能你都不知道 -- 也许知道 -- 或得益于这些功能。所以这意味着有很大一部分用户在使用我们软件的时候往往不是最佳实践。
我们也知道，获得这个免费软件的过程是一个糟糕的用户体验，涉及到一个完整的集群重启。并且如果你想查看代码，抱歉，不可以。尤其是这些免费功能和很大一部分用户相关，你会问我们一些很好但是很难的问题，比如：“我如何就这些免费功能与你们交互？”，“我如何开启一个 issue 或是贡献代码？”
而我们没有很好的答案。
通过公开 X-Pack 的代码，我们解决了这些我们部分产品开源以及部分产品不是的问题。很快，所有的免费的和商业的特性你都可以开启一个 issue、查看特性讨论、检查源代码、与我们协助和提交一个 pull request。
具体细节
这意味着什么，技术上来说？
自 6.3 版本起，所有 $PRODUCT（项目）仓库(Elasticsearch, Logstash, Kibana, Beats) ：
- 所有现存的 Apache 2.0 协议的代码都将保持相同的协议，什么都不用动。
- 我们会创建一个新的 X-Pack 目录，将 x-pack-$PRODUCT 的代码放入到该目录，基于 Elastic EULA 协议，允许相应的衍生和贡献。
- 我们将修改最顶层的协议为一个简单的 Elastic License，包含这个仓库里面那些文件是Apache 2.0，那些是 Elastic EULA 的详细细节。
同时，X-Pack 功能将打包到默认的发行版里面。所有免费的功能都包含在里面且默认开启且永远不会出现‘过期’，而商业特性则可以通过试用证书可选的启用。因为免费的证书永远不会过期，所以你再也不用通过注册来就直接获取它了。除此以外，一个只包含 Apache 2.0 协议代码的包也会同样会创建并提供下载。
更多信息以及常见问题，可以在 页找到。
总结
我们相信开源。作为一种分布模式。作为一种建立企业的方法。作为我们公司的未来。 我们承诺并保持我们将保持开放，并对我们将在 6.3 比以往任何时候都更加开放而感到兴奋。
感谢你们对我们的信任。
Elastic 在年度用户大会 Elastic{ON} 2018 上发布众多新功能和技术预览
资讯动态 • medcl 发表了文章 • 1 个评论 • 3618 次浏览 • 2018-02-28 12:39
下载超过 2.25 亿次，Elastic 公开 X-Pack 源代码
旧金山 (Elastic{ON} 2018) – 2018 年 2 月 27 日 – Elastic，Elasticsearch 和 Elastic Stack背后的公司，今天宣布其产品累计下载次数达到 2.25 亿次的里程牌，去年累计下载次数是 1 亿。除此之外，Elastic 宣布公开其X-Pack 的源代码作为策略的一部分，让用户更容易地下载、检查和与 Elastic 工程团队一起在 X-Pack 特性开发上进行协作。给用户更简单的下载、检查及协助。X-Pack 目前包括了 security、alerting、monitoring、Graph 和machine learning 等众多功能。
“我们的产品被数以百万计的开发人员和成千上万的客户所依赖，他们依靠这些产品来驱动关键型业务，这令我们受宠若惊，” Elastic 创始人兼 CEO Shay Banon 表示， “正如他们与我们开源的产品打交道的一样，公开我们的 X-Pack 源代码能给我们的用户完全的透明度和具备与我们一起协助的能力。这样可以激励每一位开发人员、客户和使用我们软件的合作伙伴，帮助我们创造更好的产品和特性以及允许我们构建一个可持续发展的商业模式。”
Elastic 在过去18个月内收购了三家新公司，并在全世界发展了超过 100,000 多位开发者的技术社区。 Elastic{ON} 2018， 是一个最大型的 Elasticsearch 用户聚集的大会。在三天的时间里，超过 2500 名与会者聚在一起学习和分享创意，观看新功能的发布，并获得即将发布的新技术的预览。
-
Elastic APM: 这是 Elastic APM 第一个可被用于生产环境的版本，作为 Elastic 产品栈进入应用性能监控领域的一个延伸。它允许应用程序开发人员和 devops 工程师能够监视和分析特定的代码行对系统和业务性能的影响。这不仅仅是提升速度，同时也能扩展调试流程，将代码性能变化与操作历史有机结合。Elastic APM 将数据存储到 Elasticsearch 的索引里面，允许将 APM 数据与来自 Logstash 或者 Beats 的日志和监控指标进行关联分析，包含针对 Nodejs、Python、Ruby 和 JavaScript 的服务端组件和探针。还提供一个 APM 分析应用来实施典型的 APM 工作流。Elastic APM 已经作为 6.2 发布的一部分可被下载。
-
Swiftype App Search: 为开发者构建用以为他们的应用程序提供强大的搜索能力，Swiftype App Search 交付一系列稳健的 API 和额外的搜索相关的特性，如搜索结果重排、同义词和容错等。Swiftype App Search 是一个一站式的 Saas 解决方案，不需要基础设施、管理和维护，提供一个简单上手的用户体验。 Swiftype App Search 现已公测。
-
Machine Learning Forecasting: Elastic 机器学习能力的第一个主要扩展，用于预测分析领域。用户可以对时间序列数据进行建模，并使用复杂的、现成的机器学习算法来预测未来可能发生的结果。借助按需预测，用户可以使用现有的机器学习工作，并使用内置的预测模型，来准确预测改模型在预测周期内的增长情况。预测结果被写入到 Elasticsearch 的索引中，用户可用来和实际的数据进行比较。Elastic 的机器预测能力已包含在 6.2 的版本里面。
-
GIS App: Elastic 的一个全新研究项目，GIS（地理信息系统）是一个被设计用来捕获、存储、操作、分析、管理和呈现所有地理类型数据的系统。作为 Kibana 的一部分，这个 应用让你以一种全新的方式来执行特定的地理位置分析，在 Dashboard 里面加入内置的增强地图可视化组件。它的核心特性包括，多层地图的支持，映射独立的坐标点和用户端样式自定义。GIS App 目前已提供技术预览版。
-
SQL for Elasticsearch: 这个新特性为世界上最成熟的 SQL 数据库开发人员打开了释放 Elastic Stack 强大能力的大门，允许用户用熟悉的 SQL 语法来查询 Elasticsearch 里面的数据。JDBC 协议的支持，大大的简化了将 Elasticsearch 导出到外部 SQL 环境使用的情况。通过允许 Elasticsearch 通过 RESTful 协议理解 SQL，Elasticsearch SQL 允许你使用 SQL 语法来查询 Elasticsearch 里面的数据，以 SQL 引擎一致的表格形式返回那些查询结果，并提供一个用户接口来探索这些数据。Elasticsearch SQL 去年还只是作为一个概念被推出，现在马上将发布 alpha 和 beta 版本。
-
Canvas: Canvas 为下一代数据可视化和数据呈现展现了一个全新的篇章。随着 Kibana 越来越受欢迎，Canvas 展现了一种新的方式，可以将数据从 Elasticsearch 中获得的洞察赋予在线的、实时的仪表盘、幻灯片演示和信息图表。Canvas 能让用户能以一种前所未有的方式来表达 Elasticsearch 数据背后的故事，消除将数据导出到 Excel 中的详尽、重复和耗时的过程，来构建 PowerPoint。 Canvas 同样也是可插拔的，允许用户带来新的数据源、可视化类型和 UI 可视化组件。Canvas 去年作为一个概念被提出，目前已提供技术预览版可被下载。
-
Rollups: 一般来说，具备关联的指标和日志数据需要长时间保存，rollups 可以让用户存储有限的数据集，减少历史数据的磁盘占用。Elasticsearch 的 rollup 作业可以让用户配置一个定时任务来对数据进行 “rollup” 或预聚合，并保存结果到一个索引。举一个指标监控的例子，如：“web 服务器每小时的平均负载”，也就是说，平均数据被 rollup 起来并存储，但是其它原始数据，如特定用户、页面、IP 信息却不会。该功能将很快在 Elasticsearch 里面提供测试版本并随后在 Kibana 里面提供支持。
-
Flexible Deployment Configurations: 随着客户将随着越来越多的数据放进 Elasticsearch 并扩展越来越多的使用场景，Elastic 引入 “sliders” 功能来让用户获得定制他们集群配置的能力。Elastic Cloud 和 Elastic Cloud Enterprise (ECE) 客户将获得这些新能力：支持多种类型的硬件可供选择；支持集群模板和 hot/warm 集群；给现有集群添加机器学习节点、独立 master 节点和 APM 节点的能力。这些新特性很快将能在 Elastic Cloud 和 Elastic Cloud Enterprise 上可用。
- Logstash Azure Monitoring Module: 通过与微软合作，Logstash Azure 监控模块目前是借助 Elastic Stack 监控你的 Azure 基础设施和服务的最简单的方式。新模块集成了 Azure 的集中式日志服务来标准化 Azure 日志和指标，并转换成 JSON 格式。使用 Logstash 来消费这些数据录入到 Elasticsearch。同时借助 Kibana，用户能够分析基础设施的改变和授权信息；识别可疑的行为和潜在的恶意用户；通过调查用户行为来执行根源分析；监控和优化 SQL 数据库的部署。该功能将很快提供 beta 版本。
最后，Elastic 宣布一个新的、官方的 Elastic 认证计划。在用户要求获得专业认证的推动下，Elastic 将为用户提供新的培训课程，让他们成为专家，并通过 Elastic 认证。新课程 Elasticsearch Engineer I 和 Elasticsearch Engineer II 将为用户提供安装、管理和优化 Elasticsearch 集群的第一手知识，也包括，开发新的解决方案来分析他们的数据。这些课程是成为一名 Elastic 认证工程师的基础，包括动手、技术和基于性能的认证考试，通过考试将获得由官方颁发的 Elastic 电子认证徽章。
了解更多
Elastic Opening X-Pack Blog Opening X-Pack FAQ Elastic Certification Elastic Cause Awards
关于 Elastic
Elastic 致力于构建大规模实时数据处理软件，场景主要涵盖搜索、日志、安全与数据分析等领域。公司成立于 2012 年，旗下拥有产品包括开源的 Elastic Stack（Elasticsearch、Kibana、Beats 和 Logstash）、 X-Pack （商业特性）和 Elastic Cloud （一种托管服务）。迄今为止，这些产品的累积下载次数已超过 2.25 亿。Elastic 由 Benchmark Capital、Index Ventures 及 NEA 投资，投资额超过 1 亿美金。Elastic 拥有超过 800 位员工，分布于世界上 30 多个国家和地区。欲了解详情请访问：elastic.co。
媒体联系人：
Michael Lindenberger
Reidy Communications for Elastic
(415) 531-1449
亚太地区 Jeff Yoshimura
Communications @ Elastic
Elastic Stack 全新推出 6.0.0
资讯动态 • medcl 发表了文章 • 2 个评论 • 3420 次浏览 • 2017-11-15 13:34
全新推出 6.0.0。
无需多说。你应该立即下载试用，或者通过你最喜欢的托管式 Elasticsearch 和 Kibana 提供平台 亲身体验。
如果你在过去几个月没有跟上我们的发布节奏，可能会对今天的公告感到意外。今天标志着成千上万的 pull 请求和成百上千位代码提交者的努力终见成效。期间共有两个 alpha 版本、两个 beta 版本、两个候选版本以及最终的通用版本 (GA)。这个里程碑离不开 Elastic 各路团队的努力。还要感谢参与的用户提出的意见和反馈。
今天，我们不仅发布了整套 Elastic Stack，还发布了 ，其中包括 6.0 支持、离线安装，并且对用户体验进行了一系列改进，旨在简化集群的配置、管理和监控。同天发布多款产品的正式版本还不够……还有仍是 Alpha 版本的 APM ，我们邀请大家在 6.0.0 中对它进行测试。
一个版本有如此多的亮点，该从哪里说起呢？你们撰文细述也好，提供详情链接也好，祝你们有愉快的阅读体验……更重要的是……祝你们有愉快的搜索、分析和可视化体验。
Elasticsearch
全新零停机升级体验，增加了序列 ID、改进了对稀疏数据的处理、加快了查询速度、分布式执行 watch 等等。功能摘要请查看。
Kibana
支持 “Dashboard Only” 模式，支持 “全屏” 模式，能够将保存的搜索结果导出到 .csv，X-Pack 黄金版及以上版本支持通过 UI 创建告警，X-Pack 基础版提供迁移助手，我们还通过调整对比度、支持快捷键来产品易用性，让用户使用起来更方便。数据交互的未来详见。
Logstash
单一 Logstash 实例中可存在多个自成体系的管道，另有新增 UI 组件 - X-Pack 基础版中的管道查看器，以及 X-Pack 黄金版中的 Logstash 管道管理。了解详情，。
Beats
Beats <3 容器以及 Beats <3 模块（并且改进了适用于这些模块的仪表板）。再结合全新命令和配置布局，在 Metricbeat 实现更高效的存储。此外，全新推出 Auditbeat。细节详见。
ES-Hadoop
对Spark的结构化数据流的一流支持已经降落到了 6.0，并重新编写了连接器映射代码以更好地支持多个映射。支持读写新的连接字段也被添加了。用户现在也可以利用非内联脚本类型的更新操作。。
立即获取！
[招聘] ?Elastic 邀您一起共创开源事业 ❄️
求职招聘 • medcl 发表了文章 • 6 个评论 • 8625 次浏览 • 2017-07-27 16:20
- 英语流利沟通
- 掌握现代开发技术
- 贡献过Elastic相关开源项目者优先
- y
请教大神，关于MultiSearch传入多个查询请求后，查询出来的多个结果怎么和传参关联上
回复Elasticsearch • zec 回复了问题 • 4 人关注 • 3 个回复 • 4867 次浏览 • 2020-01-14 15:58
分组聚合后，怎么给TopHits中的列表数据排序
回复Elasticsearch • johnsontang 回复了问题 • 5 人关注 • 5 个回复 • 8539 次浏览 • 2019-11-04 17:27
ES迁移分片时，对于正在更新分片是如何迁移的？
回复Elasticsearch • alonglee 回复了问题 • 7 人关注 • 4 个回复 • 3864 次浏览 • 2019-10-17 17:05
用curator删除定时删除索引，删除后集群不知为何又重建创建了这个索？
回复Elasticsearch • chengzi_xs 回复了问题 • 5 人关注 • 4 个回复 • 5758 次浏览 • 2019-09-17 17:48
HDFS 定期写入文件，存入elasticsearch实现全文检索
回复Elasticsearch • laoyang360 回复了问题 • 5 人关注 • 3 个回复 • 2093 次浏览 • 2019-08-16 13:05
修改filebeat索引名，在kibana里创建索引时没有索引到相关索引，好绝望啊~ 求大神指点迷津
回复Beats • bellengao 回复了问题 • 2 人关注 • 1 个回复 • 5388 次浏览 • 2019-08-10 16:51
设置cluster.routing.allocation.enable为none,禁用分片分配的问题
回复Elasticsearch • hapjin 回复了问题 • 3 人关注 • 2 个回复 • 10903 次浏览 • 2019-08-06 19:45
ES2.3版本，delete一个索引，master日志并没有记录相关delete操作？
回复Elasticsearch • JackGe 回复了问题 • 5 人关注 • 3 个回复 • 2209 次浏览 • 2019-01-25 12:57
threadpool.bulk.queue_size”这个参数可以的通过API更新吗？
回复Elasticsearch • xiaoyanghapi 回复了问题 • 5 人关注 • 3 个回复 • 7755 次浏览 • 2018-12-27 15:56
【年度盛会】Elastic 中国开发者大会 2021 八折购票火热进行中
活动 • liaosy 发表了文章 • 0 个评论 • 96 次浏览 • 1 天前
Elastic日报 第1295期 (2021-12-29)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 75 次浏览 • 1 天前
【1月8日】Elastic 中国开发者大会 2021 日程新鲜出炉！福利票抢先购！
Elasticsearch • liaosy 发表了文章 • 0 个评论 • 94 次浏览 • 3 天前
重要的事情说三遍
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
- Elastic 中国开发者大会 2021 的精彩日程现已上线！
关于本次大会
Elastic 中国开发者大会 2021 是由 Elastic 官方、Elastic 足球社区和极限科技联合主办的开发者大会，作为中国国内唯一一个专门讨论 Elasticsearch 开源技术的大会，是中国最权威和最具实力干货的技术大会，其专业性和内容的质量一直以来在业内都是有口皆碑。本次大会邀请的演讲嘉宾有来自 Elastic 官方、Google、腾讯、阿里巴巴、字节跳动、vivo等众多公司的技术专家，为中国广大的 Elasticsearch 开发者提供一个技术交流和学习切磋的地方，汇集业界众多的成功案例，集思广益，发散思维，促进社区和行业的进步。
更多详细介绍请参见大会官网：
关于大会议程
精彩内容不容错过，八折购票火热进行中（折扣码: 80OFF），扫码购买。
Elastic日报 第1288期 (2021-12-22)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 91 次浏览 • 3 天前
Elastic日报 第1281期 (2021-12-15)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 179 次浏览 • 2021-12-15 10:04
Elastic日报 第1274期 (2021-12-08)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 186 次浏览 • 2021-12-08 10:37
Elastic日报 第1267期 (2021-12-01)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 200 次浏览 • 2021-12-01 14:44
Elastic日报 第1260期 (2021-11-24)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 224 次浏览 • 2021-11-24 11:54
Elastic日报 第1247期 (2021-11-12)
Elastic日报 • kin122 发表了文章 • 0 个评论 • 200 次浏览 • 2021-11-13 23:20
Elastic 中国开发者大会 2021 开启了，预热铁粉票已开抢，手慢无！
活动 • liaosy 发表了文章 • 0 个评论 • 429 次浏览 • 2021-11-11 17:45
训练营报名中 | 5天突破Elasticsearch全观测日志分析能力
Elasticsearch • zengcici 发表了文章 • 0 个评论 • 1168 次浏览 • 2020-09-08 11:43
报名时间：截止 2020年9月13日 23:59分 报名链接：
训练营介绍
奖品介绍
云栖大会 | Elasticsearch 场景化应用专场，将于2020年9月18日 下午13:00开始，如果你不想错过，马上订阅吧
更多Elasticsearch 场景化应用，请下载白皮书【Elasticsearch 八大经典应用】 下载链接：
报名时间：截止 2020年9月13日 23:59分 报名链接：
训练营介绍
奖品介绍
云栖大会 | Elasticsearch 场景化应用专场，将于2020年9月18日 下午13:00开始，如果你不想错过，马上订阅吧
更多Elasticsearch 场景化应用，请下载白皮书【Elasticsearch 八大经典应用】 下载链接：
Elasitcsearch中国开发者报告调研 | 获奖名单公布
活动 • zengcici 发表了文章 • 1 个评论 • 1191 次浏览 • 2019-12-04 20:37
Elastic&滴滴 meetup杭州站 2019年9月7日，抓紧报名哦
活动 • Allwang 发表了文章 • 5 个评论 • 4042 次浏览 • 2019-07-22 10:38
腾讯云 Elasticsearch 服务：中国及全球范围内的全新合作关系
资讯动态 • medcl 发表了文章 • 0 个评论 • 2126 次浏览 • 2019-05-22 17:44
Shay Banon: 关于“Open” Distro、开源和公司建设的几点思考
资讯动态 • medcl 发表了文章 • 1 个评论 • 2685 次浏览 • 2019-03-13 10:19
