Observability:用 OpenTelemetry 自动检测 Python 应用程序

作者:来自 Elastic Bahubali Shetti

了解如何使用 OpenTelemetry 自动检测 Python 应用程序。使用 Docker 文件中的标准命令,可以快速检测应用程序,而无需在多个位置编写代码,从而实现快速更改、扩展和更轻松的管理。

更多阅读,请参阅 “OpenTelemetry Python Elastic 分发简介”。

DevOps 和 SRE 团队正在改变软件开发过程。虽然 DevOps 工程师专注于高效的软件应用程序和服务交付,但 SRE 团队是确保可靠性、可扩展性和性能的关键。这些团队必须依赖全栈可观察性解决方案,该解决方案使他们能够管理和监控系统,并确保在问题影响业务之前得到解决。

整个现代分布式应用程序堆栈的可观察性需要数据收集、处理和关联,通常以仪表板的形式进行。提取所有系统数据需要跨堆栈、框架和提供商安装代理 - 对于必须处理版本更改、兼容性问题和无法随着系统变化而扩展的专有代码的团队来说,这个过程可能具有挑战性且耗时。

得益于 OpenTelemetry (OTel),DevOps 和 SRE 团队现在拥有一种标准的方式来收集和发送数据,这种方式不依赖于专有代码,并且拥有一个庞大的支持社区,从而减少了供应商锁定。

在之前的博客中,我们还回顾了如何使用 OpenTelemetry 演示并将其连接到 Elastic®,以及 Elastic 的一些功能与 OpenTelemetry 可视化和 Kubernetes 的结合。

在本博客中,我们将展示如何使用我们应用程序的 Python 服务 Elastiflix 对 OpenTelemetry 进行自动检测,这有助于以简单的方式突出显示自动检测。

这样做的好处是不需要 otel-collector!此设置使你能够根据最适合你业务的时间表,使用 Elastic 将应用程序缓慢而轻松地迁移到 OTel。

应用程序、先决条件和配置

我们在本博客中使用的应用程序称为 Elastiflix,这是一款电影流应用程序。它由用 .NET、NodeJS、Go 和 Python 编写的几个微服务组成。

在我们检测示例应用程序之前,我们首先需要了解 Elastic 如何接收遥测数据。

Elastic Observability 的所有 APM 功能均可通过 OTel 数据使用。其中包括:

  • 服务地图 - service maps
  • 服务详细信息(延迟、吞吐量、失败 transactions)
  • 服务之间的依赖关系、分布式跟踪
  • 事务(跟踪)
  • 机器学习 (ML) 关联
  • 日志关联

除了 Elastic 的 APM 和遥测数据的统一视图外,你还可以使用 Elastic 强大的机器学习功能来减少分析和警报,以帮助减少 MTTR。

先决条件

  • Elastic Cloud 帐户 — 立即注册
  • Elastiflix 演示应用程序的克隆,或你自己的 Python 应用程序
  • 对 Docker 有基本了解 — 可能需要安装 Docker Desktop
  • 对 Python 有基本了解

查看示例源代码

完整的源代码(包括本博客中使用的 Dockerfile)可在 GitHub 上找到。存储库还包含相同的应用程序(未进行检测)。这样你就可以比较每个文件并查看差异。

以下步骤将向你展示如何检测此应用程序并在命令行或 Docker 中运行它。如果你对更完整的 OTel 示例感兴趣,请查看此处的 docker-compose 文件,它将显示完整的项目。

分步指南

步骤 0. 登录你的 Elastic Cloud 帐户

本博客假设你拥有 Elastic Cloud 帐户 — 如果没有,请按照说明开始使用 Elastic Cloud。

步骤 1. 为 Python 服务配置自动检测

我们将使用来自 Elastiflix 演示应用程序的 Python 服务自动检测。

我们将使用来自 Elastiflix 的以下服务:

Elastiflix/python-favorite-otel-auto

根据 OpenTelemetry Automatic Instrumentation for Python 文档,你只需使用 pip install 安装适当的 Python 包。

>pip install opentelemetry-distro \opentelemetry-exporter-otlp>opentelemetry-bootstrap -a install

如果你在命令行上运行 Python 服务,那么你可以使用以下命令:

opentelemetry-instrument python main.py

对于我们的应用程序,我们将如下部分作为 Dockerfile 的一部分来执行。

Dockerfile

FROM python:3.9-slim as base# get packages
COPY requirements.txt .
RUN pip install -r requirements.txt
WORKDIR /favoriteservice#install opentelemetry packages
RUN pip install opentelemetry-distro \opentelemetry-exporter-otlpRUN opentelemetry-bootstrap -a install# Add the application
COPY . .EXPOSE 5000
ENTRYPOINT [ "opentelemetry-instrument", "python", "main.py"]

第 2 步。使用环境变量运行 Docker 映像

如 OTEL Python 文档中所述,我们将使用环境变量并传入配置值以使其能够连接到 Elastic Observability 的 APM 服务器。

由于 Elastic 原生接受 OTLP,我们只需提供 OTEL Exporter 需要发送数据的端点和身份验证,以及一些其他环境变量。

获取 Elastic Cloud 变量

你可以从 Kibana® 的路径 /app/home#/tutorial/apm 下复制端点和令牌。

你需要复制以下环境变量:

OTEL_EXPORTER_OTLP_ENDPOINT
OTEL_EXPORTER_OTLP_HEADERS

构建镜像

docker build -t  python-otel-auto-image .

运行镜像

docker run \-e OTEL_EXPORTER_OTLP_ENDPOINT="<REPLACE WITH OTEL_EXPORTER_OTLP_ENDPOINT>" \-e OTEL_EXPORTER_OTLP_HEADERS="Authorization=Bearer%20<REPLACE WITH TOKEN>" \-e OTEL_RESOURCE_ATTRIBUTES="service.version=1.0,deployment.environment=production" \-e OTEL_SERVICE_NAME="python-favorite-otel-auto" \-p 5001:5001 \python-otel-auto-image

重要提示:请注意 “OTEL_EXPORTER_OTLP_HEADERS” 变量在 Bearer 转义后将空格标记为 “%20” —— 这是 Python 的要求。

你现在可以发出一些请求来生成跟踪数据。请注意,这些请求预计会返回错误,因为此服务依赖于你当前未运行的 Redis 连接。如前所述,你可以在此处找到使用 docker-compose 的更完整示例。

curl localhost:5000/favorites# or alternatively issue a request every secondwhile true; do curl "localhost:5000/favorites"; sleep 1; done;

步骤 3:探索 Elastic APM 中的跟踪、指标和日志

探索 Elastic APM 中的服务部分,你将看到显示的 Python 服务。

单击 python-favorite-otel-auto 服务,你可以看到它正在使用 OpenTelemetry 提取遥测数据。

在本博客中,我们讨论了以下内容:

  • 如何使用 OpenTelemetry 自动检测 Python
  • 使用 Dockerfile 中的标准命令,可以高效地完成自动检测,而无需在多个位置添加代码

由于 Elastic 可以支持多种数据提取方法,无论是使用开源 OpenTelemetry 的自动检测还是使用其原生 APM 代理进行手动检测,你都可以先计划迁移到 OTel,重点关注几个应用程序,然后以最适合你业务需求的方式在你的应用程序中使用 OpenTelemety。

还没有 Elastic Cloud 帐户?注册 Elastic Cloud 并试用我上面讨论的自动检测功能。我很想听听你对使用 Elastic 深入了解应用程序堆栈的体验的反馈。

本文中描述的任何特性或功能的发布和时间均由 Elastic 自行决定。任何当前不可用的特性或功能可能无法按时交付或根本无法交付。

原文:https://www.elastic.co/observability-labs/blog/auto-instrumentation-python-applications-opentelemetry

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/63200.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

利用tablesaw库简化表格数据分析

tableaw是处理表格数据的优秀工具。它提供了一组强大而灵活的功能&#xff0c;使操作、分析和可视化数据表变得容易。在这篇博文中&#xff0c;我们将介绍tableaw的主要特性、如何使用这些特性&#xff0c;以及如何使用tableaw处理表格数据的一些示例。 tablesaw简介 tableaw…

通过精密时间协议(PTP)对计算机网络中的多个设备进行时间同步

PTP 模块 - 使用教程 目录 PTP 模块 - 使用教程简介第 1 步&#xff1a;为主时钟创建一个 PTP 时钟实例第 2 步&#xff1a;添加 PTP 端口第 3 步&#xff1a;查询 PTP 时钟或 PTP 端口的状态第 4 步&#xff1a;清除 FAULTY 状态第 5 步&#xff1a;为 PTP 事件安装处理程序第…

【深度学习】利用Java DL4J 训练金融投资组合模型

🧑 博主简介:CSDN博客专家,历代文学网(PC端可以访问:https://literature.sinhy.com/#/literature?__c=1000,移动端可微信小程序搜索“历代文学”)总架构师,15年工作经验,精通Java编程,高并发设计,Springboot和微服务,熟悉Linux,ESXI虚拟化以及云原生Docker和K8s…

支持向量机算法:原理、实现与应用

摘要&#xff1a; 本文深入探讨支持向量机&#xff08;Support Vector Machine&#xff0c;SVM&#xff09;算法&#xff0c;详细阐述其原理、数学模型、核函数机制以及在分类和回归问题中的应用方式。通过以 Python 和 C# 为例&#xff0c;展示 SVM 算法在不同编程环境下的具体…

STM32编码器接口及编码器测速模板代码

编码器是什么&#xff1f; 编码器是一种将角位移或者角速度转换成一连串电数字脉冲的旋转式传感 器&#xff0c;我们可以通过编码器测量到底位移或者速度信息。编码器从输出数据类型上 分&#xff0c;可以分为增量式编码器和绝对式编码器。 从编码器检测原理上来分&#xff0…

TCP连接过程中涉及到的状态转换

TCP连接过程中涉及到的状态转换 TCP 服务器和客户端都要有一定的数据结构来保存这个连接的信息。 在这个数据结构中其中就有一个属性叫做 “状态” 操作系统内核根据状态的不同&#xff0c;决定了当前应该干什么。(不会迷茫也不会混乱) LISTEN LISTEN状态&#xff0c;表示服务…

COCO数据集理解

COCO&#xff08;Common Objects in Context&#xff09;数据集是一个用于计算机视觉研究的广泛使用的数据集&#xff0c;特别是在物体检测、分割和图像标注等任务中。COCO数据集由微软研究院开发&#xff0c;其主要特点包括&#xff1a; 丰富的标签&#xff1a;COCO数据集包含…

github仓库自动同步到gitee

Github Actions是Github推出的自动化CI/CD的功能&#xff0c;我们将使用Github Actions让Github仓库同步到Gitee 同步的原理是利用 SSH 公私钥配对的方式拉取 Github 仓库的代码并推送到 Gitee 仓库中&#xff0c;所以我们需要以下几个步骤 生成 SSH 公私钥添加公钥添加私钥配…

【六足机器人】03步态算法

温馨提示&#xff1a;此部分内容需要较强的数学能力&#xff0c;包括但不限于矩阵运算、坐标变换、数学几何。 一、数学知识 1.1 正逆运动学&#xff08;几何法&#xff09; 逆运动学解算函数 // 逆运动学-->计算出三个角度 void inverse_caculate(double x, double y, …

Netty面试内容整理-编码实战相关问题

在 Netty 面试中,编码实战相关的问题会考察你的动手能力,具体包括 Netty 框架的使用、如何设计网络协议、如何处理一些常见的实际开发问题等。以下是一些常见的编码实战相关面试问题及要点: 如何实现一个简单的 Netty Echo 服务器? 一个 Echo 服务器是 Netty 编码的经典示例…

文化央企再一次声明

央企再次声明 中传国华&#xff08;北京&#xff09;科技有限公司&#xff0c;成立于2023年5月29日&#xff0c;原法定代表人曹忠喜&#xff0c;统一社会信用代码&#xff1a;91110117MACL4B9A91&#xff0c;我司中传世纪控股&#xff08;北京&#xff09;有限公司系该司的原股…

Ubuntu实时流量检测

nethogs启动 安装nethogs sudo apt install nethogs流量检测 sudo nethogs效果如下&#xff1a; 可以看到收发流量的进程PID&#xff0c;进程目录&#xff0c;发送设备&#xff0c;以及收发速率&#xff1b;但这里有个unkown TCP进程是什么呢? 可以用ps -e 列出操作前后的…

大数据新视界 -- 大数据大厂之 Hive 临时表与视图:灵活数据处理的技巧(上)(29 / 30)

&#x1f496;&#x1f496;&#x1f496;亲爱的朋友们&#xff0c;热烈欢迎你们来到 青云交的博客&#xff01;能与你们在此邂逅&#xff0c;我满心欢喜&#xff0c;深感无比荣幸。在这个瞬息万变的时代&#xff0c;我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而 我的…

【C语言】二维数组前缀和

相信你是最棒哒&#xff01;&#xff01;&#xff01; 文章目录 问题描述 题目代码&#xff1a; 总结 问题描述 输入一个 &#x1d45b;n 行 &#x1d45a;m 列的整数矩阵&#xff0c;再输入 &#x1d45e;q 个询问&#xff0c;每个询问包含四个整数 &#x1d465;1,&#x…

使用脚本语言实现Lumerical官方案例——闪耀光栅(Blazed grating)(纯代码)(2)

接《使用脚本语言实现Lumerical官方案例——闪耀光栅(Blazed grating)(纯代码)(1)》 一、添加分析组 1.1 代码实现 #添加分析组 addanalysisgroup(); set("name", "grating_R"); set("x", 0); set("y", 2.5*um); addanalysisgrou…

车载测试技术栈

软件测试理论知识 了解软件测试的基本概念、流程和方法&#xff0c;包括测试需求分析、测试用例设计、测试执行、缺陷发现和修复等。 汽车行业知识 熟悉汽车行业的特点和规范&#xff0c;了解汽车的构造和工作原理&#xff0c;包括发动机、底盘、电气系统等。 通信协议知识 …

61 基于单片机的小车雷达避障及阈值可调

所有仿真详情导航&#xff1a; PROTEUS专栏说明-CSDN博客 目录 一、主要功能 二、硬件资源 三、主程序编程 四、资源下载 一、主要功能 基于51单片机&#xff0c;采用超声波传感器检测距离&#xff0c;通过LCD1602显示屏显示&#xff0c;三个按键&#xff0c;第一个按键是…

Linux基本命令---文件权限与用户管理

在Linux系统中&#xff0c;文件权限与用户管理是两个核心概念&#xff0c;它们共同维护着系统的安全性和稳定性。以下是如何在Linux系统中体验文件权限与用户管理的详细步骤&#xff1a; 一、用户管理 创建新用户 使用adduser命令可以创建新用户。例如&#xff0c;创建一个名为…

Ubuntu——extrepo添加部分外部软件源

extrepo 是一个用于 Ubuntu 和其他基于 Debian 的系统的工具&#xff0c;它的主要作用是简化和管理外部软件源&#xff08;repositories&#xff09;的添加和更新。通过使用 extrepo&#xff0c;用户可以方便地添加、删除和管理第三方软件源&#xff0c;而不需要手动编辑源列表…

Java集合排序技术详解

在Java编程中&#xff0c;对集合进行排序是一项常见的任务。Java提供了多种方式来对集合进行排序&#xff0c;包括使用Collections.sort()、Arrays.sort()、List接口的sort()方法以及Java 8引入的Stream API。本文将详细介绍这些排序技术&#xff0c;并探讨它们的使用场景和性能…