Datadog: nó là gì, giám sát ứng dụng và khả năng quan sát

Datadog là gì?

Datadog là nền tảng giám sát đám mây và khả năng quan sát được ra mắt vào năm 2010 bởi Olivier Pomel và Alexis Lê-Quôc. Nền tảng cung cấp bảng điều khiển thống nhất để thu thập các chỉ số, log và dấu vết từ hạ tầng, ứng dụng và thiết bị người dùng. Không giống các giải pháp riêng lẻ, Datadog kết hợp APM, log, giám sát hạ tầng, Synthetic Monitoring và RUM trong một sản phẩm duy nhất.

Kiến trúc của Datadog được xây dựng trên các tác nhân — các chương trình nhẹ được cài đặt trên máy chủ hoặc nhúng vào ứng dụng. Tác nhân thu thập dữ liệu và gửi nó đến hạ tầng đám mây Datadog qua kết nối mã hóa. Cho các nền tảng di động, Datadog cung cấp SDK gốc hoạt động trên Android (Kotlin, Java) và iOS (Swift, Objective-C).

Theo báo cáo Gartner Magic Quadrant for APM and Observability (2024), Datadog được công nhận là nhà lãnh đạo trong hạng mục khả năng quan sát với bộ khả năng tích hợp rộng nhất. Nền tảng được sử dụng bởi các công ty như Samsung, Adidas và Peloton để giám sát hàng triệu thiết bị mỗi ngày.

Đối với các nhóm di động, Datadog đặc biệt có giá trị vì nó liên kết hiệu suất backend với trải nghiệm người dùng trên thiết bị. Nếu một API bắt đầu phản hồi chậm hơn, Datadog không chỉ hiển thị thời gian phản hồi của máy chủ mà còn cho thấy nó đã ảnh hưởng đến thời gian khởi động hoặc kết xuất màn hình trên một mẫu điện thoại cụ thể như thế nào.

Các thành phần chính của nền tảng

Infrastructure Monitoring theo dõi các chỉ số CPU, bộ nhớ, đĩa và mạng cho máy chủ, container và cụm Kubernetes. APM (Application Performance Monitoring) thu thập các dấu vết cho mỗi yêu cầu đi qua hệ thống phân tán và hiển thị độ trễ tại mỗi chặng. Quản lý Log tập trung tất cả các log — từ hệ thống đến ứng dụng — với tìm kiếm toàn văn và khả năng tạo chỉ số từ log. Synthetic Monitoring mô phỏng các kịch bản người dùng từ các vị trí địa lý khác nhau. Real User Monitoring (RUM) thu thập dữ liệu từ các thiết bị người dùng thực tế, bao gồm điện thoại di động và máy tính bảng.

Mô hình định giá

Datadog sử dụng mô hình trả tiền theo mức sử dụng với định giá theo sản phẩm: host hạ tầng, host APM, log (khối lượng tính bằng gigabyte), phiên RUM và bài kiểm tra Synthetic. Mỗi sản phẩm được tính phí riêng biệt, cho phép bạn chỉ trả tiền cho các tính năng bạn sử dụng. Giá bắt đầu từ 15 $ mỗi host mỗi tháng cho giám sát hạ tầng và 1 $ cho 10.000 phiên RUM. Các startup có thể đăng ký chương trình Datadog for Startups với tín dụng lên đến 100.000 $.

Datadog APM và Distributed Tracing

Application Performance Monitoring (APM) trong Datadog là hệ thống distributed tracing theo dõi mỗi yêu cầu từ khi vào cho đến khi hoàn thành tất cả các hoạt động lồng nhau. APM tự động instrument các framework và thư viện phổ biến: Spring Boot, Django, Express.js, ASP.NET Core và các framework khác. Cho mỗi yêu cầu, APm xây dựng biểu đồ ngọn lửa — biểu diễn trực quan thời gian thực thi trên tất cả các đường dẫn mã.

Biểu đồ ngọn lửa cho thấy mỗi lời gọi hàm hoặc yêu cầu dịch vụ bên ngoài mất bao lâu. Nếu một phương thức cơ sở dữ liệu mất 2 giây thay vì 200 mili giây như mong đợi, điều này sẽ thấy ngay trên biểu đồ. Datadog APM hỗ trợ OpenTelemetry — tiêu chuẩn mở cho thu thập đo xa — cho phép bạn kết nối công cụ từ bất kỳ nhà cung cấp tương thích nào.

Theo Benchling Engineering Blog (2024), việc di chuyển sang Datadog APM đã giúp giảm thời gian chẩn đoán sự cố của nhóm từ 45 phút xuống còn 8 phút thông qua tương quan tự động của các dấu vết với log và chỉ số. Kịch bản chính là tương quan dấu vết-log: với một ID dấu vết duy nhất, bạn có thể tìm tất cả các log liên quan đến một yêu cầu cụ thể mà không cần tìm kiếm thủ công.

Bản đồ Dịch vụ và các phụ thuộc

Bản đồ Dịch vụ là một đồ thị được xây dựng tự động của tất cả các dịch vụ hệ thống và sự kết nối giữa chúng. Mỗi dịch vụ được hiển thị dưới dạng một nút và các kết nối giữa các nút cho thấy những lời gọi nào xảy ra giữa các dịch vụ. Màu sắc của nút phản ánh trạng thái sức khỏe: xanh lá — hoạt động bình thường, vàng — độ trễ tăng, đỏ — lỗi. Bản đồ Dịch vụ giúp nhanh chóng xác định dịch vụ nào là nút cổ chai, ngay cả khi không có kiến thức trước về kiến trúc.

import datadog.trace.api.Trace;
import io.opentelemetry.api.trace.Span;

public class PaymentService {

    @Trace(resourceName = "PaymentService.processPayment")
    public PaymentResult processPayment(Order order) {
        Span span = Tracer.buildSpan("validate.payment").start();
        try {
            PaymentGateway gateway = new PaymentGateway();
            PaymentResult result = gateway.charge(order.getAmount());
            span.setTag("payment.provider", "stripe");
            return result;
        } finally {
            span.close();
        }
    }
}

Real User Monitoring cho ứng dụng di động

Real User Monitoring (RUM) trong Datadog thu thập dữ liệu từ các thiết bị người dùng thực tế — thời gian tải màn hình, khả năng phản hồi cảm ứng, mức tiêu thụ bộ nhớ, tần suất ANR (Application Not Responding) và tỷ lệ sự cố. SDK RUM cho Android và iOS được tích hợp vào ứng dụng và tự động tạo các phiên, nhóm tất cả các sự kiện trong một tương tác người dùng duy nhất.

Mỗi phiên RUM chứa một chuỗi các sự kiện: mở màn hình, nhấn nút, yêu cầu mạng, cuộn. Cho mỗi sự kiện, Datadog ghi lại dấu thời gian, thời lượng và các đặc tính kỹ thuật của thiết bị: mô hình, HĐH, phiên bản ứng dụng, loại kết nối. Điều này cho phép lọc các chỉ số theo phiên bản và thiết bị cụ thể. Ví dụ, bạn có thể thấy rằng thời gian khởi động đã tăng trên Android 14 với một mẫu Samsung cụ thể.

RUM được tích hợp chặt chẽ với APM: nếu một phiên người dùng kết thúc với lỗi trên màn hình thanh toán, Datadog tự động hiển thị dấu vết backend tương ứng. Điều này tăng tốc độ chẩn đoán lên 5-7 lần so với việc so khớp thủ công các log frontend và backend. Cho các nhóm di động, RUM cũng cung cấp các báo cáo danh sách theo dõi — tổng quan hàng tuần về sự suy giảm của các chỉ số chính.

Thiết lập giám sát lỗi RUM

Datadog RUM tự động thu thập báo cáo sự cố với stacktrace đầy đủ, bao gồm số dòng mã nguồn. Cho Android, điều này hoạt động thông qua tích hợp với ACRA hoặc Firebase Crashlytics; cho iOS — thông qua PLCrashReporter. Mỗi sự cố được liên kết với một phiên người dùng, cho phép phát lại chuỗi hành động dẫn đến sự cố. RUM cũng theo dõi ANR — một trong những sự kiện quan trọng nhất đối với ứng dụng Android. Nếu ứng dụng không phản hồi trong hơn 5 giây, Datadog ghi lại ANR và hiển thị kết xuất luồng đầy đủ tại thời điểm tắc nghẽn UI.

Ghi log và chỉ số hạ tầng

Quản lý Log trong Datadog tập trung tất cả các log ứng dụng và hạ tầng vào một kho lưu trữ duy nhất với tìm kiếm toàn văn. Các log di động (sự kiện phân tích, lỗi API, đo xa) được gửi từ thiết bị qua SDK và được hợp nhất với log máy chủ bằng cách sử dụng một định danh chung. Datadog tự động phân tích các log thành các trường có cấu trúc: cấp độ (INFO, WARN, ERROR), dịch vụ, host, dấu thời gian, thông điệp.

Để lọc log, Datadog sử dụng ngôn ngữ truy vấn riêng hỗ trợ ký tự đại diện, biểu thức chính quy và khía cạnh. Các log có thể được nhóm theo mẫu — Datadog tự động phát hiện các mẫu lặp lại và hiển thị chúng dưới dạng một cụm duy nhất. Điều này đặc biệt hữu ích khi phân tích hàng ngàn log từ các thiết bị di động: các lỗi giống nhau được nhóm lại và nhà phát triển thấy không phải 10.000 dòng mà là 10 cụm với tần suất xuất hiện.

Các chỉ số là các chuỗi thời gian số được thu thập ở khoảng cách từ 1 giây. Datadog hỗ trợ ba loại chỉ số: gauge (giá trị hiện tại), count (tổng trong khoảng) và rate (tốc độ thay đổi). Cho các ứng dụng di động, các chỉ số tùy chỉnh có thể theo dõi số lần mở màn hình, thời gian thực thi kịch bản kinh doanh chính hoặc tần suất sử dụng tính năng cụ thể. Các chỉ số tùy chỉnh được gửi qua DogStatsD — giao thức tương thích StatsD với các tiện ích mở rộng Datadog.

import com.datadog.android.Datadog
import com.datadog.android.log.Logger

class PaymentAnalytics {

    private val logger = Logger.Builder()
        .setDatadogLogsEnabled(true)
        .setNetworkInfoEnabled(true)
        .setBundleWithTraceEnabled(true)
        .build()

    fun trackCheckout(orderId: String, amount: Double) {
        logger.info(
            "Checkout initiated for order {orderId}",
            mapOf(
                "order.id" to orderId,
                "order.amount" to amount,
                "payment.method" to "credit_card"
            )
        )
    }
}

Tích hợp SDK Datadog vào dự án di động

SDK Datadog cho Android và iOS cung cấp một tập hợp các mô-đun thống nhất: Core (khởi tạo), RUM (giám sát trải nghiệm người dùng), Logs (gửi log), Trace (theo dõi yêu cầu). Cho Android, SDK được thêm qua Gradle; cho iOS — qua CocoaPods hoặc Swift Package Manager. Sau khi cài đặt, SDK được khởi tạo trong Application.onCreate (Android) hoặc AppDelegate (iOS) bằng cách truyền client token, môi trường và tên ứng dụng.

Để theo dõi tự động các yêu cầu mạng trên Android, OkHttp Interceptor được sử dụng; trên iOS — NSURLProtocol hoặc ủy quyền URLSession. Datadog cũng hỗ trợ tích hợp với các trình khách HTTP phổ biến: Retrofit, Apollo GraphQL, Ktor, Alamofire. Sau khi kết nối Interceptor, mỗi yêu cầu HTTP tự động được liên kết với một phiên RUM và dấu vết APM, tạo thành một chuỗi duy nhất từ khách hàng đến máy chủ.

Cấu hình qua Gradle (Android)

dependencies {
    // SDK chính và mô-đun RUM
    implementation "com.datadoghq:dd-sdk-android-core:2.15.0"
    implementation "com.datadoghq:dd-sdk-android-rum:2.15.0"
    // Tích hợp OkHttp cho tự động theo dõi
    implementation "com.datadoghq:dd-sdk-android-okhttp:2.15.0"
    // Báo cáo sự cố NDK
    implementation "com.datadoghq:dd-sdk-android-ndk:2.15.0"
}

Khởi tạo trên iOS (Swift)

import DatadogCore
import DatadogRUM
import DatadogLogs

@main class AppDelegate: UIResponder, UIApplicationDelegate {

    func application(
        _ application: UIApplication,
        didFinishLaunchingWithOptions: [UIApplication.LaunchOptionsKey: Any]?
    ) -> Bool {
        Datadog.initialize(
            with: DatadogConfiguration.builder(
                clientToken: "your_client_token",
                environment: "production"
            ).build()
        )
        RUM.enable(
            with: RUMConfiguration(applicationID: "your_rum_app_id")
        )
        return true
    }
}

Bảng điều khiển và cảnh báo Datadog

Datadog cung cấp trình chỉnh sửa bảng điều khiển đồ họa nơi bạn có thể kết hợp các biểu đồ chỉ số, bảng log, bản đồ cây phân phối lỗi và widget SLO. Các bảng điều khiển hỗ trợ các biến mẫu — ví dụ, bạn có thể tạo một bảng điều khiển cho tất cả các dịch vụ và chuyển đổi ngữ cảnh bằng cách sử dụng menu thả xuống với tên dịch vụ. Mỗi bảng điều khiển có thể được xuất bản ở chế độ chỉ đọc cho các bên liên quan bên ngoài thông qua một liên kết công khai.

Hệ thống Giám sát (cảnh báo) cho phép đặt các điều kiện ngưỡng cho bất kỳ chỉ số nào: nếu độ trễ vượt quá 500 ms trong hơn 5 phút — gửi thông báo đến Slack, PagerDuty hoặc email. Datadog hỗ trợ các điều kiện kết hợp: “Nếu lỗi 5xx > 1% và số lượng yêu cầu > 1000/phút, hãy nâng mức ưu tiên lên nghiêm trọng.” Đối với các nhóm di động, trình giám sát phát hiện suy thoái đặc biệt hữu ích — Datadog tự động so sánh chỉ số hiện tại với đường cơ sở lịch sử và cảnh báo khi có suy giảm có ý nghĩa thống kê.

Theo Gartner Peer Insights (2024), thời gian giải quyết trung bình (MTTR) cho các nhóm sử dụng trình giám sát Datadog với tương quan tự động giảm 35% trong tháng đầu tiên sau khi áp dụng. Điều này đạt được vì mỗi cảnh báo không chỉ chứa điều kiện kích hoạt mà còn có các liên kết đến bảng điều khiển, log và dấu vết liên quan — các nhà phát triển không cần chuyển đổi giữa các công cụ.