Model

Datadog Meluncurkan Scout, Model Kecerdasan Buatan Khusus untuk Investigasi SRE

1 November 2026 · Baca 2 menit

white robot
Arseny Togulev / Unsplash

Datadog telah merilis Scout, sebuah model yang dilatih untuk menyelidiki masalah produksi. Model ini beroperasi di dalam Bits Investigation, yang merupakan produk SRE kecerdasan buatan milik perusahaan tersebut, di mana Scout dapat mengambil peringatan, memeriksa telemetri, dan menyarankan penyebab masalah.

Saat ini, para insinyur Datadog dan sejumlah kecil pelanggan sedang menggunakan model ini dalam pratinjau tertutup. Fokus utama dari pengembangan ini adalah biaya, karena investigasi sering kali membutuhkan banyak panggilan model saat Bits mencoba kueri, mempelajari hasil, dan memutuskan langkah pemeriksaan selanjutnya. Datadog menyatakan bahwa biaya model tujuan umum menyulitkan penerapan pada setiap peringatan, sehingga mereka menginginkan Bits mulai bekerja saat insinyur masih menanggapi panggilan.

Scout didasarkan pada GLM-5.3 Flash dan dilatih lebih lanjut menggunakan pembelajaran penguatan dengan simulasi insiden dari pola kasus historis. Simulasi tersebut mencakup peringatan, telemetri yang dapat dikueri, dan penyebab yang diketahui, namun menurut perusahaan, tidak mengandung data pelanggan. Scout berlatih menggunakan alat yang dimodelkan berdasarkan alat di Bits, termasuk pencarian log, metrik, jejak, serta pemeriksaan kode, penerapan, dan bendera fitur.

Dalam tolok ukur AlertEval milik Datadog, Scout medium menerima skor yang serupa dengan GPT-6.1 Sol high dan Claude Opus 5.5 high, namun dengan perkiraan biaya inferensi antara tiga hingga delapan kali lebih rendah. Pada pengaturan xhigh, Datadog mengklaim Scout menyamai Claude Fable 5.1 xhigh dengan biaya seperempatnya. AlertEval menggunakan peringatan nyata, telemetri arsip, dan penjelasan dari insinyur Datadog, di mana hakim model bahasa besar membandingkan laporan Scout dengan laporan ahli.

Evaluasi kedua dilakukan pada SREGym, kumpulan publik berisi 90 kesalahan. Scout menyelesaikan 71 kasus pada upaya medium, 79 pada high, dan 80 pada xhigh, sementara GPT-6.1 Sol xhigh menyelesaikan 82 kasus. Datadog melakukan pengujian ini sendiri, sehingga hasil independen dianggap akan berguna. Akun berita kecerdasan buatan independen, AGTP, menunjukkan bahwa AlertEval belum diuji secara independen dan meminta jejak audit mengenai bukti yang dipertimbangkan atau dibuang oleh Scout.

Datadog belum memberikan tanggal untuk ketersediaan umum. Perusahaan berencana menambahkan lebih banyak jenis kegagalan ke dalam simulasi dan nantinya memungkinkan Bits untuk melakukan perbaikan. Dalam tahap pratinjau, Scout hanya melakukan investigasi, memberikan diagnosis, dan mengusulkan tindakan pemulihan, sementara insinyur tetap bertanggung jawab atas perubahan tersebut.