「Datadogを見ればすべてがわかる」状態を作っていく

ツール導入前の課題

EC2を基軸としたインフラ環境から、Kubernetes（EKS）を基軸としたインフラ環境への移行を検討していました。そのなかで、従来利用していた監視ツールでは、コンテナに特化した監視機能が不十分ではないかという課題が浮かび、監視ツールの再考を始めました。

どのような状態を目指していたか

EKSへの環境移行は数年に渡るため、コンテナのみならず、EC2の従来環境も含めて、1つのツールがワンストップで監視を担える状態を考えていました。

• Mackerel
• Amazon CloudWatch Container Insights（コンテナ監視のみ）
• Amazon Elasticsearch Service（ログ保存のみ）
• Prometheus（OSS）

以下の点を重視していました。

• コンテナ（Kubernetes、EKS）、サーバOS（EC2）それぞれに適した監視が可能であること
• 費用が妥当であること
• マルチプロダクト運用を行っているため、プロダクトごとにログなどを分離して収集できること
• ログやメトリクスなど、複数の指標を横断的に確認できること
• Infrastructure as Codeでの設定管理が可能であること

非常に多機能なSaaSであり、ログ監視やメトリクス監視といった機能ごとに複数のツールを使い分けることなく、Datadogだけであらゆる監視をまかなえそうだというイメージを持てたことが一番の決め手となりました。

また、先述した「重要視していた点」もそれぞれ満たすことができました。

• コンテナ（Kubernetes、EKS）、サーバOS（EC2）それぞれに適した監視が可能であること
  • Kubernetes向けの Helm Chart が用意されている。
  • AWSとのIntegration機能 があり、各AWSサービスに適した監視を行うことができる。
• 費用が妥当であること
  • 極めて安価というわけではないが、サーバ1ホストあたり15コンテナまで無料（当時）であったり、ボリュームディスカウントが存在するなど、妥当な金額設定と判断した。
• マルチプロダクト運用を行っているため、プロダクトごとにログなどを分離して収集できること
  • Organization で名前空間を分離したり、 RBAC でアクセス制御したりできる。
• ログやメトリクスなど、複数の指標を横断的に確認できること
  • アラート発生時に、その時間帯のログやメトリクスを簡単に追跡できる。
• Infrastructure as Codeでの設定管理が可能であること
  • Datadog社公式の Terraform Provider が用意されている。

改善したかった課題はどれくらい解決されたか

EC2、EKSなど環境の差異を気にせず、ログやメトリクスはすべてDatadogに収集される形をつくることができ、導入時の目的を果たすことができました。

どのような成果が得られたか

従来はメトリクスの監視、ログによるアラート、ログの閲覧、ログの長期間保存など、それぞれ別々のツールを利用していたのですが、Datadogはこれらすべての機能を有しているため、1つのツールで一貫した運用ができるようになりました。トラブルの際などは、プロダクトや構成を問わず、まずはDatadogを見ればよい、という状態になっていき、運用負荷が軽減できました。 また、いわゆるオブザーバビリティの向上に寄与するRUMやAPMといった機能も充実しているため、プロダクト開発チームでの活用も広がっていきました。

• Agentの設定項目 が多岐に渡り、適切な設定を理解しながら導入するのが難しい。
• AWSからのログの取り込み方法が、AWS Lambdaを利用する場合、Amazon Data Firehoseを利用する場合など複数存在しており、サービスによって使い分けなければならない。
• 初期状態では、1つのUI上であらゆるすべてのログが表示されるため、適切なフィルタリング設定などに慣れるまでは活用しづらい。
• Terraform Resourceで定義する各種設定値が、GUI上ではどこで設定されているのかわかりづらい場合がある。

ほとんどのアプリケーションやインフラストラクチャの監視に対応することができるため、機能不足で悩む場面は少なく、優秀なSaaSだと捉えています。一方では、多機能であるがためにオーバースペックになるケースもありえます。特に規模の小さな企業やプロダクトにおいては、自社のユースケースを満たす、よりシンプルな監視SaaSを比較検証してみてもよいかと思います。

今後も引き続きDatadogを利用していくことを考えています。長年の利用で料金が膨らんできている部分もあるため、適宜設定の見直しなどを行いつつ、うまく付き合っていきたいです。