Movatterモバイル変換

Azure2019年7月19日( 16:40 - 17:20 )インフラエンジニアが次に進むために~ Azure インフラ管理超実践セミナー福原毅 ( tfukuha )クラウドソリューションアーキテクトパートナー事業本部日本マイクロソフト株式会社Azure Monitor / Azure Monitor Logs で実現するモダンな管理手法

Azure Monitor 概要Azure Monitor Logs のデータソース• Azure Tenant• Azure Subscription• Azure Resources• Operating System ( Guest )• Application• Custom Sources• その他データソース ( Azure Security Center )まとめAppendix:• Analyze: Azure Monitor Logs(旧 Log Analytics )• 今後の理解促進のために• Azure のウェビナー• Azure サイトの歩き方• Azure アーキテクチャセンター• Microsoft Learn本日の内容

ライフサイクルをカバーするセキュリティと運用管理機能Azureの標準機能で、適切で、コスト効率の高い状態を維持保護セキュリティ監視構成管理ガバナンスセキュリティ管理脅威からの保護Microsoft AzurePortal | Azure Resource Manager |Azure Active Directory |移行アプリケーション、インフラストラクチャ、ネットワーク監視、ログ分析と診断

Azure Monitor のブランドの変更(2018年9月17日投稿)https://docs.microsoft.com/ja-jp/azure/azure-monitor/azure-monitor-rebrand今後も継続されます。エージェントやソリューションなど、LogAnalytics の一部と見なされていた他の機能は、Azure Monitorの機能に変更されます。機能は、Azure portal のエクスペリエンスに加えられる機能の改善以外に変更点はありません。Operations Management Suite ブランドの廃止Operations Management Suite (OMS) は、ライセンス目的で以下の Azure 管理サービスをバンドルしたものです。• Application Insights• Azure Automation• Azure Backup• Log Analytics• Site Recoveryこれらのサービスに新しい価格設定が導入されました。新規のお客様は OMS バンドルを入手できなくなりました。前述の AzureMonitor への統合を除いて、OMS の一部だったサービスは変更されていません。監視サービスを Azure Monitor への統合Log Analytics と Application Insights は、Azure リソースとハイブリッド環境を監視する単一の統合エクスペリエンスを提供するためにAzure Monitor に統合されました。これらのサービスから削除された機能はありません。機能を失ったり妥協したりすることなく、これまでと同じシナリオを実行できます。これらの各サービスのドキュメントは、Azure Monitor の単一のコンテンツセットに統合されています。そのため、特定の監視シナリオに関するすべてのコンテンツを 1 つの場所で見つけることができます。複数のコンテンツセットを参照する必要はありません。統合サービスの進化に伴って、今後もコンテンツの統合を進める予定です。Log Analytics の再定義Log Analytics は、Azure の管理において中心的役割を果たします。たとえば、さまざまなソースからテレメトリなどのデータを収集します。また、アプリケーションやリソースの運用に欠かせない分析情報を得る手段としてクエリ言語や分析エンジンを備えていることも、そうした役割の 1 つです。この重要な役割は、Azure Monitor の機能として

“Log Analytics” から、”Azure Monitor Logs”へ•“Log Analytics”という用語は、”Azure Monitor Logs”へ変更•“Azure Monitor Logs”のデータの保存場所の名称は、引き続き“Log Analytics ワークスペース”•“管理ソリューション” から、”監視ソリューション”へ変更Log Analytics の用語変更 – 2019年2月https://docs.microsoft.com/ja-jp/azure/azure-monitor/terminology

Azure Monitor: アプリケーションとインフラストラクチャを監視フルスタックの可視性、問題の検出と修正、パフォーマンスの最適化、顧客の動作の理解を全部1つの場所で実現

Azure Monitor 概要Azure Monitorで、仮想マシンとAKSのインフラレベルの問題を関連付スマートアラートと自動化されたアクションで、大規模に運用Application Insightsで、アプリケーションと関連する問題の検出と診断Azure Monitor Logsで、トラブルシュートと詳細な診断のドリルダウンAzureダッシュボードとワークブックで、視覚化

Azure Monitor Logs ( 旧名称: Log Analytics )• ログ収集＆分析基盤 as a Service• ハイブリッド環境を一元管理• シンプルなクエリ言語と高速な検索基盤• 改ざん不可、ロールベースアクセス制御も可能ログ

Azure Monitor統合監視MetricsLogsApplication Containers VM MonitoringSolutionsInsightsDashboards Views Power BI WorkbooksVisualizeMetrics Explorer Azure Monitor LogsAnalyzeAlerts AutoscaleRespondEvent Hubs Ingest &Export APIsLogic AppsIntegrateAzure MonitorCustom SourcesApplicationOperating SystemAzure ResourcesAzure SubscriptionAzure Tenant

• Azure テナントに関連するテレメトリは、Azure Active Directory などのテナント全体のサービスから収集• Azure AD Report: サインインアクティビティの履歴と、特定のテナント内で行われた変更の監査証跡Azure Tenanthttps://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#azure-tenantAzureAzure他社クラウドオンプレミス(旧Log Analytics)LogAnalyticsWorkspace

Azure AD ログをAzure Monitor Logs にストリーミング

de:code 2019 SE01Azure Active Directory のログの"みかた“- 長期保存・外部 SIEM 連携・分析手法 -日本マイクロソフト株式会社セキュリティ技術営業部テクノロジーソリューションプロフェッショナルCISSP松井大https://www.microsoft.com/ja-jp/events/decode/2019session/detail.aspx?sid=SE01

Azure Subscription• Service Health:アプリとリソースが依存するサブスクリプション内の Azure サービスの正常性の情報を提供• Activity Log:サービスの正常性レコードと Azure リソースに対して行われた構成の変更に関するレコードhttps://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#azure-subscriptionAzureAzure他社クラウドオンプレミス(旧Log Analytics)LogAnalyticsWorkspace

Azure Resources• Platform Metrics: Azure リソースのパフォーマンスと操作を反映 (数値的に計測された値)• Diagnostic Logs: Azure リソースで実行される操作に関する情報を提供 (各リソースが出力するログ)https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#azure-resourcesAzureAzure他社クラウドオンプレミス(旧Log Analytics)LogAnalyticsWorkspace

Activity Logs• ＝リソースに対して外部から実行された書き込み操作で、いつ誰が行ったかを記録するもの• Azureの基盤側のログDiagnostic Logs (診断ログ)• ＝各リソースが出力するログMetrics• ＝各リソースが出力する数値的に計測された値Azureが出力するログとメトリックhttps://docs.microsoft.com/ja-jp/azure/security/azure-log-audit

Activity Logs のカテゴリhttps://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/activity-logs-overviewカテゴリ概要管理Resource Manager で実行されるすべての作成、更新、削除、およびアクション操作のレコード。具体例は、"仮想マシンの作成"、"ネットワークセキュリティグループの削除" などサービス正常性Azure で発生した任意のサービス正常性インシデントのレコード。具体例は、"SQL Azure in East US isexperiencing downtime" (米国東部の SQL Azure でダウンタイムが発生しています) などリソース正常性Azure リソースで発生したすべてのリソース正常性イベントのレコード。具体例は、[Virtual Machine healthstatus changed to unavailable](仮想マシンの正常性状態が使用不可に変わりました) などアラートAzure アラートの全アクティビティのレコード。具体例は、"CPU % on myVM has been over 80 for thepast 5 minutes" (過去 5 分間の myVM の CPU % が 80 を超えました) など自動スケールサブスクリプションで定義したすべての自動スケール設定に基づいて、自動スケールエンジンの操作に関連するすべてのイベントのレコード。具体的例は、"Autoscale scale up action failed" (自動スケールのスケールアップアクションに失敗しました) など推奨 Azure Advisor からの推奨イベントセキュリティAzure Security Center によって生成されたアラートのレコード。具体例は、"Suspicious double extensionfile executed" (拡張子が 2 つある不審なファイルが実行されました) などポリシー Azure Policy によって実行されるすべての効果アクション操作のレコード。具体的例は、監査と拒否など

Azure Monitor Logs と Metrics Explorer仮想マシンのCPU、ディスクはじめ、各Azureサービスの出すメトリック情報を集約、可視化仮想マシンのCPU、ディスクはじめ、各Azureサービスの出すメトリック情報を集約、可視化

ネットワークサービスの Metrics と Diagnostic LogsExpress RouteBitsInPerSecond,BitsOutPerSecondPeeringRouteLogAzure VPN GatewayGateway S2S BandwidthGateway P2S BandwidthP2S Connection CountTunnel BandwidthTunnel Egress BytesTunnel Ingress BytesTunnel Egress PacketsTunnel Ingress PacketsTunnel Egress TS Mismatch Packet DropTunnel Ingress TS Mismatch Packet DropGatewayDiagnosticLogTunnelDiagnosticLogRouteDiagnosticLogIKEDiagnosticLogP2SDiagnosticLogApplication GatewayThroughputUnhealthy Host CountHealthy Host CountTotal RequestsFailed RequestsResponse StatusCurrent ConnectionsApplicationGatewayAccessLogApplicationGatewayPerformanceLogApplicationGatewayFirewallLogLoad BalancerData Path AvailabilityHealth Probe StatusByte CountPacket CountSYN CountSNAT Connection CountAllocated SNAT Ports (Preview)Used SNAT Ports (Preview)LoadBalancerAlertEventLoadBalancerProbeHealthStatusTraffic ManagerQueries by Endpoint ReturnedEndpoint Status by EndpointProbeHealthStatusEventsAzure DNSQuery VolumeRecord Set CountRecord Set Capacity UtilizationDDoSInbound packets DDoSInbound packets dropped DDoSInbound packets forwarded DDoSInbound TCP packets DDoSInbound TCP packets dropped DDoSInbound TCP packets forwarded DDoSInbound UDP packets DDoSInbound UDP packets dropped DDoSInbound UDP packets forwarded DDoSInbound bytes DDoSInbound bytes dropped DDoSInbound bytes forwarded DDoSInbound TCP bytes DDoSInbound TCP bytes dropped DDoSInbound TCP bytes forwarded DDoSInbound UDP bytes DDoSInbound UDP bytes dropped DDoSInbound UDP bytes forwarded DDoSUnder DDoS attack or notInbound TCP packets to trigger DDoS mitigationInbound UDP packets to trigger DDoS mitigationInbound SYN packets to trigger DDoS mitigationData Path AvailabilityByte CountPacket CountSYN CountDDoSProtectionNotificationsAzure FirewallAzureFirewallApplicationRuleAzureFirewallNetworkRuleNSGNetworkSecurityGroupEventNetworkSecurityGroupRuleCounter

Azureが出力する情報の保存先まとめActivity Logs、Diagnostic Logs、Metricsでそれぞれ異なる

ログの出力先により、利用シナリオが異なるAzure Monitor における監視データの場所: https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-locations(旧Log Analytics)LogAnalyticsWorkspace• ウォームパス: ログ分析や視覚化、アラートに活用• コールドパス: アーカイブ• ホットパス: リアルタイム処理や、他システムへのストリームログの出力先は、排他ではなく、利用シナリオに合わせて併用

Operating System ( Guest )https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#operating-system-guestAzureAzure他社クラウドオンプレミス(旧Log Analytics)LogAnalyticsWorkspace

Diagnostic Extension (Azure診断の拡張機能): Azure コンピューティングリソースのクライアントオペレーティングシステムからログとパフォーマンスデータを収集Log Analytics Agent: Windows または Linux の仮想マシンまたは物理コンピューターを包括的に監視および管理Dependency Agent (依存関係エージェント): Log Analytics エージェントと統合され、仮想マシンで実行されているプロセスおよび外部プロセスの依存関係に関する検出データを収集。Service MapとAzureMonitor for VMsには、Dependency Agentが必要Operating System ( Guest )

Azureの仮想マシンであれば、Portalから設定https://docs.microsoft.com/ja-jp/azure/log-analytics/log-analytics-quick-collect-azurevmオンプレミス、他クラウドのサーバーであれば、エージェントをインストールWindows https://docs.microsoft.com/ja-jp/azure/log-analytics/log-analytics-agent-windowsLinux https://docs.microsoft.com/ja-jp/azure/log-analytics/log-analytics-quick-collect-linux-computer仮想マシン (Azure VM、オンプレ/他社クラウド含む)Log Analytics ワークスペースから詳細設定>> Connected Source >> WindowsServerかLinux ServersLog Analytics ワークスペースから仮想マシン>>特定の仮想マシンを選択 >> 接続

Instrument Package: Application Insightsがアプリケーションのパフォーマンスおよび操作に関連するメトリックとログを収集し、Azure Monitor Logへ格納Availability Tests: インターネット上の様々な場所からアプリの可用性をテストApplication Codehttps://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#application-codeAzureAzure他社クラウドオンプレミス (旧Log Analytics)

Log Analytics ワークスペースのデータ: サブスクリプションに複数のワークスペースを作成し、ログデータの様々なセットを管理。各ワークスペースには、それぞれに特定のソースからのデータが格納される複数のテーブルが含まれるApplication Insights からのログデータ: 監視対象のアプリケーションごとに個別に格納される。各アプリケーションには、アプリケーションの要求、例外、ページビューなどのデータを保持するテーブルセットがあるリソース間のクエリ: リソース間のクエリを使用して、他のログデータと共にアプリケーションデータを分析したり、複数のワークスペースまたはアプリケーションを含むクエリの作成が可能Azure Monitor Logs のデータ構造https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-platform-logs#how-is-data-in-azure-monitor-logs-structured

How can we improve Application Insights ?Variable data retention (longer or shorter than the 90-day default)https://feedback.azure.com/forums/357324-application-insights/suggestions/17454031

• .NET, JS, Java, Node.js、もしくは、そのほかのOSSでのアプリを各言語のSDKで監視• App Mapによるサーバー・クライアントの関連性や依存関係を視覚化• 分散されたE2Eトランズアクションのトラック(Python & Go含む) NEW!• Snapshot Debugging &Profiling機能でコードレベルまでドリルダウン• エンドユーザーの行動や慣習を理解アプリケーションの End-to-Endの診断

de:code 2019 DT05祝東日本リージョン一般提供!Azure Application Insights 基礎と実践フリーランスMicrosoft MVP for Microsoft Azure芝村達郎https://www.microsoft.com/ja-jp/events/decode/2019session/detail.aspx?sid=DT05

Application Insights の有効化Azure App Service での設定画面Application Insights を有効にするだけでは自動で集計されない。アプリケーション側で SDK を使ってメトリクスを送る必要がある。

npm install applicationinsights => package.jsonjs 処理の最初にApplication Insights – Node.js の場合"dependencies": {"applicationinsights": "^1.0.0"}const appInsights = require('applicationinsights');appInsights.setup();appInsights.start();https://docs.microsoft.com/ja-jp/azure/application-insights/app-insights-platforms

Application Insights - メトリックスエクスプローラー

Custom Code• RESTクライアントから、Custom Metrics APIを介してAzure Monitor Metricsへデータを保存• RESTクライアントから、Custom Data Collector APIを介してLog Analytics ワークスペースへデータを保存https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/data-sources#custom-sourcesAzureAzure他社クラウドオンプレミス(旧Log Analytics)LogAnalyticsWorkspace

Azure Security Center収集したセキュリティデータを Log Analytics ワークスペースへ保存し、Azure Monitor によって収集された他のデータと共に分析できるようにする。Azure Sentinel様々なデータソースから収集したデータを Log Analytics ワークスペースへ保存し、Azure Monitor によって収集された他のログデータと共に分析できるようにする。その他のデータソース

オンプレミス物理・仮想サーバー、Azure 上の仮想マシン、Azure のサービスのセキュリティログを Log Analytics ワークスペースに送信→ セキュリティログをMicrosoftの解析エンジンで分析Azure Security CenterのしくみLog Analytics ワークスペース

Azure Security CenterAzureとオンプレミス両方のセキュリティ状況を一覧

不正アクセスやOS上での不正なふるまいを、ログやクラッシュダンプ解析の結果とAIおよびMicrosoftの知見を組み合わせて検知Azure Security Centerダンプファイル解析から不正ファイルを検知通常と比べて異常に多いRDP接続通常と異なる場所からのログイン

まとめAzure の監視には、Azure Monitor を！https://azure.microsoft.com/ja-jp/pricing/details/monitor/https://aka.ms/MonitoringDocs

Azure Portal内でAzureMonitor Logs の詳細なクエリーが可能監視、管理, セキュリティーの解析プラットフォームクエリーを用いて、調査, 統計&原因 / トレンドの分析ML アルゴリズムを駆使したクラスタリングや異常検出Azure Monitor Logs による詳細なクエリー

Azure Monitor Logs のクエリ言語は、Kusto Query Languageと呼ばれ、Azure DataExplorer, Azure Resource Graph, Application Insights などでも利用されているため、一度覚えると Azure のいろいろなサービスでも活用可能Demo環境• すでにログデータが貯められており、だれでもクエリを試せる環境 - https://aka.ms/LADemo公式リファレンス• 言語リファレンス ( 英語のみ、文法解説・サンプル豊富 )https://docs.loganalytics.io/index無料の学習コース• Pluralsight "Kusto Query Language (KQL) fromScratch"• Kusto Query Languageの無料Pluralsight学習コース（英語のみだが、基本から高度な使い方まで網羅、Pluralsightへの登録が必要（無料））https://aka.ms/KQLPluralsight(ご参考までに) Azure Monitor Logs のクエリ

おすすめのウェビナーシリーズ• Azure へのお引越しシリーズ (全6回)• Azure はじめの一歩 (全6回)• 一歩先行く Azure Computing シリーズ (全3回)• Windows Server 2019 徹底紹介シリーズ (全4回)https://azure.microsoft.com/ja-jp/overview/webinars/200以上のオンデマンドウェビナーと、随時ライブウェビナーを、提供中

https://www.microsoft.com/ja-jp/cloud-platform/azure-site-usage

47 https://docs.microsoft.com/ja-jp/learn/browse/?resource_type=learning%20path&roles=data-engineer

© 2019 Microsoft Corporation. All rights reserved. Microsoft, Windows, Windows Vista and other product names are or may beregistered trademarks and/or trademarks in the U.S. and/or other countries.The information herein is for informational purposes only and represents the current view of Microsoft Corporation as of the dateof this presentation. Because Microsoft must respond to changing market conditions, it should not be interpreted to be acommitment on the part of Microsoft, and Microsoft cannot guarantee the accuracy of any information provided after the date ofthis presentation.MICROSOFT MAKES NO WARRANTIES, EXPRESS, IMPLIED OR STATUTORY, AS TO THE INFORMATION IN THIS PRESENTATION.

Movatterモバイル変換

Change Language

Azure Monitor Logで実現するモダンな管理手法

Embed presentation

Recommended

More Related Content

What's hot

Similar to Azure Monitor Logで実現するモダンな管理手法

More from Takeshi Fukuhara

Azure Monitor Logで実現するモダンな管理手法