DevOps on Azure Kubernetes Azure Kubernetes Service を取り巻く周辺技術 下記、2019/02/27 イベント登壇のスライド資料 Azureを利用した新規プロダクト開発についてまるっと語る https://fringe81.connpass.com/event/116872/

1. Azure
DevOps on Azure Kubernetes
2019/02/27 30min
Connpass: Fringe81 Azure
twitter hash tag: #fringe81_azure
Azure Kubernetes Service を取り巻く周辺技術
平岡 一成
クラウドソリューションアーキテクト
日本マイクロソフト株式会社

2. 平岡 一成 ひらおかいっせい
日本マイクロソフト株式会社
パートナー事業本部 > パートナー技術統括本部 > クラウドソリューションアーキテクト
担当領域
Azure Apps (Application Development)
Web, API Server, PaaS, OSS, Container, Cognitive Services, NoSQL
経歴
• 2004年より、エンジニアとしてWebアプリケーション開発・運用プロジェクトに従事。
• 2012年に国内最大手EC事業会社に入社。EC サービスを支えるバックエンドAPIの開発・運
用を行うグループマネージャを担当。大規模＆高負荷システムの構築を得意とする。
• 2017年3月より現職。Azureパートナー向けの技術支援やPoC支援などを担当
@hoisjp
hoisjp

3. Azure Kubernetes Service を支える Microsoft People
こんなマイクロソフト社員がコンテナ技術を支えている
Azure DevOps & Azure Monitor
パイプラインを支えるツール群
少しだけ先の話を サーバレスコンテナ
Azure Container Instance と Virtual Kubelet
アジェンダ
Azure Kubernetes Service を取り巻く周辺をなぞる

4. Azure Kubernetes Service
マネージドな Kubernetes サービス

5. コンテナー 年表
Docker & Kubernetesにフォーカス
2013
Docker
登場
2008
LXC
2014 2015 2016 2017 2018
Google
kubernetes発表
CNCF
設立
2013.3
2014.6
kubernetes 1.0
2015.7
Docker
Swam発表
2014.12
Mesosphere
DC/OS発表
2016.4
Docker
kubernetes
サポート宣言
2017.10
kubernetes 1.10
2018.3
Azure
Kubernetes
Service
GA
2018.6
コンテナー技術の乱立 kubernetes標準化へ
仕様の標準化
CNI ( Container Network Interface )
CSI ( Container Storage Interface )
CRI ( Container Runtime Interface )
OCI ( Open Container Initiative )

6. Microsoft People
マイクロソフトのコンテナ技術を取り巻く人々

7. Microsoft People - Brendan Burns
マイクロソフトのコンテナ技術を取り巻く人々
Question and Answer!
Q: “Brendan Burns”、ご存知のかた？
Hint: 元 Googler
A:
Kubernetes の Co-founder で、
現在はマイクロソフト社員。(LinkedIn)

8. 動く Brendan Burns @brendandburns
YouTube: Understand Serverless Kubernetes and serverless on Kubernetes

9. おまけ まだまだ動く Brendan Burns
YouTube Playlist: Kubernetes Basics

10. おまけ 電子書籍 written by Brendan Burns
https://azure.microsoft.com/ja-jp/services/kubernetes-service/
Azure Kubernetes Service ページから、電子書籍をダウンロードする

11. Microsoft People - Gabe Monroy
マイクロソフトのコンテナ技術を取り巻く人々
Question and Answer!
Q1: “helm” をご存知のかた？ e.g. helm install, helm package
A1: k8s のパッケージマネージャ。2018.06 トップレベル CNCF プロジェクトに。
Q2: “Deis” という会社をご存知のかた？
A2: helm の開発元。2017.04 マイクロソフトにより買収。
Gabe Monroy は Deis 社の CTO で、現 MS のコンテナ関連 PM Manager

12. 動く Gabe Monroy @gabrtv
Gabe Monroy, Microsoft Azure | KubeCon 2017

13. おまけ E-book “Phippy Goes To The Zoo”
https://azure.microsoft.com/en-us/resources/phippy-goes-to-the-zoo/en-us/

14. Microsoft People
マイクロソフトのコンテナ技術を取り巻く人々

15. Azure DevOps
2019.09.10 Visual Studio Team Services (VSTS) をリブランド

16. DevOps at Microsoft
9万人以上の社内ユーザーを抱えるマイクロソフトがAzure DevOpsを選択
Data: Internal Microsoft engineering system activity, August 2018
372k
月次のプル リクエスト
2m
月次のGitコミット
78,000日次の展開（デプロイ）数
4.4m
月次のビルド数
500m T
日次のテスト実行
500k
日次のワーク アイエム更新
5m
日次のワーク アイテム参照
数
https://aka.ms/DevOpsAtMicrosoft➔

17. Azure DevOps
旧 Visual Studio Team Services: VSTS
実績のあるアジャイル ツールを使用
してより迅速にユーザーに価値をも
たらし、チームの垣根を越えて作業
を計画、追跡したり、作業に関す
る相談をしたりできます。
あらゆる言語、プラットフォーム、クラウド
に対応した CI/CD を使用して、ビルド、
テスト、デプロイできます。GitHub や他
の Git プロバイダーに接続し、継続的に
デプロイすることもできます。
クラウドでホストされた容量無制限
のプライベート Git リポジトリを入手
し、プル要求と高度なファイル管理
により、優れたコードを協力してビル
ドできます。
手動の探索的テスト ツールを使
用することで、テストと公開を自
信を持って行うことができます。
パッケージを作成、ホストしたら、チーム
で共有し、ワンクリックで CI/CD パイプ
ラインに成果物を追加できます。
Azure Boards Azure ReposAzure Pipelines
Azure Test Plans Azure Artifacts
https://azure.com/devops
➔

18. DevOps ツールチェーンで言うと…
Boards
Pipelines
Pipelines
Repos
Repos
Azure
Monitor
Visual Studio
Code
Visual Studio
Test Plans
Pipelines

19. Azure DevOps
使用するツールやクラウドを自由に選択可能
マイクロソフト、オープ
ンソース、もしくはサー
ドパーティツールによる
ワークフローを混在し、
適合させる
Azure DevOps
では、開発者は
適切なツールを
選択できます
クラウド、オンプレミス、またはその両方をターゲットにして、必要なサーバーに展開

20. Azure DevOps: ダッシュボードによる進捗管理
ダッシュボード機能では様々な情報を一覧表示可能

21. Azure DevOps: Azure Boards
かんばんボード、バックログ、チームのダッシュボード、カスタム レポートを使用して作業を追跡
https://azure.com/devops➔
Connected from idea to release
Track all your ideas at every development stage and
keep your team aligned with all code changes linked
directly to work items.
Scrum ready
Use built-in scrum boards and planning tools to help
your teams run sprints, stand-ups, and planning
meetings.
Project insights
Gain new insights into the health and status of your
project with powerful analytics tools and dashboard
widgets.
By Demo

22. Azure DevOps: Azure Pipelines
オープン ソース用に 10 個の無料の並列ジョブ (時間制限なし) を実行可能な、
Linux, macOS, および Windows 用のクラウドホステッド パイプライン
Any language, any platform, any cloud
Build, test, and deploy Node.js, Python, Java, PHP, Ruby,
C/C++, .NET, Android, and iOS apps. Run in parallel on
Linux, macOS, and Windows. Deploy to Azure, AWS,
GCP or on-premises
Extensible
Explore and implement a wide range of community-
built build, test, and deployment tasks, along with
hundreds of extensions from Slack to SonarCloud.
Support for YAML, reporting and more
Best-in-class for open source
Ensure fast continuous integration/continuous delivery
(CI/CD) pipelines for every open source project. Get
unlimited build minutes for all open source projects with
up to 10 free parallel jobs across Linux, macOS and
Windows
https://azure.com/pipelines➔
Containers and Kubernetes
Easily build and push images to container registries like
Docker Hub and Azure Container Registry. Deploy
containers to individual hosts or Kubernetes.
By Demo

23. Azure DevOps: Azure Repos
オープンソース プロジェクトから世界最大規模のリポジトリまでスケール可能な
無制限のプライベート Git リポジトリのホスティングと TFVC のサポート
https://azure.com/devops➔
Works with your Git client
Securely connect with and push code into your Git
repos from any IDE, editor, or Git client.
Web hooks and API integration
Add validations and extensions from the marketplace
or build your own using web hooks and REST APIs.
Semantic code search
Quickly find what you’re looking for with code-aware
search that understands classes and variables.
By Demo

24. Azure DevOps: Azure Artifacts
完全に統合されたパッケージ管理を CI/CD パイプラインに追加し、
パブリックおよびプライベートソースの Maven、npm、NuGet のパッケージを作成、共有可能
Manage all package types
Get universal artifact management for Maven, npm,
and NuGet.
Add packages to any pipeline
Share packages, and use built-in CI/CD, versioning,
and testing.
Share code efficiently
Easily share code across small teams and large
enterprises.
https://azure.com/devops➔
By Demo

25. Azure DevOps: Azure Test Plans
エンドツーエンドの追跡が可能な、スクリプト化されたテストを計画、実行、追跡し、
開発ライフサイクル全体を通して品質を評価
Capture rich data
Capture rich scenario data as you execute tests to
make discovered defects actionable. Explore user
stories without test cases or test steps. You can create
test cases directly from your exploratory test sessions.
Test across web and desktop
Test your application where it lives. Complete scripted
tests across desktop or web scenarios. Test on-
premises application from the cloud and vice-versa.
Get end-to-end traceability
Leverage the same test tools across your engineers
and user acceptance testing stakeholders. Pay for the
tools only when you need them.
https://azure.com/devops➔
By Demo

26. Azure DevOps: Azure Test Plans
Test Plans と Test & Feedback 拡張機能
手動テストのシナリオ定義と実行、結果の管理
Test & Feedback 拡張機能を使ったキャプチャやバグ起票
https://marketplace.visualstudio.com/items?itemName=ms.vss-exploratorytesting-web#supportedbrowsers
By Demo

27. Azure DevOps: Azure Test Plans
Azure Pipelineによるテストの自動化
CI のビルド タスクによる各種テストの自動化
自動ビルドの結果でテストやカバレッジの結果も確認可能
By Demo

28. Azure Pipelines x Terraform
https://www.azuredevopslabs.com/labs/vstsextend/terraform/

29. Azure DevOps の利用料
無料
無制限のユーザー数とビルド時間
• Azure Pipelines:
CI/CD 用の 10 個の並列ジョブ
(時間制限なし)
• Azure Boards:
作業項目トラッキングとかんばんボード
• Azure Repos:
無制限のパブリック Git リポジトリ
無料
5 ユーザーまで無料で開始
• Azure Pipelines:
CI/CD 用の 1 個のホスト ジョブ (1,800 分/月)
および 1 個のセルフホスト ジョブ
• Azure Boards:
作業項目トラッキングとかんばんボード
• Azure Repos:
無制限のプライベート Git リポジトリ
• Azure Artifacts:
パッケージ管理 (5 ユーザーが無料)
• ロード テスト (20,000 VUM/月)
• 無制限の関係者
¥3,360/10ユーザー/月
• Azure Pipelines:
CI/CD 用の 1 個のホスト ジョブ (1,800 分/月)
および 1 個のセルフホスト ジョブ
• Azure Boards:
作業項目トラッキングとかんばんボード
• Azure Repos:
無制限のプライベート Git リポジトリ
• Azure Artifacts:
パッケージ管理 (5 ユーザーが無料)
• ロード テスト (20,000 VUM/月)
• 無制限の関係者
• Visual Studio サブスクライバーは無料
https://azure.microsoft.com/ja-jp/pricing/details/devops/➔

30. DevOps Project
最速で楽に AKS を始める

31. みなさんが想像するであろう、CI/CD pipeline
https://docs.microsoft.com/ja-jp/azure/architecture/example-scenario/apps/devops-with-aks
コードレポジトリ：
GitHub, GitLab
CI/CD パイプライン：
Jenkins, CircleCI, etc

32. Azure DevOps Projects の利用
5分以下で、どんなAzureアプリでも、どんなAzureサービス上にでもビルド
• 代表的な、言語＆アプリケーションフレームワークをサポート
• CI/CD パイプラインが統合された状態でサンプルアプリケーションが起動
• Application Insights による、標準の監視
• 展開先プラットフォームで、AKS を選択できる
https://azure.microsoft.com/ja-jp/features/devops-projects/
構築のハードルをスキップして、
いきなり動くサンプルがデプロイされる
⇒最高のドキュメント

33. 雛形は GitHub 上に公開されている
https://github.com/Microsoft/devops-project-samples

34. Demo
DevOps プロジェクトによって作成されたパイプラインを確認する
• Azure Pipelines
• Azure Repos

35. Azure Monitor
組み込みの監視機能で手間いらず

36. Azure Monitor for Containers
https://docs.microsoft.com/ja-jp/azure/azure-monitor/insights/container-insights-overview
クロス サブスクリプション マルチクラスター
ヘルス ビュー NEW!
Azure DevOps Projectとの連携 NEW!
サーバレス Kubernetesの監視 NEW!
Kubernetes イベント & Container
Logを解析
Node, Controller, Container全般の
ヘルスとパフォーマンスを視覚化
クラスタードリルダウン とnamespace,
service, and node フィルター

37. 監視: Azure Monitor Application Insights によるEnd-to-Endの診断
組み込みの監視機能で分散トレーシング
NEW!

38. Azure Monitor for Containers の GA アナウンス
https://qiita.com/keikhara/items/8699d8e1fa45f2e61185
記事より引用（強調を追加）
Azure（クラウド）上での監視ツールへの考察
• …
• クラウドサービスの傍らに監視がないといけない。監視ツールを探す手間が面倒。
• 簡単に問題が発見でき、監視ツールを覚える必要のないユーザー体験（UX）
が必要。
• 監視ツールの管理や監視をしなくても良く、手間いらずで、自動的にメンテナン
スやアップグレードをしてくれる。つまり、監視ツールにでなく、自社のビジネス向
上だけに人件費をかけることが出来る。

39. Prometheus Comparison
Customer using Prometheus Azure Monitor for Containers
database
LogMetric
Database
Visualization
Health
Metric
Log
Visualization
Datastore
Retention
Retention
補足：Grafana で Azure Monitor のデータを監視することも可能

40. Grafana で Azure Monitor のデータを監視する
2019.01 Public Preview! Azure Monitor logs in Grafana - now in public preview
Grafana で Azure Monitor データソースプラグイン

41. Azure Container Instance
Virtual Kubelet
サーバレスコンテナで高速スケール

42. Azure Container Instances
サーバレスコンテナ環境
GPU 対応のコンテナがサポート
az container create ¥
-g aci_grp ¥
--name nginx ¥
--image library/nginx ¥
--ip-address public ¥
–cpu 2 --memory 5

43. ACI Connector for Kubernetes を使うことで、Kubernetesクラスタがコンテナ
をACIに直接展開できるようになる。必要に応じて VM と ACI を混在させること
ができるようになる
Virtual Kubelet: Kubernetes から ACI を利用
Kubernetes
control pane
Application
architect
Infrastructure
architect
Azure Container Instances (ACI)
ACI
Connector
Pod
Pod Pod
Pod
Pod Pod
Pod
Pod Pod
Pod
Pod Pod
VM VM
VM VM
Deployment/
tasks
Pod Pod Pod Pod Pod
Pod Pod Pod Pod Pod
Pod Pod Pod Pod Pod
Pod Pod Pod Pod Pod
Pod Pod Pod Pod Pod
WasteWaste
WasteWaste PodPod
PodPod
https://github.com/virtual-
kubelet/virtual-kubelet

44. 2018/12/14 CNCF のサンドボックスプロジェクトへ
https://virtual-kubelet.io/
https://github.com/virtual-kubelet/virtual-kubelet
Azure だけではなく、多くのクラウドベンダーと連携

45. Virtual Kubelet (ACI) の料金
高速起動、秒単位課金の威力
• 100 instance
• 300 sec = 5 min
• Memory 1GB
• vCPU x 1

46. Demo: ACI x N instances challenge
AKS x Virtual Kubelet で高速にスケールする Azure Container Instance
• Virtual Kubelet
• az aks install-connector
• Region = Japan East
https://github.com/virtual-kubelet/virtual-kubelet/tree/master/providers/azure

47. Azure Kubernetes Service を支える Microsoft People
こんなマイクロソフト社員がコンテナ技術を支えている
⇒マネージドサービスが Kubernetes の変化に追従していくための最も重要なエンジン
Azure DevOps & Azure Monitor
パイプラインを支えるツール群
⇒Kubernetes 本体はいかに追従するかのみ、周辺技術がひとつの差別化要因
少しだけ先の話を サーバレスコンテナ
Azure Container Instance と Virtual Kubelet
⇒プラットフォームはいずれ抽象化していくはず（期待）
まとめ
Azure Kubernetes Service を取り巻く周辺をなぞる

48. いくつかお知らせ
最後に

49. Microsoft Build – 2019/05/06-08, - Seattle, WA
https://www.microsoft.com/en-us/build

50. 国内イベント de:code 2019 – 2019/05/29-30
https://aka.ms/decode19

51. MSTEP セミナー AKS Docker 基礎
https://www.microsoftevents.com/profile/form/index.cfm?PKformID=0x5803779abcd
2019 年 3 月 5 日 14:00~ 16:30 (受付開始：13:30)
【概要】
コンテナー技術（Docker/Kubernetes）の概要を解説することにより、Azure
Kubernetes Service (AKS) がコンテナー技術の導入において容易かつ実用性
があるのか解説します。
Azure Kubernetes Service (AKS)が他Azureサービス連携することのメリットや
導入事例の紹介をします。

52. © Copyright Microsoft Corporation. All rights reserved.