クラウドネイティブトランスフォーメーションのススメ
•
2 likes•1,234 views
2019/10/9 に開催したマイナビセミナー「クラウドネイティブトランスフォーメーションのススメ」の資料です。 開催概要：https://news.mynavi.jp/itsearch/seminar/335
More Related Content
What's hot
What's hot (20)
Similar to クラウドネイティブトランスフォーメーションのススメ
Similar to クラウドネイティブトランスフォーメーションのススメ (20)
More from Hiromasa Oka
More from Hiromasa Oka (20)
Recently uploaded
クラウドネイティブトランスフォーメーションのススメ
- 1. クラウドネイティブ トランスフォーメーションのススメ 株式会社ZOZOテクノロジーズ Chief ZOZOTOWN Architect 岡 大勝 マイナビセミナー 2019.10.9
- 2. 株式会社ZOZOテクノロジーズ Chief ZOZOTOWN Architect 岡 大勝 NoOps Japan 主催 アーキテクト（設計屋） @okahiromasa 2
- 4. 4 CNCF Cloud Native Definition v1.0 クラウドネイティブ技術は、パブリッククラウド、プライベートクラ ウド、ハイブリッドクラウドなどのモダンで動的な環境において、スケ ーラブルなアプリケーションを構築および実行するための能力を組織に もたらします。 このアプローチの代表例に、コンテナ、サービスメッシ ュ、マイクロサービス、イミュータブルインフラストラクチャ、および 宣言型APIがあります。 これらの手法により、回復性、管理力、および可観測性のある疎結合 システムが実現します。 これらを堅牢な自動化と組み合わせることで、 エンジニアはインパクトのある変更を最小限の労力で頻繁かつ予測どお りに行うことができます。 https://github.com/cncf/toc/blob/master/DEFINITION.md
- 5. クラウドネイティブ技術は、パブリッククラウド、プライベートクラ ウド、ハイブリッドクラウドなどのモダンで動的な環境において、スケ ーラブルなアプリケーションを構築および実行するための能力を組織に もたらします。 このアプローチの代表例に、コンテナ、サービスメッシ ュ、マイクロサービス、イミュータブルインフラストラクチャ、および 宣言型APIがあります。 これらの手法により、回復性、管理力、および可観測性のある疎結合 システムが実現します。 これらを堅牢な自動化と組み合わせることで、 エンジニアはインパクトのある変更を最小限の労力で頻繁かつ予測どお りに行うことができます。 5 CNCF Cloud Native Definition v1.0 https://github.com/cncf/toc/blob/master/DEFINITION.md スケーラブルな アプリケーション モダンで動的な環境 ＝クラウドプラットフォーム 疎結合システム 自動化 影響の大きな変更も、最小限の労力で 頻繁かつ予測どおりに行う
- 9. 9 クラウドネイティブの目指す姿 影響の大きな変更も、最小限の労力で 頻繁かつ予測どおりに行う 嬉しくない運用をなくしたい No Uncomfortable Ops https://noops.connpass.com/ NoOps Japan Community
- 13. 13 視点を変える
- 17. 17 https://images.app.goo.gl/yyfzJTvFMi4Y7vb79 IBM 7094 / 1970 京 / 2012 https://blog.global.fujitsu.com/jp/2019-06-18/01/
- 18. 18 設計すべき非機能要求 ● 性能 ● 信頼性 ● セキュリティ ● 互換性 ● 運用性 ● 保守性 ● コスト
- 19. 19 設計すべき非機能要求 ● 性能 ● 信頼性 ● セキュリティ ● 互換性 ● 運用性 ● 保守性 ● コスト 非機能要求は、 初期のアーキテクチャ設計に よってシステムに実装される
- 20. 20 これまで我々は、 物理的な制約を前提に設計してきた ● 処理速度 ● メモリサイズ ● 記憶装置のサイズ ● 転送速度 ● 筐体サイズ ● 電源容量 ● 重量 ＝物理ネイティブな設計
- 21. 21 クラウドネイティブとは、 「物理的制約が存在しない世界」と仮定する ところから始める ”無限のコンピューティングリソースを瞬時に調達できる” なら、どう設計するのか ＝ クラウドネイティブな設計
- 23. 変動するトラフィック • キャンペーンのWebトラフィック • 新商品発売日のアクセス集中 • 証券取引の手数料計算バッチ処理 • ポイント付与・キャッシュバック
- 31. 31 クラウドネイティブな設計手順 1.クラウドネイティブな発想で理想形を描く ■ 物理制約を忘れる ■ 意識するのは「データ量」と「伝達遅延」のみ 2.理論的な解決策を割り当てる ■ 分散、キューイング、リトライなどの解決策を組み合わせて設計する ■ 全て「メモリ上でのソフトウェア処理」と仮定すると組みやすい 3.実際に利用可能な技術を適合させる ■ クラウド上のミドルウェア等を組み合わせる ■ ここでの妥協を最小化することが重要
- 34. 物理ネイティブなバッチ処理のシステム構成 ① 処理データの リクエスト ③計算処理を100万回ループ Databas e 仮想マシン 想定される嬉しくない運用 • 事前に適切なサイジングができない • 処理途中でアプリが落ちた時の復旧 • 処理時間が長くなりすぎる可能性 • etc.. ④ 処理結果の書き込み ② 100万件のデータ
- 35. 設計で回復性を持たせる ① 処理データの リクエスト ③ 100万件の個別処理に分 離 Databas e Serverless ② 100万件のデータ ⑥ 処理結果の書き込み ④ Jobを1件ずつキューに投入 ⑤（可能であれば） Jobの並列実行 Serverless Firm • MWで処理状況がモニター可能 • 失敗したJobのみ再実行可能 • キュー障害時は新たなキューを作成し処理続行 （障害キューは解析用に保持） • Serverlessはバッチ特有の不具合が発生しづらい （メモリリーク、連鎖障害） クラウドネイティブなバッチ処理のシステム構成 データストアも スケールできると ボトルネックがなくなる
- 36. クラウドネイティブ技術は、パブリッククラウド、プライベートクラ ウド、ハイブリッドクラウドなどのモダンで動的な環境において、スケ ーラブルなアプリケーションを構築および実行するための能力を組織に もたらします。 このアプローチの代表例に、コンテナ、サービスメッシ ュ、マイクロサービス、イミュータブルインフラストラクチャ、および 宣言型APIがあります。 これらの手法により、回復性、管理力、および可観測性のある疎結合 システムが実現します。 これらを堅牢な自動化と組み合わせることで、 エンジニアはインパクトのある変更を最小限の労力で頻繁かつ予測どお りに行うことができます。 36 CNCF Cloud Native Definition v1.0 https://github.com/cncf/toc/blob/master/DEFINITION.md スケーラブルな アプリケーション モダンで動的な環境 ＝クラウドプラットフォーム 疎結合システム 自動化 影響の大きな変更も、最小限の労力で 頻繁かつ予測どおりに行う
- 37. クラウドネイティブ技術は、パブリッククラウド、プライベートクラ ウド、ハイブリッドクラウドなどのモダンで動的な環境において、スケ ーラブルなアプリケーションを構築および実行するための能力を組織に もたらします。 このアプローチの代表例に、コンテナ、サービスメッシ ュ、マイクロサービス、イミュータブルインフラストラクチャ、および 宣言型APIがあります。 これらの手法により、回復性、管理力、および可観測性のある疎結合 システムが実現します。 これらを堅牢な自動化と組み合わせることで、 エンジニアはインパクトのある変更を最小限の労力で頻繁かつ予測どお りに行うことができます。 37 CNCF Cloud Native Definition v1.0 https://github.com/cncf/toc/blob/master/DEFINITION.md スケーラブルな アプリケーション モダンで動的な環境 ＝クラウドプラットフォーム 疎結合システム 自動化 影響の大きな変更も、最小限の労力で 頻繁かつ予測どおりに行う
- 38. 38 クラウドネイティブな設計のヒント ● 12Factor App ■ 依存関係を明示的に宣言し分離する ■ アプリケーションをステートレスなプロセスとして実行する ■ プロセスモデルによってスケールアウトする ■ 高速な起動とグレースフルシャットダウンで堅牢性を最大化する ■ ... ● CNCF Cloud Native Definition ■ コンテナ ■ サービスメッシュ ■ イミュータブルインフラストラクチャ ■ 宣言型API ■ 回復性、管理性、可観測性 https://12factor.net/ja/ http://kimitok.hateblo.jp/entry/2014/11/09/211820 https://github.com/cncf/toc/blob/master/DEFINITION.md
- 39. 39 CNCF Cloud Native Definition アプリケーションをステートレスな プロセスとして実行する イミュータブルインフラストラクチャ プロセスモデルによって スケールアウトする コンテナ サービスメッシュ 12Factor App と Cloud Native Definition は表裏 一体
- 40. クラウドネイティブ技術は、パブリッククラウド、プライベートクラ ウド、ハイブリッドクラウドなどのモダンで動的な環境において、スケ ーラブルなアプリケーションを構築および実行するための能力を組織に もたらします。 このアプローチの代表例に、コンテナ、サービスメッシ ュ、マイクロサービス、イミュータブルインフラストラクチャ、および 宣言型APIがあります。 これらの手法により、回復性、管理力、および可観測性のある疎結合 システムが実現します。 これらを堅牢な自動化と組み合わせることで、 エンジニアはインパクトのある変更を最小限の労力で頻繁かつ予測どお りに行うことができます。 40 CNCF Cloud Native Definition v1.0 https://github.com/cncf/toc/blob/master/DEFINITIO N.md スケーラブルな アプリケーション モダンで動的な環境 ＝クラウドプラットフォーム 疎結合システム 自動化 影響の大きな変更も、最小限の労力で 頻繁かつ予測どおりに行う
- 41. 41 これまでの自動化 ● 繰り返し作業の自動化 ○ バッチ処理 ○ 運用作業（ローテーションなど） ○ ビルド・テスト・デプロイ（CI/CD） ● 状態の変化を自動で検知・通知 ○ しきい値の監視・通知 ○ ログの記録 ○ クラスタフェールオーバー
- 42. 42 クラウドネイティブでの自動化 ● システム構成の動的な変化 ○ トラフィック量に応じたリソース増減 ○ 障害検知による自律的回復 ○ 最適な環境へのデプロイ/ルーティング ● 予測からカオスエンジニアリングへ ○ 予測：過去から推測。処理量/故障率 ○ カオス：不確実性。Fault Injection/Tuning
- 44. 44 クラウドネイティブの落とし穴 1.Kubernetesを使ってもすぐにはリソース最適化 とはならない（ことが多い） 2.VPC(Virtual Private Cloud) を使うと一般的に 弾力性が損なわれる 3.リザーブドインスタンス（サーバ資源の長期契約） は、クラウドネイティブの敵
- 46. 弾力性とコスト： クラウドのKubernetesサービス • Kubernetesのスケールは数秒～数十秒程度だが、動作基盤のノード（VM）はやはり事前に Scale up/outしておく必要がある。 スパイク前に VMのScale up/out 落ち着いたらVMSSを Scale down/in 課金はVMに Kubernetesは 弾力性が高いが..
- 47. 弾力性とコスト： PaaS/Serverless • App EngineやApp Serviceでは数秒単位でスケール可能のため、 より細かな負荷への適応が可能。 • インスタンス利用時間に対する課金のため、 理想とするリソース：コスト体系に近い。 割り当て時間に課金 細かなメッシュで 負荷に追従 Azure App Service
- 48. 48 クラウドネイティブの落とし穴 1.Kubernetesを使ってもすぐにはリソース最適化 とはならない（ことが多い） 2.VPC(Virtual Private Cloud) を使うと一般的に 弾力性が損なわれる 3.リザーブドインスタンス（サーバ資源の長期契約） は、クラウドネイティブの敵
- 49. “Cold Pool” • コントローラブルでセキュア、でも … Server HW Hypervisor VM App Container App Deploy Ready-to-go-Infrastructure Provision/Boot Install/Configure VNet/Virtual Private Cloud いつでもセルフプロビジョニング できるリソースプール
- 50. “Hot Pool” • “several pools of Workers pre-provisionedand ready to hostyour applications” • “allocated from a pool of ready-to-goWorkers” https://msdn.microsoft.com/en-us/magazine/mt793270 Server HW Hypervisor VM App Container App Deploy Pre-provisioned/readyto host どのノードもいつでもデプロイできるように ”暖めてある”リソースプール
- 51. 51 クラウドネイティブの落とし穴 1.Kubernetesを使ってもすぐにはリソース最適化 とはならない（ことが多い） 2.VPC(Virtual Private Cloud) を使うと一般的に 弾力性が損なわれる 3.リザーブドインスタンス（サーバ資源の長期契 約）は、クラウドネイティブの敵
- 52. 52 クラウドネイティブの落とし穴 1.Kubernetesを使ってもすぐにはリソース最適化 とはならない（ことが多い） 2.VPC(Virtual Private Cloud) を使うと一般的に 弾力性が損なわれる 3.リザーブドインスタンス（サーバ資源の長期契 約）は、クラウドネイティブの敵 思想と矛盾する
- 55. 55 クラウドネイティブな旅の供（製品）の選び方 クラウドネイティブ の理想の姿 製品A 物理ネイティブの 有名な事例 製品C 製品B 製品 D 製品E ● 目の前の事例に惑わされず、目指す方向性が同じ製品を選ぶ ● 機能ではなく非機能に着目する（特に回復性、スケール性） ● オープンなアプローチを取っている（OSS、ドキュメント公開） ● ユーザーと共に未来に向けて歩もうとしている組織とともに