「今、ヨーロッパのオープンソースがアツい！」クラウドの構成管理を自動化する基盤CMDBuild

「今、ヨーロッパのオープンソースがアツい！」
クラウドの構成管理理を⾃自動化する基盤
CMDBuild
2015/8/4
Open Programmable Infrastructure Environment
http://www.ossl.co.jp
TWITTER: http://twitter.com/satoruf
LINKEDIN: http://jp.linkedin.com/in/satorufunai/ja
SLIDESHARE: http://www.slideshare.net/sfunai
FACEBOOK: http://www.facebook.com/satoru.funai

15/08/07
Copyright 2015(C) OSS Laboratories Inc. All Rights Reserved
2

クラウドで求められる構成管理理
情報量量の爆発
ガバナンス低下
クラウドで重要になる構成管理理と可視化
15/08/07
3
仮想化による、論論理理構
成と物理理構成の複雑化
運⽤用⾃自動化による、
変更更の⾼高速⾼高頻度度化
動的構成管理理と関係マッピング
監視や変更更管理理との連携
運⽤用管理理の負担軽減
⾃自動情報収集とワークフロー
外部システムとの柔軟な連携
管理理内容の可視化
広がるパブリッククラウド
プライベートクラウドの活⽤用

⼿手作業の運⽤用の問題
  撲滅できない操作ミス
  タイプミス
  ⼿手順書のタイポ
  エラー時のロールバック⼿手順不不備
  原因不不明の障害
  開発環境、検証環境、本番環境が微妙に異異なる（ライブラリやOS設定）
  環境によって操作⼿手順が異異なる
  そもそも⼿手作業なので、再現が困難
  秘伝のタレによる属⼈人化
  リリースサイクルの⻑⾧長期化
  変更更が適⽤用されるまでに、次の変更更要求が滞留留
  変更更頻度度が少ないため、変更更箇所が増え、変更更のリスクが増⼤大
  環境の複雑化への対応が困難
  仮想化、クラウド化によってシステム環境が複雑化し、動的な変更更／変化が発⽣生
  それに伴い作業⼿手順も複雑化し、メンテナンスが困難に
  ⾮非効率率率、⾮非⼈人間的な作業
  端末操作、⼿手順書読み上げ、作業確認の3⼈人体制
  ⻑⾧長時間にわたる操作の緊張と重圧
2015/7/24
4

運⽤用管理理を⾃自動化する効果
  構築〜～実装〜～サービス稼働までプログラム化
  コスト低減、ミスの削減、期間短縮
  「運⽤用でカバー」から、「設計で保証」
  運⽤用管理理の集中化と可視化
  作業は⾃自動化し、⼈人間は判断に集中
  ⼈人に依存しない標準化、品質向上
  定量量評価による投資対効果の明確化
  継続的デリバリーの実現
  リリースの多頻度度化により、リリースのリスクを低減
  ビジネスサイクルの⾼高速化に適応
  広域分散環境に対応
  AWS等のクラウドサービスから、オンプレミスの既存物理理サーバまで⼀一元管理理
  リソースの最適化
  ⽬目的に応じて最適なプラットフォームにアプリケーションを移動
  DR/BCPへ対応
  DR/BCPの⾃自動化2015/7/24
5

運⽤用管理理⾃自動化の役割
2015/7/24
6
要件定
義
設計
コーディ
ング
テスト
継続的
インテ
グレーション
開発サイクルの高速化
ジョブ
管理
監視
検知
リカバ
リ
運用
サイクル
運用サイクルの自動化
運用引き継ぎの自動化
バージョン管理
構成管理
自動デプロイ
自動テスト
•  全てプログラム化
•  どの環境でも同じ手順
•  何度実行しても同じ結果を再現
•  作業結果をログに保存

構成管理理及びリリース管理理の成熟度度モデル
「継続的デリバリー　信頼できるソフトウェアリリースのためのビルド・テスト・デプロイメントの⾃自動化」
David Farley (著), Jez Humble (著), 和智右桂 (翻訳), ⾼高⽊木正弘 (翻訳) アスキー・メディアワークス (2012/3/14)
2015/7/24
7
　
レベル -1
レベル 0
レベル 1
レベル 2
レベル 3
プラクティス
リグレッションエラー多発： 
プロセスは繰返せず管理も
貧弱、そして対症療法を行っ
ている。
繰返し可能： 
プロセスは文書化され、一部
は自動化されている。
一貫している： 
自動化されたプロセスが、ア
プリケーションのライフサイク
ル全体に適用されている。
定量的な管理： 
プロセスが計測可能で制御さ
れている。
最適化： 
プロセスの改善に注力する。
ビルド管理及
び継続的イン
テグレーション
ソフトウェアのビルド手順が
手動である。成果物やビルド
結果の管理をしていない。
普段のビルドやテストを自動
化している。全てのビルドは
ソース管理システムを使って
自動化された手順で再現で
きる。
自動ビルドと自動テストのサ
イクルを、変更がコミットされ
るたびに実行する。依存関係
を管理する。スクリプトやツー
ルを再利用する。
ビルドメトリクスを収集して可
視化し、それに基づいて作業
する。ビルドを壊れたままに
しない。
チームで定期的に話し合い
の場を持ち、統合時の問題
やその自動化による解決、素
早いフィードバック、そしてよ
り良い可視化について議論
する。
環境及びデプ
ロイメント
ソフトウェアのデプロイ手順
が手動である。バイナリが環
境に依存する。環境の配布
が手動である。
一部の環境ではデプロイを自
動化している。新しい環境を
手軽に作成できる。全ての構
成情報を外に出してバージョ
ン管理する。
ソフトウェアのデプロイは完
全に自動化され、ボタンを押
すだけで完結する。全ての環
境に対して同じ手順でデプロ
イする。
統合したデプロイ管理、リ
リースやリリース取消の手順
もテストしている。
全ての環境がうまく管理され
ている。プロビジョニングは完
全に自動化、仮想化を適切
に活用する。
リリース管理及
びコンプライア
ンス
リリース頻度が低く、しかも信
頼できない。
面倒で頻度も低く、信頼でき
ないリリース、リリース要件に
関するトレーサビリティも限定
的。
変更管理とその承認プロセス
が定義され、それを守ってい
る。規約を遵守している。
環境はアプリケーションの健
康状態を監視し、能動的に管
理している。サイクルタイムを
監視している。
運用チームとデリバリーチー
ムが協力し、リスク管理やサ
イクルタイム削減を行う。
テスト
開発をした後に手作業でのテ
ストを実施する。
ストーリーの開発の一環とし
て自動テストを書く。
ユニットテストや受入テストを
自動化する。受入テストはテ
スターが書く。テストが開発プ
ロセスに組み込まれている。
品質のメトリクスとその傾向
を追跡する。非機能要件を定
義し、計測する。
本番環境への変更の取消は
滅多に発生しない。問題があ
ればすぐに見つかり、すぐに
修正される。
データ管理
データのマイグレーションは
バージョン管理されておらず、
手作業で操作する。
データベースへの変更は自
動化したスクリプトで行い、ス
クリプトはアプリケーションと
共にバージョン管理する。
データベースの変更はデプロ
イメントプロセスの一環として
自動的に行う。
データベースの更新やロー
ルバックはデプロイの度にテ
ストされる。データベースの
パフォーマンスを監視、最適
化する。
リリースのたびに、データ
ベースのパフォーマンスやデ
プロイメントプロセス自体につ
いてのフィードバックを得る。
構成管理
バージョン管理システムを
使っていない、あるいは使っ
ていても滅短チェックインしな
い。
バージョン管理システムを
使って、ソフトウェアの作成に
必要な物を全て管理する。
ソースコードや設定ファイル、
ビルドやデプロイ用スクリプト、
データのマイグレーション等。
ライブラリや依存関係を管理
する。バージョン管理システ
ムの利用ポリシーは、変更管
理プロセスで定義する。
開発者は、少なくとも1日1度
はメインラインにチェックイン
する。ブランチはリリース作業
のときだけ使う。
変更管理のポリシーを常に
検証し、効率的な共同作業
や素早いデプロイができてい
るかを確かめる。また、変更
管理プロセスの可監査性も
チェックする。

概念念アーキテクチャ
運用ポータル
ジョブモニタ
リソースモニタ
チケットモニタ
カレンダ
イベントモニタ
ニュース
監視／アラート
サービスデスク／
構成管理／変更管理
チケット作成
障害通知
プロジェクト管理
作業依頼
ソースコード管理
コード
作成／修正
デプロイツール
ジョブ管理
クラウドAPI
テスト
デバッグ
リリース
クラウド
プロバイダ
リソース
結果登録
オーケストレーシ
ョンレイヤ
イメージ置場
レポジトリ
CMDB
メール
2015/7/24
8

ネットワーク管理
アプリケーション
フレームワーク
監視
資源管理
（クラウド／VM／実機／ストレージ）
OSインストール
初期設定／構成管理
アプリケーション構成
コマンド自動実行
openQRM
Cobbler
LinuxCOE
Clonezilla
GlusterFS
Ceph
XtreemFS
Puppet
Ansible
Nagios
Zabbix

Fabric
運⽤用管理理⾃自動化基盤ツールチェーン
JobScheduler
openvswith
ジョブ管理
15/02/18
9
サービスデスク／工程管理／リポジトリ
Redmine
Git/svn
OTRS

バージョン管理理
チケット管理理
Open Programmable
Infrastructure Environment
10
運⽤用
ポータル
ヒヤリン
グシート
設定シート
ミドルウェア／
アプリ
構成管理理
実⾏行行管理理
構築情報
変更更依頼
アラート
／イベント
API連携
インベントリ
／コンフィグ
／ステータス
ユーザ
オペレータ
SE
状態監視
vmware
構築/検証
Fabric
物理理サーバ
15/08/07
インベントリ収集

⾃自動化の鍵：ワークフロー制御
  ⼈人間判断フロー：CMDBuild/Shark
  承認、指⽰示など各ステークホルダが⼊入⼒力力
  プログラム制御：JobScheduler
  エラー制御、分岐判断のロジックを記述
15/08/07
11

CMDBuild構成管理理システム
  2005年年プロジェクト開始
  伊Tecnoteca 社が開発、AGPLライセンス
  http://www.cmdbuild.org/
15/08/07
12
CMDB
ワークフロー
文書管理
地理情報
レポーティング
API
JSON/SOAP
APACHE
TOMCAT
アセット
コンピュータ
ライセンス
サーバ
デスクトップ
ユーザ
サプライヤ
ドキュメント
場所
保守契約
監視システム
ポータル

CMDBuildの特徴
  ⾃自由なデータモデル
  クラスとリレーションの設定で
⾃自由に設計可能
  組み込まれたワークフローエンジン
  Together Workflow (Shark)を使⽤用し、ワークフローを設計／実⾏行行
  他システムの連携
  SOAP API, Mail, SQL, LDAP/AD, CSV, etc.
  ITIL V3準拠
  組み込まれた⽂文書管理理機能
  多⾔言語対応
  ⽇日本語／英語／ドイツ語
スペイン／フランス／イタリア
ロシア／ポルトガル／セルビア
ブラジル
15/08/07
13
サービス戦略略サービス設計サービス移⾏行行サービス運⽤用継続的改善
財務管理理
サービスカタログ
管理理
変更更管理理イベント管理理 7ステップ改善
需要管理理
サービスレベル管
理理
資産構成管理理インシデント管理理サービス測定
ポートフォリオ管
理理
キャパシティ管理理ナレッジ管理理リクエスト対応サービスレポート
可⽤用性管理理移⾏行行計画／⽀支援アクセス管理理
サービス継続性管
理理
リリースデプロイ
管理理
問題管理理
セキュリティ管理理
サービスバリデー
ション／テスト
サービスデスク
サプライヤ管理理評価技術管理理
アプリケーション
管理理
オペレーション管
理理
アセット
コンピュータ
ライセンス
サーバ
デスクトップ
ユーザ
サプライヤ
ドキュメント
場所
保守契約
ロケーション
顧客
サービス
ネットワーク
保守契約
モデル

CMDBuild画⾯面例例
15/08/07
14

ワークフロー機能
15/08/07
15
  Together Workflow Editorで作成したワークフローを、インポート
http://www.together.at/prod/workflow/twe
Redmine'>)
Cmdbuild)
)
)
or
Redmine
Redmine
XRFC
X X X
)
)X
Redmine)
)
)
XX
X
RFC01 RFC02
RFC03
RFC04 RFC05
RFC00
RFC06
RFC07
RFC08
RFC09 RFC10
RFC11
RFC12
RFC13
RFC14
)

インシデント対応⾃自動化例例
アラート発報
受付
チケット発⾏行行
影響調査
変更更承認
作業指⽰示
バージョンアップ
Fabric
構築検証作業結果承認
⼀一次切切り分け
変更更依頼
CMDB登録
チケット
クローズ
15/08/07
16

サーバ構築⾃自動化例例
サーバ構築依頼
受付
変更更依頼
チケット発⾏行行
影響調査
変更更承認
作業指⽰示
サーバ構築
Fabric
構築検証
監視設定作業結果承認
CMDB登録
チケット
クローズ
ヒヤリン
グシート
15/08/07
17

⾃自動インベントリ収集
  エージェントレス型
  nmap, snmp, ssh, WMIによる、Linux/Windows/NW機器の情報収集
15/08/07
18

Open-Auditのアーキテクチャ
  Open-Auditは、データベース、WEBサーバ、オーディットホストで構成
され、⼀一つのシステムに全てインストールしても、別々にインストール
することも可能。
  データベースは、MySQL
  WEBサーバは、Apache/PHP
  オーディットホストは、対象機器と同⼀一サブネットにあるサーバ
15/08/07
19
WEBコンソール
対象機器
WEBサーバ
オーディット
ホスト

インベントリ収集フロー
15/08/07
20
Webから実⾏行行
Network Groupが
なければ作成
Nmapスクリプト
実⾏行行
ログ画⾯面にリダイ
レクト
Nmap実⾏行行結果
確認
Snmp?
Snmpスキャン
実⾏行行
デバイス
登録済?
デバイス追加
デバイス更更新
WMI?
VBSスクリプト
転送・実⾏行行
ssh?
shellスクリプト
転送・実⾏行行
スクリプト実
⾏行行結果を、
Open-‐‑‒Auditサ
ーバにhttp put
終了了
対象デバイス

Zabbix-CMDBuild連携ポートレット
15/08/07
21
最新イベント情報の表⽰示
Zabbixイベント情報のホス
トをクリックすると、該当
ホストの構成管理理DBの内容
を表⽰示

設定済テンプレート
  エンタープライズITサービス管理理に必要なデータモデル、ワークフロー、
レポート、ダッシュボードが、設定済みのテンプレート
  有償オプション
  セルフサービスポータル（Liferay）
  Microsoft Active Directoryコネクタ（ユーザデータの同期）
  インベントリ収集コネクタ（インベントリ⾃自動収集と同期）
  vSphere vCenterコネクタ（VM情報の同期）
  モバイル対応（iOS>=6, Android>=4.0.3）
15/08/07
22
サービス戦略略サービス設計サービス移⾏行行サービス運⽤用継続的改善
財務管理理サービスカタログ管理理変更更管理理イベント管理理 7ステップ改善
需要管理理サービスレベル管理理資産構成管理理インシデント管理理サービス測定
ポートフォリオ管理理キャパシティ管理理ナレッジ管理理リクエスト対応サービスレポート
可⽤用性管理理移⾏行行計画／⽀支援アクセス管理理
サービス継続性管理理リリースデプロイ管理理問題管理理
セキュリティ管理理
サービスバリデーショ
ン／テスト
サービスデスク
サプライヤ管理理評価技術管理理
アプリケーション管理理
オペレーション管理理

Ready2Useデータモデル
  組織
  内部／外部スタッフ、会社／部⾨門
  場所
  ビル／フロア／部屋
  購買管理理
  購買元／購買元担当者／発注／検収
  サービス管理理
  サービス種別／契約／KPI／サービス要求
  構成アイテム
  クライアント：デスクトップPC／ノートPC／プリンタ／モニタ／クライアントソフト／ライセンス
  インフラ：サーバ／クラスタ／ストレージ／ラック／NW機器
  電話：交換機／電話機／携帯機器／SIM
  ネットワーク：VLAN／VPN／NWインターフェース
  ソフトウェア：基盤SW／データベース／アプリケーション／その他
  サポート
  ナレッジベース／プロセス定義／システム定義
15/08/07
23

サービスカタログ管理理
  IT部⾨門が提供しているITサービスの情報を⼀一元化し、
ユーザに標準化されたサービスを届けます。
  ITサービス定義
  ビジネス・サービス
ユーザ視点のサービスメニュー
  テクニカル・サービス
IT部⾨門視点のサービスメニュー
  各サービスメニューのSLAとKPI
  サービス要求と作業依頼のワークフローに連携
15/08/07
24
ユーザ
サービス提供
サービス要求
サービス
カタログ
確認
承認
管理理者

インシデント管理理
  IT障害回復復要求に対するワークフロー
  メール、セルフサービスポータルからの受付から、分類と記録、優先度度
管理理、SLA管理理
  サービス要求／変更更管理理への連携
  メール及びポータル⼊入⼒力力の記録と追跡
  ナレッジベースと添付書類の管理理.
15/08/07
25
作業実施
作業担当者
エスカレーション
ヘルプデスク
ユーザ
インシデント
解決

サービス要求管理理
  ITサービスの障害ではない、ユーザからのサポート、調達、情報、ドキュメント
の依頼に対するワークフロー
  メール、セルフサービスポータルからの受付から、分類と記録、優先度度管理理、
SLA管理理
  サービスカタログからの標準サービスと、カタログにない⾮非標準サービスの受付
  標準サービスは、作業依頼ワークフロー、⾮非標準サービスは変更更管理理への連携
  ナレッジベースと添付書類の管理理
15/08/07
26
ユーザ
回答
サービス要求
ヘルプデスク
確認
承認者
承認
作業実施
作業担当者

変更更管理理
  インシデント管理理やサービス要求などの構成変更更依頼に対するワークフロー
  メール、セルフサービスポータルからの受付から、分類と記録、優先度度管理理、
SLA管理理
  変更更依頼は、変更更管理理者によって承認され、実施とレビューを経てクローズされ
ます。
  ナレッジベースと添付書類の管理理
15/08/07
27
変更更
管理理者
承認
作業担当者
作業実施
作業担当者
分析
不不受理理

資産管理理
  構成アイテムの発注から、受領領／検収／配置／移設／廃棄等の
ライフサイクル管理理ワークフロー
  資産のステータスと場所を追跡、記録
  ネットワーク結線とIPアドレス配布を管理理
15/08/07
28
納品
発注
購買申請
受領領
検収
倉庫
試験
廃却
使⽤用中
修理理中
使⽤用可能
廃棄済
在庫状態
変更更
割当
移設
取替
返却
移管
廃棄
倉庫移動

レポーティング
  定義済レポート
  場所別構成アイテム⼀一覧
  資産管理理リスト
  場所別資産
  在庫履履歴
  ラックレイアウト
  インシデント管理理・平均完了了時間
  インシデント管理理・オープン
  インシデント管理理・タイムテーブル
  MTBF（平均故障間隔）
  サービス要求・平均完了了時間
  サービス要求・オープン
  サービス要求・タイムテーブル
  VMwareコネクタサマリ
  ADコネクタサマリ
  OCSコネクタサマリ
  出⼒力力フォーマット
  PDF
  ODT
  RTF
  CSV
15/08/07
29

セルフサービスポータル
  有償オプション
15/08/07
30

セルフサービスポータル
15/08/07
31

ジョブ管理理：JobSchedulerの特⻑⾧長
  オープンソース（GNU Public License V.2）
  Linux/Windows版は、全ての機能が無料料で使⽤用可能。
  サポートライセンスを購⼊入すれば、HP-UX/Solaris/AIX版の利利⽤用に加えて、障害対応、
バグフィックス／ワークアラウンドの提供、新機能の早期提供、チケットシステム
(OTRS)、JIRAの利利⽤用が提供される。
  プログラマブル
  ジョブの中で、Java, Perl, JavaScript, VBScript, Powershell, javax.scriptの内部APIを
使ったロジックを記述可能
  外部API（XML形式）によりRESTまたはコマンドラインからジョブの実⾏行行制御、実⾏行行
状況の取得が可能
  エンタープライズ・グレード
  ファイル転送やログローテンション等豊富なテンプレート機能
  リモートジョブ実⾏行行、冗⻑⾧長化機能、ロードバランス、外部認証等、エンタープライズ
向け⼤大規模システム対応
  JasperReport（ジョブ実⾏行行レポート）やZabbix/Nagios（ジョブ実⾏行行監視）との連携機
能
  MySQLの他、PostgreSQL, Oracle, DB2, MS SQL Server, Firebirdに対応
  豊富な導⼊入実績15/08/07
32

導⼊入事例例１
  国内製造業A社
  流流通・⼩小売業向けの各種機器を製造
  機器導⼊入先のエンドユーザー企業で、機器の保守のほか、ネットワーク監視、運⽤用監視
サービスも併せて提供している
  監視システムのリプレースプロジェクト
  Nagiosを監視エンジンとして使⽤用したシステムを開発・導⼊入
  2012年年1⽉月開発開始、同年年9⽉月から本稼働
  フロントエンドはCakePHPで開発
  監視対象ノードは現在6,000を超える
  監視対象
  疎通やサーバの⽣生死等のネットワーク監視
  業務運⽤用系の監視　←これはNagiosだけでは難しい
  店舗レジの開閉店処理理の実施有無
  マスタファイルの送信処理理の成否
  監視規模
  1つのエンドユーザー企業で、数百店舗（＝ノード）の監視が必要となることも
15/08/07
33

新システム構成
15/08/07
34

機器アップグレードでの活⽤用
15/08/07

導⼊入事例例２
  データセンタ事業者
  監視サービス設定の⾃自動化
  設定シートを読み込んで、監視対象へのZabbixエージェン
トインストール／設定と、Zabbixサーバへの監視登録を⾃自
動化
  通信事業者
  社内設備テスト環境の⾃自動化
  数百パターンの試験項⽬目を⾃自動実⾏行行
15/08/07
36

Zabbixによるジョブ実⾏行行状況監視
  Hyclops Jobmonitoring
  http://tech-sketch.github.io/hyclops_jm/jp/
  Zabbix APIとJobScheduler APIを使った、連携モジュール
  実⾏行行モジュールはFabricで実装
  他のプログラムからも呼び出し可能
15/08/07
37
WEB APIpolling
ZabbixAPI

Hyclops Jobmonitoring概要
15/08/07
38
ジョブをZabbix監視アイテムに⾃自動登録
  JobSchedulerにジョブを登録すると、⾃自動的にZabbixに
ジョブ監視アイテムを設定
Zabbixからジョブのアラート監視
  ジョブ定義で指定したアラート（開始遅延、実⾏行行失敗等）
を監視
Zabbixからジョブの実⾏行行時間監視
  各ジョブの実⾏行行時間履履歴を監視、傾向グラフを表⽰示
Zabbix監視閾値をジョブから⾃自動変更更
  特定のジョブを実⾏行行する際に、cpu loadやmemory freeの
閾値を変更更し、実⾏行行完了了後元に戻す

Zabbix画⾯面イメージ
15/08/07
39
ジョブ監視
アイテム
ジョブ実⾏行行
時間推移

クラウド⾃自動化基盤：openQRM
15/08/07
Copyright 2014(C) OSS Laboratories Inc. All Rights Reserved 40
オンプレミス
（物理・仮想マシン）
プライベートクラウド
（仮想マシン）
パブリッククラウドサービス
（仮想マシン）
IPMI
API
システム
イメージ
システム
イメージ
クラウド管理
ダッシュボード
ユーザ
ポータル
AMIVMware, KVM, Xen, etc.
プロビジョ
ニング
OSイン
ストール
各種
設定
アプリイン
ストール
運用
監視
移行
HA/DR
ユーザ管理
課金管理
•  ベアメタル
•  AWS
•  OpenStack
•  VMware
•  KVM/Xen
•  LXC/Docker
•  LinuxCOE
•  Cobbler
•  Clonezilla
•  FAI, OPSI
•  Puppet
•  Ansible
•  Kickstart
•  preseed
•  ZABBIX
•  Nagios/Icinga
•  Collectd
•  idoit
•  Live Migration
•  イメージインポート／エキスポート
•  LCMC
•  Pacemaker, Corosync, Heartbeat,
DRBD
•  OpenLDAP
移行
移行
API

15/08/07
41

「今、ヨーロッパのオープンソースがアツい！」クラウドの構成管理を自動化する基盤CMDBuild

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to 「今、ヨーロッパのオープンソースがアツい！」クラウドの構成管理を自動化する基盤CMDBuild

Similar to 「今、ヨーロッパのオープンソースがアツい！」クラウドの構成管理を自動化する基盤CMDBuild (20)

More from OSSラボ株式会社

More from OSSラボ株式会社 (20)

Recently uploaded

Recently uploaded (9)