Submit Search
Upload
とある社内ビックデータ基盤にバッチ用コンテナ基盤を構築してみた
•
2 likes
•
2,797 views
H
Hiroshi Toda
Follow
とある社内ビックデータ基盤にバッチ用コンテナ基盤を構築してみた
Read less
Read more
Data & Analytics
Report
Share
Report
Share
1 of 27
Download now
Download to read offline
Recommended
Dockerコンテナとイメージの違いについて、コマンドを交えて解説。 JAWS-UG コンテナ支部 入門編#4 発表資料 2017年3月30日(木) 19:00- #jawsug_ct #jawsug https://jawsug-container.connpass.com/event/51776/
DockerとDocker Hubの操作と概念
DockerとDocker Hubの操作と概念
Masahito Zembutsu
2016年3月22日(月) 18:30 ~ JAWS-UGコンテナ支部×JAWS-UG CLI専門支部 #1 発表資料 jawsug-container.connpass.com/event/27537/ 会場:NHN テコラス株式会社 #jawsug #jawsug_cli #jawsug_ct
Dockerイメージの理解とコンテナのライフサイクル
Dockerイメージの理解とコンテナのライフサイクル
Masahito Zembutsu
2014/12/15にコワーキングスペースCo-Edoでお話したDockerに関するプレゼン資料です。好評でしたので、公開したいと思います。
捕鯨!詳解docker
捕鯨!詳解docker
雄哉 吉田
Docker の特徴と使い方、簡単なネットワークの仕組みとコンテナ間の連携方法、及び3階層モデルの構築例などを記載しています。
Docker入門: コンテナ型仮想化技術の仕組みと使い方
Docker入門: コンテナ型仮想化技術の仕組みと使い方
Yuichi Ito
2015-01-27 Docker introduction ( http://goo.gl/gPtECf )の最新版です。 @uzyexe
2015-07-27 Docker Introduction 〜Dockerの基礎とユースケースに関する考察〜
2015-07-27 Docker Introduction 〜Dockerの基礎とユースケースに関する考察〜
Shuji Yamada
オトナのプログラミング勉強会 2017/04/19
オトナのDocker入門
オトナのDocker入門
Tsukasa Kato
近年 Docker というオープンソース・ソフトウェアが流行していますが、仮想化などの設計、実装をおこなう基盤技術者(基盤屋)の使うツールだと思っていませんか? 実はアプリケーション設計・開発者(アプリ屋)がDockerを覚えておくと、ソフトウェア開発プロジェクトの初期に構築するGitやSubversionなどの構成管理システム、Redmineなどのチケット管理システム、JenkinsなどのCIサーバを簡単に構築、運用することができるようになります。またある程度使い方を理解すればITレベルのテスト環境の運用にも応用できるようになります。 本セッションでは、"アプリ屋"の方々が明日から使えるように、Dockerの基本と、Subversion/Redmine/Jenkinsを元にした構築・保守の方法について紹介します。
アプリ屋もDockerをドカドカ使おう ~ Docker入門
アプリ屋もDockerをドカドカ使おう ~ Docker入門
Hori Tasuku
2016年2月18日(木) 目黒雅叙園 Developers Summit 2016 発表資料 #devsumi 【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座 http://event.shoeisha.jp/devsumi/20160218/session/1015/
【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座
【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座
Masahito Zembutsu
Recommended
Dockerコンテナとイメージの違いについて、コマンドを交えて解説。 JAWS-UG コンテナ支部 入門編#4 発表資料 2017年3月30日(木) 19:00- #jawsug_ct #jawsug https://jawsug-container.connpass.com/event/51776/
DockerとDocker Hubの操作と概念
DockerとDocker Hubの操作と概念
Masahito Zembutsu
2016年3月22日(月) 18:30 ~ JAWS-UGコンテナ支部×JAWS-UG CLI専門支部 #1 発表資料 jawsug-container.connpass.com/event/27537/ 会場:NHN テコラス株式会社 #jawsug #jawsug_cli #jawsug_ct
Dockerイメージの理解とコンテナのライフサイクル
Dockerイメージの理解とコンテナのライフサイクル
Masahito Zembutsu
2014/12/15にコワーキングスペースCo-Edoでお話したDockerに関するプレゼン資料です。好評でしたので、公開したいと思います。
捕鯨!詳解docker
捕鯨!詳解docker
雄哉 吉田
Docker の特徴と使い方、簡単なネットワークの仕組みとコンテナ間の連携方法、及び3階層モデルの構築例などを記載しています。
Docker入門: コンテナ型仮想化技術の仕組みと使い方
Docker入門: コンテナ型仮想化技術の仕組みと使い方
Yuichi Ito
2015-01-27 Docker introduction ( http://goo.gl/gPtECf )の最新版です。 @uzyexe
2015-07-27 Docker Introduction 〜Dockerの基礎とユースケースに関する考察〜
2015-07-27 Docker Introduction 〜Dockerの基礎とユースケースに関する考察〜
Shuji Yamada
オトナのプログラミング勉強会 2017/04/19
オトナのDocker入門
オトナのDocker入門
Tsukasa Kato
近年 Docker というオープンソース・ソフトウェアが流行していますが、仮想化などの設計、実装をおこなう基盤技術者(基盤屋)の使うツールだと思っていませんか? 実はアプリケーション設計・開発者(アプリ屋)がDockerを覚えておくと、ソフトウェア開発プロジェクトの初期に構築するGitやSubversionなどの構成管理システム、Redmineなどのチケット管理システム、JenkinsなどのCIサーバを簡単に構築、運用することができるようになります。またある程度使い方を理解すればITレベルのテスト環境の運用にも応用できるようになります。 本セッションでは、"アプリ屋"の方々が明日から使えるように、Dockerの基本と、Subversion/Redmine/Jenkinsを元にした構築・保守の方法について紹介します。
アプリ屋もDockerをドカドカ使おう ~ Docker入門
アプリ屋もDockerをドカドカ使おう ~ Docker入門
Hori Tasuku
2016年2月18日(木) 目黒雅叙園 Developers Summit 2016 発表資料 #devsumi 【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座 http://event.shoeisha.jp/devsumi/20160218/session/1015/
【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座
【18-E-3】クラウド・ネイティブ時代の2016年だから始める Docker 基礎講座
Masahito Zembutsu
Explaining “Best practices for writing Dockerfiles” Dockerfileを書くためのベストプラクティス【参考訳】v18.09 - Qiita https://qiita.com/zembutsu/items/a96b68277d699f79418d こちらをベースにした解説スライドです。
Dockerfile を書くためのベストプラクティス解説編
Dockerfile を書くためのベストプラクティス解説編
Masahito Zembutsu
2020年1月29日開催 ゼロからはじめるDocker入門【ビヨンド勉強会#22】 - connpass https://beyondjapan.connpass.com/event/160565/
Docker 9 tips~意外と知られていない日常で役立つ便利技
Docker 9 tips~意外と知られていない日常で役立つ便利技
Masahito Zembutsu
ver1.0 公開 ver1.1 ディスクイメージを直接操作する方法を追加 (2015/02/20)
Dockerイメージ管理の内部構造
Dockerイメージ管理の内部構造
Etsuji Nakai
Cloud Developers Circle #3 - Container Jam ( https://cdevc.connpass.com/event/64634/ )でお話した資料です。発表後にわかりにくいところなどを改変したものです。 コンテナ技術そのものについては勉強済みを前提としております。
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
雄哉 吉田
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Masahiro Nagano
第2回エンタープライズ向けのオープンソース勉強会 - 『コンテナ仮想化「Docker」技術勉強会』
Dockerの仕組みとIIJ社内での利用例
Dockerの仕組みとIIJ社内での利用例
maebashi
NTT-AT社内で定期的に実施している勉強会(CORETECH技術講習会)で発表した資料です。
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
Naoki Nagazumi
今さら聞けない人のためのDocker超入門 講師:宮原 徹(日本仮想化技術株式会社 代表取締役兼CEO) Docker盛り上がってるなあ、と横目で見ながら、今まで触らずに来てしまった。今さらDockerの使い方とか聞けない、という方のためのDocker超入門です。CentOS 7を使って、Dockerの基本的な使い方をデモを交えて解説します。また、DockerとOpenStackの連携についても簡単に解説します。
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
VirtualTech Japan Inc.
Linux女子部08「Docker勉強会」 http://connpass.com/event/6318/ で使用予定の資料の一部です。 変更履歴 ver1.0 公開 ver1.1 Dockerfileの内容修正 ver1.2 「Dockerとは?」追加 ver1.3 「Dockerが無いとき」を追加 ver1.4 Dockerfileを分かりやすく修正 ver1.5 微修正 ver1.6 docker-io-0.11.1-3.el7.x86_64に合わせて手順を修正 ver 1.8 Fedora20 + Docker1.0 に手順を変更 ver 1.9 run/stop/start/rm のライフサイクルの説明を追加
Dockerクイックツアー
Dockerクイックツアー
Etsuji Nakai
グリー社内勉強会「Mini Tech Talk」発表資料 (20150327) Dockerの基本的な話 / 足立 紘亮(@foostan) ※「Mini Tech Talk」とは、グリー社内で毎週金曜のランチタイムを利用して開催されている技術勉強会です
Dockerの基本的な話
Dockerの基本的な話
gree_tech
Container SIG Meet-up 2017 Spring https://connpass.com/event/54774/ の、発表資料です。 ・Dockerの現状 ・バージョン表記 ・Mobyプロジェクトについて など
忙しい人の5分で分かるDocker 2017年春Ver
忙しい人の5分で分かるDocker 2017年春Ver
Masahito Zembutsu
コンテナ技術と普及がシステム・インテグレータに与える影響 2016年3月4日(金) IDFフロンティア セミナールーム NCWC第35回会合 発表資料 【テーマ】『Dockerのクラウドビジネス利用の勘所』
コンテナ技術と普及がシステム・インテグレータに与える影響
コンテナ技術と普及がシステム・インテグレータに与える影響
Masahito Zembutsu
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】 JAWS-UG コンテナ支部 Docker 入門 #2 2015年10月30日(金) http://jawsug-container.connpass.com/event/20924/ ※コンテナ支部での発表スライドですが、内容は Docker に対して興味のある方、すべてを対象としています。前回のバージョンそのままではなく、説明の追加など、現在の状況にあわせて、ほぼ全面的に書き直しています。
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
Masahito Zembutsu
JAWS-UG コンテナ支部のDocker入門 #2 で利用する ハンズオン資料です
JAWS-UG コンテナ支部 Docker入門 ハンズオン
JAWS-UG コンテナ支部 Docker入門 ハンズオン
Ryo Nakamaru
Developers Summit 2017 KYUSYU 2017年9月22日(金)アクロス福岡 http://event.shoeisha.jp/devsumi/20170922 発表資料 【A-1】Docker最新動向2017秋+セキュリティの落とし穴
Docker最新動向2017秋+セキュリティの落とし穴
Docker最新動向2017秋+セキュリティの落とし穴
Masahito Zembutsu
Cloud Native から、アプリケーションをスケールする Swarm Mode の機能と役割まで OSSユーザーのための勉強会 <OSS X Users Meeting>#22 Docker と kubernetes 発表資料 2018年1月30日
分散環境におけるDocker とオーケストレーション
分散環境におけるDocker とオーケストレーション
Masahito Zembutsu
Docker Inc.の Jérôme Petazzoniさんが re:Invent2015で行った「From Local Docker Development to Production Deployment」というセッションの資料を、ご本人の了解を得て日本語に訳したものです。
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Ryo Nakamaru
https://sakura-kanto.doorkeeper.jp/events/53172
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Masahito Zembutsu
Master Cloud #mastercloud 発表資料です 2017年6月14日(水) https://mastercloud.connpass.com/event/57936/
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Masahito Zembutsu
OSC2016 長岡発表資料 2016年10月1日(土)
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Masahito Zembutsu
これからECSをはじめる人のためのECSベストプラクティス JAWS-UG コンテナ支部 2017.03.30 https://jawsug-container.connpass.com/event/51776/
JAWS-UG ECS Best Practices #jawsug_ct
JAWS-UG ECS Best Practices #jawsug_ct
Yu Sudo
構成管理ツールのItamaeとインフラ自動テストツールのServerspecについての入門資料です。
Itamae-Serverspec入門
Itamae-Serverspec入門
辰徳 斎藤
More Related Content
What's hot
Explaining “Best practices for writing Dockerfiles” Dockerfileを書くためのベストプラクティス【参考訳】v18.09 - Qiita https://qiita.com/zembutsu/items/a96b68277d699f79418d こちらをベースにした解説スライドです。
Dockerfile を書くためのベストプラクティス解説編
Dockerfile を書くためのベストプラクティス解説編
Masahito Zembutsu
2020年1月29日開催 ゼロからはじめるDocker入門【ビヨンド勉強会#22】 - connpass https://beyondjapan.connpass.com/event/160565/
Docker 9 tips~意外と知られていない日常で役立つ便利技
Docker 9 tips~意外と知られていない日常で役立つ便利技
Masahito Zembutsu
ver1.0 公開 ver1.1 ディスクイメージを直接操作する方法を追加 (2015/02/20)
Dockerイメージ管理の内部構造
Dockerイメージ管理の内部構造
Etsuji Nakai
Cloud Developers Circle #3 - Container Jam ( https://cdevc.connpass.com/event/64634/ )でお話した資料です。発表後にわかりにくいところなどを改変したものです。 コンテナ技術そのものについては勉強済みを前提としております。
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
雄哉 吉田
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Masahiro Nagano
第2回エンタープライズ向けのオープンソース勉強会 - 『コンテナ仮想化「Docker」技術勉強会』
Dockerの仕組みとIIJ社内での利用例
Dockerの仕組みとIIJ社内での利用例
maebashi
NTT-AT社内で定期的に実施している勉強会(CORETECH技術講習会)で発表した資料です。
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
Naoki Nagazumi
今さら聞けない人のためのDocker超入門 講師:宮原 徹(日本仮想化技術株式会社 代表取締役兼CEO) Docker盛り上がってるなあ、と横目で見ながら、今まで触らずに来てしまった。今さらDockerの使い方とか聞けない、という方のためのDocker超入門です。CentOS 7を使って、Dockerの基本的な使い方をデモを交えて解説します。また、DockerとOpenStackの連携についても簡単に解説します。
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
VirtualTech Japan Inc.
Linux女子部08「Docker勉強会」 http://connpass.com/event/6318/ で使用予定の資料の一部です。 変更履歴 ver1.0 公開 ver1.1 Dockerfileの内容修正 ver1.2 「Dockerとは?」追加 ver1.3 「Dockerが無いとき」を追加 ver1.4 Dockerfileを分かりやすく修正 ver1.5 微修正 ver1.6 docker-io-0.11.1-3.el7.x86_64に合わせて手順を修正 ver 1.8 Fedora20 + Docker1.0 に手順を変更 ver 1.9 run/stop/start/rm のライフサイクルの説明を追加
Dockerクイックツアー
Dockerクイックツアー
Etsuji Nakai
グリー社内勉強会「Mini Tech Talk」発表資料 (20150327) Dockerの基本的な話 / 足立 紘亮(@foostan) ※「Mini Tech Talk」とは、グリー社内で毎週金曜のランチタイムを利用して開催されている技術勉強会です
Dockerの基本的な話
Dockerの基本的な話
gree_tech
Container SIG Meet-up 2017 Spring https://connpass.com/event/54774/ の、発表資料です。 ・Dockerの現状 ・バージョン表記 ・Mobyプロジェクトについて など
忙しい人の5分で分かるDocker 2017年春Ver
忙しい人の5分で分かるDocker 2017年春Ver
Masahito Zembutsu
コンテナ技術と普及がシステム・インテグレータに与える影響 2016年3月4日(金) IDFフロンティア セミナールーム NCWC第35回会合 発表資料 【テーマ】『Dockerのクラウドビジネス利用の勘所』
コンテナ技術と普及がシステム・インテグレータに与える影響
コンテナ技術と普及がシステム・インテグレータに与える影響
Masahito Zembutsu
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】 JAWS-UG コンテナ支部 Docker 入門 #2 2015年10月30日(金) http://jawsug-container.connpass.com/event/20924/ ※コンテナ支部での発表スライドですが、内容は Docker に対して興味のある方、すべてを対象としています。前回のバージョンそのままではなく、説明の追加など、現在の状況にあわせて、ほぼ全面的に書き直しています。
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
Masahito Zembutsu
JAWS-UG コンテナ支部のDocker入門 #2 で利用する ハンズオン資料です
JAWS-UG コンテナ支部 Docker入門 ハンズオン
JAWS-UG コンテナ支部 Docker入門 ハンズオン
Ryo Nakamaru
Developers Summit 2017 KYUSYU 2017年9月22日(金)アクロス福岡 http://event.shoeisha.jp/devsumi/20170922 発表資料 【A-1】Docker最新動向2017秋+セキュリティの落とし穴
Docker最新動向2017秋+セキュリティの落とし穴
Docker最新動向2017秋+セキュリティの落とし穴
Masahito Zembutsu
Cloud Native から、アプリケーションをスケールする Swarm Mode の機能と役割まで OSSユーザーのための勉強会 <OSS X Users Meeting>#22 Docker と kubernetes 発表資料 2018年1月30日
分散環境におけるDocker とオーケストレーション
分散環境におけるDocker とオーケストレーション
Masahito Zembutsu
Docker Inc.の Jérôme Petazzoniさんが re:Invent2015で行った「From Local Docker Development to Production Deployment」というセッションの資料を、ご本人の了解を得て日本語に訳したものです。
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Ryo Nakamaru
https://sakura-kanto.doorkeeper.jp/events/53172
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Masahito Zembutsu
Master Cloud #mastercloud 発表資料です 2017年6月14日(水) https://mastercloud.connpass.com/event/57936/
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Masahito Zembutsu
OSC2016 長岡発表資料 2016年10月1日(土)
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Masahito Zembutsu
What's hot
(20)
Dockerfile を書くためのベストプラクティス解説編
Dockerfile を書くためのベストプラクティス解説編
Docker 9 tips~意外と知られていない日常で役立つ便利技
Docker 9 tips~意外と知られていない日常で役立つ便利技
Dockerイメージ管理の内部構造
Dockerイメージ管理の内部構造
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
本格的にコンテナを利用するために ~ Azureでのコンテナ利用パターン
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Dockerで遊んでみよっかー YAPC::Asia Tokyo 2014
Dockerの仕組みとIIJ社内での利用例
Dockerの仕組みとIIJ社内での利用例
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
そろそろ知っておきたい!!コンテナ技術とDockerのキホン
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
今さら聞けない人のためのDocker超入門 – OpenStack最新情報セミナー 2015年4月
Dockerクイックツアー
Dockerクイックツアー
Dockerの基本的な話
Dockerの基本的な話
忙しい人の5分で分かるDocker 2017年春Ver
忙しい人の5分で分かるDocker 2017年春Ver
コンテナ技術と普及がシステム・インテグレータに与える影響
コンテナ技術と普及がシステム・インテグレータに与える影響
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
Docker入門-基礎編 いまから始めるDocker管理【2nd Edition】
JAWS-UG コンテナ支部 Docker入門 ハンズオン
JAWS-UG コンテナ支部 Docker入門 ハンズオン
Docker最新動向2017秋+セキュリティの落とし穴
Docker最新動向2017秋+セキュリティの落とし穴
分散環境におけるDocker とオーケストレーション
分散環境におけるDocker とオーケストレーション
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Dockerを使ったローカルでの開発から本番環境へのデプロイまで
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Rancher/Kubernetes入門ハンズオン資料~第2回さくらとコンテナの夕べ #さくらの夕べ 番外編
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Docker Compose入門~今日から始めるComposeの初歩からswarm mode対応まで
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Dockerの基本と応用~快適コンテナライフを実現するArukas~
Viewers also liked
これからECSをはじめる人のためのECSベストプラクティス JAWS-UG コンテナ支部 2017.03.30 https://jawsug-container.connpass.com/event/51776/
JAWS-UG ECS Best Practices #jawsug_ct
JAWS-UG ECS Best Practices #jawsug_ct
Yu Sudo
構成管理ツールのItamaeとインフラ自動テストツールのServerspecについての入門資料です。
Itamae-Serverspec入門
Itamae-Serverspec入門
辰徳 斎藤
2017/3/31 Tech-Cirlce Itamae&Serverspecの会でのLT資料。
Serverspecを自分好みにアレンジ スクリーンショットで証跡保存を撲滅-
Serverspecを自分好みにアレンジ スクリーンショットで証跡保存を撲滅-
Daisuke Ikeda
Esri Developer Summit 参加報告
Esri Developer Summit 参加報告
Esri Developer Summit 参加報告
Takahiro Kamiya
Node-RED UG勉強会 Vol.4 「Node-RED x つかってみた!」にて登壇いたしました。 https://node-red.connpass.com/event/51105/ Node-redにて追加されたJSONataのすばらしさについて npmでインストールすることも可能です。
Node-red+JSONataでfunction地獄からの卒業
Node-red+JSONataでfunction地獄からの卒業
kazuhiro harada
2017/03/24 HTML5j Webプラットフォーム部 第16回での発表資料です。
20170324 web payment_open
20170324 web payment_open
Hideki Ojima
「DBAが夜間メンテをしなくなった日」発表資料
20170329 D3 DBAが夜間メンテをしなくなった日 発表資料
20170329 D3 DBAが夜間メンテをしなくなった日 発表資料
dcubeio
Node-RED UG勉強会 Vol.4 「Node-RED x つかってみた!」のLT資料です。 injectノードをつかえば、指定した時間の起動を行えます。
Twilio+Node-REDで作る自動モーニングコール
Twilio+Node-REDで作る自動モーニングコール
rina0521
Node学園 24時限目 でのLT発表資料 https://nodejs.connpass.com/event/53534/
君はyarn.lockをコミットしているか?
君はyarn.lockをコミットしているか?
Teppei Sato
html5j Webプラットフォーム部 第16回勉強会
20170324 html5j web_paltform_study
20170324 html5j web_paltform_study
Junichi Okamura
How to use google earth in class?
Google earth
Google earth
Youngju Kim
Container Tech Night 第一回勉強会資料
20170329 container technight-第一回勉強会
20170329 container technight-第一回勉強会
Minehiko Nohara
https://connpass.com/event/51080/
Ansible container
Ansible container
Naoya Hashimoto
2017/02/02 D-Cube勉強会資料
はじめてのAws lambda
はじめてのAws lambda
dcubeio
急成長Techベンチャーのプロダクトマネージャーが語るPMの仕事・魅力
【freee】プロダクトマネージャーの仕事と魅力
【freee】プロダクトマネージャーの仕事と魅力
dcubeio
急成長Techベンチャーのプロダクトマネージャーが語るPMの仕事・魅力
【ビズリーチ】プロダクトマネージャーの仕事と魅力
【ビズリーチ】プロダクトマネージャーの仕事と魅力
dcubeio
管理画面チラ見せナイト #4 登壇資料
【管理画面チラ見せナイト #4】ヌリカエCSを支える技術
【管理画面チラ見せナイト #4】ヌリカエCSを支える技術
Kohtaro Nishi
『Ansible徹底入門』出版イベント発表資料 Feb 27, 2017
DevOpsにおけるAnsibleの立ち位置と使い所
DevOpsにおけるAnsibleの立ち位置と使い所
Hidetoshi Hirokawa
https://d-cube.connpass.com/
Ansibleで始めるインフラ構築自動化
Ansibleで始めるインフラ構築自動化
dcubeio
20140914_第5回関西すうがく徒のつどい
20140914_曲面上の「直線」と「最短線」
20140914_曲面上の「直線」と「最短線」
matsumoring
Viewers also liked
(20)
JAWS-UG ECS Best Practices #jawsug_ct
JAWS-UG ECS Best Practices #jawsug_ct
Itamae-Serverspec入門
Itamae-Serverspec入門
Serverspecを自分好みにアレンジ スクリーンショットで証跡保存を撲滅-
Serverspecを自分好みにアレンジ スクリーンショットで証跡保存を撲滅-
Esri Developer Summit 参加報告
Esri Developer Summit 参加報告
Node-red+JSONataでfunction地獄からの卒業
Node-red+JSONataでfunction地獄からの卒業
20170324 web payment_open
20170324 web payment_open
20170329 D3 DBAが夜間メンテをしなくなった日 発表資料
20170329 D3 DBAが夜間メンテをしなくなった日 発表資料
Twilio+Node-REDで作る自動モーニングコール
Twilio+Node-REDで作る自動モーニングコール
君はyarn.lockをコミットしているか?
君はyarn.lockをコミットしているか?
20170324 html5j web_paltform_study
20170324 html5j web_paltform_study
Google earth
Google earth
20170329 container technight-第一回勉強会
20170329 container technight-第一回勉強会
Ansible container
Ansible container
はじめてのAws lambda
はじめてのAws lambda
【freee】プロダクトマネージャーの仕事と魅力
【freee】プロダクトマネージャーの仕事と魅力
【ビズリーチ】プロダクトマネージャーの仕事と魅力
【ビズリーチ】プロダクトマネージャーの仕事と魅力
【管理画面チラ見せナイト #4】ヌリカエCSを支える技術
【管理画面チラ見せナイト #4】ヌリカエCSを支える技術
DevOpsにおけるAnsibleの立ち位置と使い所
DevOpsにおけるAnsibleの立ち位置と使い所
Ansibleで始めるインフラ構築自動化
Ansibleで始めるインフラ構築自動化
20140914_曲面上の「直線」と「最短線」
20140914_曲面上の「直線」と「最短線」
Similar to とある社内ビックデータ基盤にバッチ用コンテナ基盤を構築してみた
AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開
ToruKubota4
DevOpsが引き金となるインフラエンジニアの進撃
DevOpsが引き金となるインフラエンジニアの進撃
Teruo Adachi
db tech showcase Tokyo 2016
DBTS2016 Data as Code - Delphix
DBTS2016 Data as Code - Delphix
Masaya Ishikawa
スタートアップに勝手にオススメなインフラをまとめてみました。 https://www.facebook.com/actcatinc ↑ぜひFBページいいねおねがいします!w。定期的に情報シェアさせて頂きます。
おすすめインフラ! for スタートアップ
おすすめインフラ! for スタートアップ
Koichiro Sumi
Azure DevOps Tokyo, Japan 2nd impact で登壇しました。その時の発表資料です! 登壇者 Shuhei Eda Masayuki Ota
サイドプロジェクトで使う Azure DevOps
サイドプロジェクトで使う Azure DevOps
Shuhei Eda
2021年7月13日に開催されたオンラインイベント 「Microsoft MVPの祭典 2021 - sponsored by AvePoint」で使用したスライドです。
Microsoft 365 を使い、よりよい業務環境の在り方と仕事への向き合い方を考えよう
Microsoft 365 を使い、よりよい業務環境の在り方と仕事への向き合い方を考えよう
Ai Hirano
第7回Cloud Foundry輪読会で発表したOpenShiftの資料です
これからのOpenShiftの話をしよう
これからのOpenShiftの話をしよう
Kazuto Kusama
Intalio japan special cloud workshop
Intalio japan special cloud workshop
Daisuke Sugai
PCクラスタコンソーシアムの開催する PCCC21「『PCクラスタ』これからの10年」(設立20周年記念PCクラスタシンポジウム)会員展示として公開中のスライドです。 詳細は下記のWebサイトへお越しください。 ▽PCCC21「『PCクラスタ』これからの10年」(2021年12月8日~9日) https://www.pccluster.org/ja/event/pccc21/
PCCC21:株式会社日立製作所 「研究開発力向上のための研究DXソリューション」
PCCC21:株式会社日立製作所 「研究開発力向上のための研究DXソリューション」
PC Cluster Consortium
名古屋工業大学 オブジェクト指向勉強会 http://www-ailab.elcom.nitech.ac.jp/oop/
ソフトウェア開発の現場風景
ソフトウェア開発の現場風景
Koichi ITO
ーーーーーーーーーーーーーーーーーーーーーーー schoo WEB-campusは「WEBに誕生した、学校の新しいカタチ」。 WEB生放送の授業を無料で配信しています。 ▼こちらから授業に参加すると、先生への質問や、ユーザーとのチャット、資料の拡大表示等が可能です。 https://schoo.jp/class/342/room ーーーーーーーーーーーーーーーーーーーーーーー
スマホ最適化のためのデザイン・コーディング実習 先生:池田 祐太郎
スマホ最適化のためのデザイン・コーディング実習 先生:池田 祐太郎
schoowebcampus
NTT Tech conference #2での発表資料です
イケてない開発チームがイケてる開発を始めようとする軌跡
イケてない開発チームがイケてる開発を始めようとする軌跡
NTT Communications Technology Development
MANABIYA DAY1 ランチセッション 発表資料
インフラエンジニアがk8sでアプリを作って見えた今後のインフラ
インフラエンジニアがk8sでアプリを作って見えた今後のインフラ
susumu tanaka
Agile Japan 2015 サテライト<沖縄> https://java-kuche.doorkeeper.jp/events/22305 --- 開発を安心して高速に回すための取り組みの一つに 「テストの実行時間を短縮する」 というものがある。 今回はその一例として、Docker のコンテナ技術を用いてテスト並列実行の高速化かつ安定化を目指した記録を紹介する
あなたの安心を高速に守る Container-based CI
あなたの安心を高速に守る Container-based CI
Wataru MIYAGUNI
■Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料) 2014/11/06 NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 土橋 昌
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
NTT DATA OSS Professional Services
https://connpass.com/event/122145/
Visual Studio 2019 / Visual Studio Code + Live Shareではじめるモブ・プログラミング #vs2019
Visual Studio 2019 / Visual Studio Code + Live Shareではじめるモブ・プログラミング #vs2019
満徳 関
Azure DevOps and Azure's compliance feature.
DevOps and Compliance and Security
DevOps and Compliance and Security
Kazushi Kamegawa
TFSはいろんなソフトウェアの上に成り立っています。よって、スムースに運用するためにはいくつかほかのソフトについて知らなくてはならないことがあります。 そういう観点でまとめてみました。
TFSを支える技術
TFSを支える技術
Kazushi Kamegawa
https://serverless.connpass.com/event/61402/
Docker Actionを利用してOpenWhiskをあれこれする
Docker Actionを利用してOpenWhiskをあれこれする
Hideaki Tokida
Developers Summit 2015 【20-C-7】変革のSIer~挑戦者たち~ 講演資料 http://event.shoeisha.jp/devsumi/20150219/session/696/ Open棟梁について - OSSコンソーシアム https://www.osscons.jp/dotNetDevelopmentInfrastructure/OpenTouryo/
.NET用アプリケーション フレームワーク “Open 棟梁”のオープンソース化について
.NET用アプリケーション フレームワーク “Open 棟梁”のオープンソース化について
Daisuke Nishino
Similar to とある社内ビックデータ基盤にバッチ用コンテナ基盤を構築してみた
(20)
AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開
DevOpsが引き金となるインフラエンジニアの進撃
DevOpsが引き金となるインフラエンジニアの進撃
DBTS2016 Data as Code - Delphix
DBTS2016 Data as Code - Delphix
おすすめインフラ! for スタートアップ
おすすめインフラ! for スタートアップ
サイドプロジェクトで使う Azure DevOps
サイドプロジェクトで使う Azure DevOps
Microsoft 365 を使い、よりよい業務環境の在り方と仕事への向き合い方を考えよう
Microsoft 365 を使い、よりよい業務環境の在り方と仕事への向き合い方を考えよう
これからのOpenShiftの話をしよう
これからのOpenShiftの話をしよう
Intalio japan special cloud workshop
Intalio japan special cloud workshop
PCCC21:株式会社日立製作所 「研究開発力向上のための研究DXソリューション」
PCCC21:株式会社日立製作所 「研究開発力向上のための研究DXソリューション」
ソフトウェア開発の現場風景
ソフトウェア開発の現場風景
スマホ最適化のためのデザイン・コーディング実習 先生:池田 祐太郎
スマホ最適化のためのデザイン・コーディング実習 先生:池田 祐太郎
イケてない開発チームがイケてる開発を始めようとする軌跡
イケてない開発チームがイケてる開発を始めようとする軌跡
インフラエンジニアがk8sでアプリを作って見えた今後のインフラ
インフラエンジニアがk8sでアプリを作って見えた今後のインフラ
あなたの安心を高速に守る Container-based CI
あなたの安心を高速に守る Container-based CI
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Ansibleで構成管理始める人のモチベーションをあげたい! (Cloudera World Tokyo 2014LT講演資料)
Visual Studio 2019 / Visual Studio Code + Live Shareではじめるモブ・プログラミング #vs2019
Visual Studio 2019 / Visual Studio Code + Live Shareではじめるモブ・プログラミング #vs2019
DevOps and Compliance and Security
DevOps and Compliance and Security
TFSを支える技術
TFSを支える技術
Docker Actionを利用してOpenWhiskをあれこれする
Docker Actionを利用してOpenWhiskをあれこれする
.NET用アプリケーション フレームワーク “Open 棟梁”のオープンソース化について
.NET用アプリケーション フレームワーク “Open 棟梁”のオープンソース化について
とある社内ビックデータ基盤にバッチ用コンテナ基盤を構築してみた
1.
とある社内ビックデータ基盤に バッチ用コンテナ環境を構築してみた Created by Hiroshi
Toda ( @thiro1123 )
2.
ところで?
3.
普段からコンテナつかっていますか?
4.
現場でコンテナを使ってアプリのデプロイ してたりしますか?
5.
自己紹介 戸田浩史 独立して5年目のフリーランスです 現在のユーザは社内クラウドの利用を推進しているチームで ビジネスのスピードを殺さずにセキュリティを担保する環境を展開 してます。 好きなAWS:ECS
6.
今回の話はコンテナ環境を他プロジェクトに 導入する時に、やった(ている)事です。
7.
話す内容としては なんで導入する事になったの? 解決したかった問題は? どのようにすすめた(ている)の?
8.
なんで導入することになったの?
9.
プロジェクトで発生していた問題 日々バッチがうまく動作しない! あれ修正するためにアップデートしてみたら、 さらに他のバッチも動かなくなった \(^o^)/オワタ 事業側の担当者に怒られる orz むしろ怒られてから障害に気づく。。。
10.
なんでこんなことになるんだ・・・
11.
どんな状況か・・・ 動いているバッチの数が半端ない。 管理しているサーバ数も半端ない ジョブ管理ソフトで管理しているが追いつかない。 アラートも見ようとしているしモニタリングもしようとしているが 数が半端ない
12.
どうやらとてつもなく複雑怪奇な状況らしい
13.
なんで導入することになったの?(再)
14.
まず手始めにどうにかしたい問題 バッチが普通に動いてほしい。 バージョンアップとか安全にしたい。 今動いているバッチの邪魔をしない。 手軽にバッチを増やしたい。 素早くバッチを展開したい。 できればローカルでもサーバ上でも同じように動いて欲しい。
15.
現在は、新しい事したらその倍の問題が発生しない環境
16.
うーん? さてどうしたものか・・・
17.
少しだけコンテナのおさらい コンテナって? Source:https://www.docker.com/what‑container
18.
やりたいことは・・・ 何でアプリは動かなくなるの? ライブラリとか色々とごちゃごちゃしているから・・・ じゃあ、各アプリのライブラリが依存しないようにすれば いいの?
19.
自分の隣のいる社員さんに 自分:ライブラリの競合とか気にしたくないなら コンテナ使うのはどうですか? 社員さん:いいね!(了承3秒)
20.
なんで導入することになったの?(再)
21.
現場からは 現場からは以下のような要望も一緒にあがってました。 オンプレミスに在るとあるジョブ管理システム(JP1)から バッチを管理したい。 バッチの実行も結果の取得もオンプレ側でできる様になって欲しい。
22.
これらの要望を応えるためのコンテナ環境を構築してみました。
23.
24.
25.
デプロイや環境構築はJenkinsのジョブでほぼ用意
26.
現在は・・・ 今はこの使ってバッチをオンプレからAWSに移行している最中 導入されたチームに対して、コンテナや今回の仕組みに 参考となるソースを共有 自分が所属しているチームは他プロジェクトの 進化を手助けするため日々活動中
27.
ご清聴ありがとうございました。 Copyright © 2017
@thiro1123
Download now