Submit Search
Upload
gcpug_okinawa_#2_hiroshi_kawakami
•
Download as PPTX, PDF
•
1 like
•
332 views
H
Hiroshi Kawakami
Follow
GCPUG in Okinawa! #2 での発表資料です。内容はほぼCloud Dataflowについての話
Read less
Read more
Technology
Report
Share
Report
Share
1 of 34
Download now
Recommended
GCP vs 他社クラウド
GCP vs 他社クラウド
Hasegawa Yusuke
Google Cloud Platformでソーシャルゲームを1本出してみた!
Google Cloud Platformでソーシャルゲームを1本出してみた!
Hasegawa Yusuke
Google Compute Engine 入門
Google Compute Engine 入門
Yuko Oshima
grasysの仕組み解説
grasysの仕組み解説
Hasegawa Yusuke
ゲームインフラとGoogle Cloud Platformと酒!
ゲームインフラとGoogle Cloud Platformと酒!
Hasegawa Yusuke
アナザーエデンにおける非同期オートセーブを用いた通信待ちストレスのないゲーム体験の実現
アナザーエデンにおける非同期オートセーブを用いた通信待ちストレスのないゲーム体験の実現
gree_tech
実プロジェクトの経験から学ぶazureサービス適用パターン
実プロジェクトの経験から学ぶazureサービス適用パターン
Kuniteru Asami
Azure <3 Openness
Azure <3 Openness
Keiji Kamebuchi
Recommended
GCP vs 他社クラウド
GCP vs 他社クラウド
Hasegawa Yusuke
Google Cloud Platformでソーシャルゲームを1本出してみた!
Google Cloud Platformでソーシャルゲームを1本出してみた!
Hasegawa Yusuke
Google Compute Engine 入門
Google Compute Engine 入門
Yuko Oshima
grasysの仕組み解説
grasysの仕組み解説
Hasegawa Yusuke
ゲームインフラとGoogle Cloud Platformと酒!
ゲームインフラとGoogle Cloud Platformと酒!
Hasegawa Yusuke
アナザーエデンにおける非同期オートセーブを用いた通信待ちストレスのないゲーム体験の実現
アナザーエデンにおける非同期オートセーブを用いた通信待ちストレスのないゲーム体験の実現
gree_tech
実プロジェクトの経験から学ぶazureサービス適用パターン
実プロジェクトの経験から学ぶazureサービス適用パターン
Kuniteru Asami
Azure <3 Openness
Azure <3 Openness
Keiji Kamebuchi
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
Yahoo!デベロッパーネットワーク
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
gree_tech
OSS/linux on Azureの活用方法と勘所
OSS/linux on Azureの活用方法と勘所
Kuniteru Asami
Introduction of Azure Docker Integration
Introduction of Azure Docker Integration
Takekazu Omi
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
Google Cloud Platform - Japan
このService Fabric野郎!!
このService Fabric野郎!!
Toru Makabe
Bicep 入門 MySQL編
Bicep 入門 MySQL編
Takekazu Omi
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
Kuniteru Asami
KubernetesでPHPを動かした話
KubernetesでPHPを動かした話
gree_tech
比較サイトの検索改善(SPA から SSR に変換)
比較サイトの検索改善(SPA から SSR に変換)
gree_tech
HugCome and grasys
HugCome and grasys
Hasegawa Yusuke
Azure Stack Hybrid DevOpsデモンストレーション
Azure Stack Hybrid DevOpsデモンストレーション
Masahiko Ebisuda
開発環境を全部カソウ化!!
開発環境を全部カソウ化!!
__Black
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
Kuniteru Asami
Infrastructure as Codeの取り組みと改善
Infrastructure as Codeの取り組みと改善
Takashi Honda
大規模ライブ配信の苦労ポイント
大規模ライブ配信の苦労ポイント
gree_tech
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Yahoo!デベロッパーネットワーク
Aiming のクラウド採用基準
Aiming のクラウド採用基準
Takahiro Hozumi
Azureで始めるDevOps
Azureで始めるDevOps
Atsushi Kojima
堅牢性を高めるためのInfrastructure as Code
堅牢性を高めるためのInfrastructure as Code
Toru Makabe
GoでEPC作って本番運用している話
GoでEPC作って本番運用している話
雄也 日下部
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
Shoei Takamaru
More Related Content
What's hot
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
Yahoo!デベロッパーネットワーク
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
gree_tech
OSS/linux on Azureの活用方法と勘所
OSS/linux on Azureの活用方法と勘所
Kuniteru Asami
Introduction of Azure Docker Integration
Introduction of Azure Docker Integration
Takekazu Omi
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
Google Cloud Platform - Japan
このService Fabric野郎!!
このService Fabric野郎!!
Toru Makabe
Bicep 入門 MySQL編
Bicep 入門 MySQL編
Takekazu Omi
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
Kuniteru Asami
KubernetesでPHPを動かした話
KubernetesでPHPを動かした話
gree_tech
比較サイトの検索改善(SPA から SSR に変換)
比較サイトの検索改善(SPA から SSR に変換)
gree_tech
HugCome and grasys
HugCome and grasys
Hasegawa Yusuke
Azure Stack Hybrid DevOpsデモンストレーション
Azure Stack Hybrid DevOpsデモンストレーション
Masahiko Ebisuda
開発環境を全部カソウ化!!
開発環境を全部カソウ化!!
__Black
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
Kuniteru Asami
Infrastructure as Codeの取り組みと改善
Infrastructure as Codeの取り組みと改善
Takashi Honda
大規模ライブ配信の苦労ポイント
大規模ライブ配信の苦労ポイント
gree_tech
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Yahoo!デベロッパーネットワーク
Aiming のクラウド採用基準
Aiming のクラウド採用基準
Takahiro Hozumi
Azureで始めるDevOps
Azureで始めるDevOps
Atsushi Kojima
堅牢性を高めるためのInfrastructure as Code
堅牢性を高めるためのInfrastructure as Code
Toru Makabe
What's hot
(20)
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
Elasticsearch 5.2とJava Clientで戯れる #elasticsearchjp
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
TB / Day規模のゲーム向けデータパイプラインを開発運用する日々
OSS/linux on Azureの活用方法と勘所
OSS/linux on Azureの活用方法と勘所
Introduction of Azure Docker Integration
Introduction of Azure Docker Integration
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
グリー株式会社『私たちが GCP を使い始めた本当の理由』第 9 回 Google Cloud INSIDE Game & Apps
このService Fabric野郎!!
このService Fabric野郎!!
Bicep 入門 MySQL編
Bicep 入門 MySQL編
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
KubernetesでPHPを動かした話
KubernetesでPHPを動かした話
比較サイトの検索改善(SPA から SSR に変換)
比較サイトの検索改善(SPA から SSR に変換)
HugCome and grasys
HugCome and grasys
Azure Stack Hybrid DevOpsデモンストレーション
Azure Stack Hybrid DevOpsデモンストレーション
開発環境を全部カソウ化!!
開発環境を全部カソウ化!!
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
CDP 勉強会 - Multiple Datacenter Deployment ガイダンス
Infrastructure as Codeの取り組みと改善
Infrastructure as Codeの取り組みと改善
大規模ライブ配信の苦労ポイント
大規模ライブ配信の苦労ポイント
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Yahoo! JAPAN MeetUp #8 (インフラ技術カンファレンス)LT⑦
Aiming のクラウド採用基準
Aiming のクラウド採用基準
Azureで始めるDevOps
Azureで始めるDevOps
堅牢性を高めるためのInfrastructure as Code
堅牢性を高めるためのInfrastructure as Code
Similar to gcpug_okinawa_#2_hiroshi_kawakami
GoでEPC作って本番運用している話
GoでEPC作って本番運用している話
雄也 日下部
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
Shoei Takamaru
【とらのあなラボ Tech Day #3】新規システムにおける技術選定〜GoとgRPCを採用した話〜
【とらのあなラボ Tech Day #3】新規システムにおける技術選定〜GoとgRPCを採用した話〜
虎の穴 開発室
What i feel when began use AWS CodePipeline as GitLab Ci user
What i feel when began use AWS CodePipeline as GitLab Ci user
Yukiya Hayashi
Datalab and colaboratory
Datalab and colaboratory
Hayato Yoshikawa
Raspberry Pi + Go で IoT した話
Raspberry Pi + Go で IoT した話
yaegashi
Tech lounge gcp_20190313
Tech lounge gcp_20190313
yutaka_baba
俺とGitHubとcodeシリーズ
俺とGitHubとcodeシリーズ
Masayuki KaToH
AWSとGPUインスタンスのご紹介
AWSとGPUインスタンスのご紹介
Yasuhiro Matsuo
Gitlab ci & ecsへのデプロイ
Gitlab ci & ecsへのデプロイ
iwata jaws-ug
Cloud Identity-Aware Proxy
Cloud Identity-Aware Proxy
Kumano Ryo
Fpgax20170924
Fpgax20170924
Natsutani Minoru
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
MicroAd, Inc.(Engineer)
FPGA, AI, エッジコンピューティング
FPGA, AI, エッジコンピューティング
Hideo Terada
吾輩はコンテンツ事業者である 楽天編
吾輩はコンテンツ事業者である 楽天編
Rakuten Group, Inc.
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
Katsunori Kanda
Django で始める PyCharm 入門
Django で始める PyCharm 入門
kashew_nuts
Raspberrypitraining20171027
Raspberrypitraining20171027
Kiyoshi Ogawa
Boost.勉強会 #13 @仙台 鳥小屋
Boost.勉強会 #13 @仙台 鳥小屋
Yuto M
sukiyaki project 〜高可用な自宅サーバを目指して〜
sukiyaki project 〜高可用な自宅サーバを目指して〜
sukiyaki project
Similar to gcpug_okinawa_#2_hiroshi_kawakami
(20)
GoでEPC作って本番運用している話
GoでEPC作って本番運用している話
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
20170622 Heroku Meetup #17 スタートアップのインフラ選び 高丸翔英 How to choose infrastracture...
【とらのあなラボ Tech Day #3】新規システムにおける技術選定〜GoとgRPCを採用した話〜
【とらのあなラボ Tech Day #3】新規システムにおける技術選定〜GoとgRPCを採用した話〜
What i feel when began use AWS CodePipeline as GitLab Ci user
What i feel when began use AWS CodePipeline as GitLab Ci user
Datalab and colaboratory
Datalab and colaboratory
Raspberry Pi + Go で IoT した話
Raspberry Pi + Go で IoT した話
Tech lounge gcp_20190313
Tech lounge gcp_20190313
俺とGitHubとcodeシリーズ
俺とGitHubとcodeシリーズ
AWSとGPUインスタンスのご紹介
AWSとGPUインスタンスのご紹介
Gitlab ci & ecsへのデプロイ
Gitlab ci & ecsへのデプロイ
Cloud Identity-Aware Proxy
Cloud Identity-Aware Proxy
Fpgax20170924
Fpgax20170924
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
FPGA, AI, エッジコンピューティング
FPGA, AI, エッジコンピューティング
吾輩はコンテンツ事業者である 楽天編
吾輩はコンテンツ事業者である 楽天編
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
Django で始める PyCharm 入門
Django で始める PyCharm 入門
Raspberrypitraining20171027
Raspberrypitraining20171027
Boost.勉強会 #13 @仙台 鳥小屋
Boost.勉強会 #13 @仙台 鳥小屋
sukiyaki project 〜高可用な自宅サーバを目指して〜
sukiyaki project 〜高可用な自宅サーバを目指して〜
Recently uploaded
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
Toru Tamaki
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NTT DATA Technology & Innovation
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
sn679259
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
atsushi061452
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
CRI Japan, Inc.
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Hiroshi Tomioka
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
WSO2
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
CRI Japan, Inc.
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
Toru Tamaki
Recently uploaded
(12)
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
gcpug_okinawa_#2_hiroshi_kawakami
1.
沖縄と私とGCP GCPを業務で使用して 得られた失敗と知見 By 川上博@pialab
2.
自己紹介 川上 博(33)♂ ・元はSIerで客先常駐 ・ほぼJava言語ばかり、Python・Go少々 ・サーバサイドのコードだけ書いていた ・客先でクラウド基盤ツールの案件に放り込まれる ・クラウドへの熱を抱えたまま数年・・・ ・縁あって現在の会社「PIALab.」(ピアラボ)へ 個人:Facebookで「hiroshi kawkami」と検索 会社:「PIALab」と検索
3.
弊社システム ユースケース
4.
・他社様データを日時でアップロード ・アップロード先はCloud Storage(gsutil) ・格納先はBIGQuery ・お客さん毎にBucket、Datasetを分ける ・他社様システムには手を加えることは不可 ・S-JISでアップロードするお客様がいる ・現在はお客様毎にETLしているが、将来的に汎用 的なものを作成し、どんなデータが来てもBQに格 納したい
5.
ファイルアップロード Cloud Storage BIG Query ファイルアップロード Cloud Storage これを ETL処理
BIG Query こうしたい
6.
そうだCloudDataflow があるじゃない
7.
CloudDataflow を使ってみた
8.
・バッチ・ストリーム処理を並列で処理 ・各GCPサービスをシームレスにコール ・今の所Javaのみ(今後対応予定) ・ETL(Extract/Transform/Load)にも使える どんなサービスか
9.
バッチ・ストリームを並列で処理 ・ソースコードがデプロイされるとInstanceが自動で起動 ・処理内容を判断して必要なリソース分Instanceをスケール ・データをRecord単位でInstance上に分散、並列処理する ・処理が終了すると自動でサーバを停止、削除(※バッチモードのみ)
10.
各GCPサービスをシームレスにコール 対象サービス ・Cloud Datastore ・Cloud Pub/Sub ・Cloud
Storage ・Cloud BIGTable ・BIGQuery ※小難しい認証処理はSDKが肩代わりしてくれるよ
11.
実装イメージ
12.
public static void
main(String[] args) { Pipeline p = Pipeline.create(new PipelineOptions()); p.begin() .apply(PubSubIO.Read.topic("input_topic") .apply(ParDo.Of(new ExtractTags()) .apply(Count.perElement()) .apply(ParDo.Of(new ExPandPrefixes()) .apply(Top.largestPerKey(3)) .apply(PubSubIO.Write.topic("output_topic") p.run(); } インプット アウトプット
13.
public static void
main(String[] args) { Pipeline p = Pipeline.create(new PipelineOptions()); p.begin() .apply(Create.of("Hello", "World")) .apply(ParDo.of(new DoFn<String, String>() { @Override public void processElement(ProcessContext c) { c.output(c.element().toUpperCase()); } })); p.run(); } #processElement() 部分が分散並列処理されます 他の箇所に変数宣言しても参照 できません
14.
指定可能なinput/output - Cloud Datastore -
Cloud Storage - Cloud BIGTable - Cloud PubSub - BIGQuery ・Input 基本 「xxxxIO.Read」のように記述 例:DatastoreIO.Read()、PubSubIO.Read() ・OutPut 基本 「xxxxIO.Write」のように記述 例:TextIO.Write()、BIGQueryIO.Write() ※Cloud StorageはTextIOなので注意!!!
15.
処理イメージ
16.
デプロイ・起動までの流れ ・コマンドラインまたはEclipseからデプロイ ・デプロイするとライブラリ(jar)とJavaソースがCloud Storageに格納 ・Compute Engine
でインスタンス起動 ・処理開始
17.
デプロイ・起動の方法 ・コマンドラインから - Mavenコマンドで実行(mvn compile
exec:java・・・) - 各種起動オプションを指定(--project=sample-project) ・Eclipseから - Eclipse Pluginが用意されている(Eclipse 4.4 以降) - 新規Cloud Dataflowプロジェクト作成も簡単に - CloudDataflow用の実行設定メニューで起動オプション指定可 =>ぜひEclipse Plugin使いましょう
18.
処理モードについて ・BatchMode - 一括処理 - 処理終了後、Jobは待機しない -
処理が終了するとInstance数が0に(Instanceをたたむ) ・StreamMode - リアルタイム処理 - 処理終了後もジョブは待機状態 - 待機状態でInputがあれば処理実行されます - 基本Instance数は0にならない - Inputは原則PubSubのみ(PubsubIO.Read) - ジョブの終了はブラウザもしくはコマンドラインから ※起動オプションで切り替え。処理中に変更は出来ない
19.
実際やってみます
20.
21.
困ったこと ・Input(Cloud Storage)/Output(BIGQuery)を動的 に変更したい ・だがxxxxIO.Read、xxxxIO.Writeが基本固定 ・「ComputeEngine経由でCommand Lineから実行 しろ」と公式は言ってる・・・ ・AppEngine野郎としてはComputeEngine使ったら 負けかなと思っている
22.
助けて〜Goolgleえも〜ん・・・
23.
Googleサポートチームにメールしました やっててよかったゴールドサポート…
24.
※実際には英語でやりとりしています 公式には書いていないけどAppEngineからコール出来るよ♪ ままま、まじですか?やってみます・・・。 出来ないよー。問題のソースを送るので原因教えて下さい 起動オプションが違うよー。 workerMachineTypeはn1-standard-1以上を設定しなきゃダメだよ あざーーっす、やってみまーす うわーん出来ないよー。問題のソース(ry オプションが(ry
25.
うーん、このままだとエンドレスなので サンプルコードをGitHubの公開リポジトリに作成するから参考にしてよ あああ、ありがとうございます。助かります。。。 1ヶ月ぐらいかかるよ。ごめんねー。 ※実際には英語でやりとりしています 1ヶ月たったよ。。。 ごめんごめん、もうちょっとかかるかな。てへぺろ
26.
というわけで 実際やってみます の予定でしたが・・・
27.
すみません、間に合いませんでした
28.
実際動かせたら公開します PIALabブログ https://pialab.co.jp Facebook GCPUG https://www.facebook.com/groups/1531859033770693/?fref=ts とりあえず目のつく所に共有しますのでしばしお待ち下さい
29.
CloudDataflow まとめ
30.
・重たい処理をサービス跨いで実行したい人はぜひ ・リアルタイム処理を〃 ・バッチモードだと終了後インスタンス0に ・ストリームモードだと課金怖い ・Eclipse Pluginはぜひ使っていこう ・AppEngineから起動できるかも(未確認)
31.
最後に 野望というかお願いです
32.
GCPUG沖縄のFacebookグループ作成しまし た!!!Facebookで「GCPUG OKINAWA」と検索 ぜひ参加してください GCPの知見を共有していきましょう!!!
33.
さらに・・・ ■bq_sushi BIGQueryを肴に酒を飲むというマニアックな会 とそのFacebookグループ Facebookで「#bq_sushi」と検索 ■GCPUG全体のグループ Googleで「GCPUG」と検索 URLが「gcpug.jp」のページです
34.
さらにさらに・・・ ・GCPUG Okinawa、もしくは別でGCPについてのハンズオ ンメインの勉強会を開催したい。できれば月1ぐらいで ・手を動かすのが苦じゃない方に参加いただきたい ・AppEngine、BIGQuery、ContainerEngine等の各種サー ビスについて興味がある方 ・何回か1回ゲストに来てもらう or
リモートで ハンズオンしてもらいたいなー ※沖縄行きたいのでゲストで来ますも全然OKです!!! ・Googleさん、今日の登壇者の皆様どうですか? ・#bq_sushiとリモート中継とかおもしろそう
Download now