Mais conteúdo relacionado Semelhante a Azure Purview Linage for Dataflow/Spark (20) Azure Purview Linage for Dataflow/Spark1. 【初級、中級者向け】
Azure Purview Linage
for Synapse Dataflow/Spark
Microsoft MVP for Data Platform 2021
永田 亮磨
Twitter:@ryomaru0825
Linkedin:ryoma-nagata-0825
Qiita:qiita.com/ryoma-nagata
5. • Copy Activity
• SQL DB->Data lake Storage Gen2 (n : n)
• Dataflow
• Data lake Storage Gen2->Synapse 専用 SQL Pool (n:1)
デモ
8. • Synapse Sparkによる簡単な変換
• 備考:
• Entityは完全名(Qualified Name)が完全一致することで系列がつながるため、つながらないと
きは検索して完全名を確認しましょう
• 補足:
• 01_Authenticate_to_Purview_AML・・・認証用ノートブック
• 02_Create_ML_Lineage_Types・・・ユーザー定義のPurviewのアセット(Entity)の種類
を登録
• 03_Create_ML_Lineage_Functions・・・Purview用の関数を定義
• 04_Create_CreditRisk_Experiment・・・ML処理~推論ノートブック
デモ
9. • [Part 1] Azure Purview と Microsoft Solution によるデータ活用&ガバ
ナンス | 日本マイクロソフト – YouTube
• [Part 2] Azure Purview と Microsoft Solution によるデータ活用&ガバ
ナンス | 日本マイクロソフト – YouTube
• [Part 3] Azure Purview と Microsoft Solution によるデータ活用&ガバ
ナンス | 日本マイクロソフト – YouTube
• [Part 4] Azure Purview と Microsoft Solution によるデータ活用&ガバ
ナンス | 日本マイクロソフト - YouTube
参考リンク