Enviar pesquisa
Carregar
RUTILEA社内勉強会第6回 「超解像」
•
Transferir como PPTX, PDF
•
2 gostaram
•
249 visualizações
T
TRUE_RUTILEA
Seguir
RUTILEA社内で定期的に行っている勉強会の第6回です. 第6回のテーマは”超解像”です.
Leia menos
Leia mais
Engenharia
Denunciar
Compartilhar
Denunciar
Compartilhar
1 de 22
Baixar agora
Recomendados
兼本研究室プログラム講義4回目
兼本研究室プログラム講義4回目
ytanno
RUTILEA社内勉強会第8回 「シリアル通信」
RUTILEA社内勉強会第8回 「シリアル通信」
TRUE_RUTILEA
RUTILEA社内勉強会第7回 「LSTMを用いた異常検知」
RUTILEA社内勉強会第7回 「LSTMを用いた異常検知」
TRUE_RUTILEA
RUTILEA社内勉強会第5回 「強化学習」
RUTILEA社内勉強会第5回 「強化学習」
TRUE_RUTILEA
RUTILEA社内勉強会第4回 「敵対的生成ネットワーク(GAN)」
RUTILEA社内勉強会第4回 「敵対的生成ネットワーク(GAN)」
TRUE_RUTILEA
RUTILEA社内勉強会第2回 「多重検定」
RUTILEA社内勉強会第2回 「多重検定」
TRUE_RUTILEA
RUTILEA社内勉強会第1回 「転移学習」
RUTILEA社内勉強会第1回 「転移学習」
TRUE_RUTILEA
RUTILEA社内勉強会第3回 「意外な統計」
RUTILEA社内勉強会第3回 「意外な統計」
TRUE_RUTILEA
Recomendados
兼本研究室プログラム講義4回目
兼本研究室プログラム講義4回目
ytanno
RUTILEA社内勉強会第8回 「シリアル通信」
RUTILEA社内勉強会第8回 「シリアル通信」
TRUE_RUTILEA
RUTILEA社内勉強会第7回 「LSTMを用いた異常検知」
RUTILEA社内勉強会第7回 「LSTMを用いた異常検知」
TRUE_RUTILEA
RUTILEA社内勉強会第5回 「強化学習」
RUTILEA社内勉強会第5回 「強化学習」
TRUE_RUTILEA
RUTILEA社内勉強会第4回 「敵対的生成ネットワーク(GAN)」
RUTILEA社内勉強会第4回 「敵対的生成ネットワーク(GAN)」
TRUE_RUTILEA
RUTILEA社内勉強会第2回 「多重検定」
RUTILEA社内勉強会第2回 「多重検定」
TRUE_RUTILEA
RUTILEA社内勉強会第1回 「転移学習」
RUTILEA社内勉強会第1回 「転移学習」
TRUE_RUTILEA
RUTILEA社内勉強会第3回 「意外な統計」
RUTILEA社内勉強会第3回 「意外な統計」
TRUE_RUTILEA
2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Marius Sescu
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Expeed Software
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
Pixeldarts
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
ThinkNow
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
marketingartwork
Skeleton Culture Code
Skeleton Culture Code
Skeleton Technologies
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Neil Kimberley
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
contently
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Albert Qian
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
Kurio // The Social Media Age(ncy)
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
Search Engine Journal
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
SpeakerHub
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Clark Boyd
Getting into the tech field. what next
Getting into the tech field. what next
Tessa Mero
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Lily Ray
How to have difficult conversations
How to have difficult conversations
Rajiv Jayarajah, MAppComm, ACC
Introduction to Data Science
Introduction to Data Science
Christy Abraham Joy
Time Management & Productivity - Best Practices
Time Management & Productivity - Best Practices
Vit Horky
The six step guide to practical project management
The six step guide to practical project management
MindGenius
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
RachelPearson36
Mais conteúdo relacionado
Destaque
2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Marius Sescu
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Expeed Software
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
Pixeldarts
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
ThinkNow
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
marketingartwork
Skeleton Culture Code
Skeleton Culture Code
Skeleton Technologies
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Neil Kimberley
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
contently
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Albert Qian
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
Kurio // The Social Media Age(ncy)
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
Search Engine Journal
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
SpeakerHub
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Clark Boyd
Getting into the tech field. what next
Getting into the tech field. what next
Tessa Mero
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Lily Ray
How to have difficult conversations
How to have difficult conversations
Rajiv Jayarajah, MAppComm, ACC
Introduction to Data Science
Introduction to Data Science
Christy Abraham Joy
Time Management & Productivity - Best Practices
Time Management & Productivity - Best Practices
Vit Horky
The six step guide to practical project management
The six step guide to practical project management
MindGenius
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
RachelPearson36
Destaque
(20)
2024 State of Marketing Report – by Hubspot
2024 State of Marketing Report – by Hubspot
Everything You Need To Know About ChatGPT
Everything You Need To Know About ChatGPT
Product Design Trends in 2024 | Teenage Engineerings
Product Design Trends in 2024 | Teenage Engineerings
How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
Skeleton Culture Code
Skeleton Culture Code
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
Getting into the tech field. what next
Getting into the tech field. what next
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
How to have difficult conversations
How to have difficult conversations
Introduction to Data Science
Introduction to Data Science
Time Management & Productivity - Best Practices
Time Management & Productivity - Best Practices
The six step guide to practical project management
The six step guide to practical project management
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
RUTILEA社内勉強会第6回 「超解像」
1.
超解像 2020/02/06 田中 達也
2.
超解像とは 画像の解像度を上げる画像処理技術 参照 http://www.togawa.cs.waseda.ac.jp/research/system/system.html
3.
超解像 画像を拡大させた時、間のデータを既知のデータから補間する https://qiita.com/jiny2001/items/e2175b52013bf655d617
4.
学習を用いない超解像技術 Nearest neighbor 最も近くの点を用いる Linear 近傍2点から線形に補間 する Cubic 近傍4点から、三次式で 補間する Bicubic interpolation
- Wikipedia
5.
試した手法 • Bilinear • FCBI •
RAISR • SRCNN 学習を用いない
6.
線形補間(Bilinear) 横方向に2画素の平均値で埋める 縦方向に2画素の平均値で埋める 1 3 5 3 1
2 3 5 4 3 1 2 3 3 3 3 5 4 3
7.
線形補間 5回繰り返し行った 画像がボケてしまう
8.
FCBI エッジをなるべく残すように4つのうち2つを選択して、平均をとる。 手順 ① ピクセルを拡げる ② 斜め方向からピクセルを埋める ③
縦横方向からピクセルを埋める 𝒍 𝟏 ③ 𝒍 𝟐 ③ ② ③ 𝒍 𝟑 ③ 𝒍 𝟒
9.
FCBI 平均をとる2つ画素の選び方 エッジ判定を行う |𝒍 𝟏-𝒍 𝟒|<TM
かつ|𝒍 𝟐-𝒍 𝟑|<TM かつ | (𝒍 𝟏+𝒍 𝟒)/2 - (𝒍 𝟐+𝒍 𝟑)/2 | < TM ならば 非エッジと判定 i) エッジの場合 その差の少ない2ピクセルを線形補間 ii) 非エッジの場合 補間したいピクセルの周辺の画素をh1とh2の重み付けで 計算を行い、h1 と h2 の大小で勾配の変化の小さい向き を判定. h1 h2 https://blog.awm.jp/2017/03/08/fcbi/ 𝒍 𝟏 ③ 𝒍 𝟐 ③ ② ③ 𝒍 𝟑 ③ 𝒍 𝟒
10.
FCBI
11.
機械学習を用いた超解像 • RAISR Googleが出した論文 処理速度が速い ディープラーニングの手法を使っていない
12.
RAISR 学習時 RAISR: Rapid and
Accurate Image Super Resolution
13.
RAISR: Rapid and
Accurate Image Super Resolution 実行時 RAISR
14.
元画像 RAISR RAISR
15.
比較画像
16.
RAISR 補正前 補正後
17.
SRCNN ディープラーニングを超解像に応用した最初の例 𝑓1 = 5 𝑓2
= 1 𝑓3 = 9 𝑛1 = 64 𝑛2 = 32
18.
• データセット Google Drive
からダウンロード train : 90枚 val : 10枚 test : 10枚 入力画像Y(低解像度)・・・元画像を縮小し、Bicubic補間で戻す 教師画像X(高解像度)・・・元画像
19.
パッチを抽出し、各バッチを高次元ベクトル(64次元)として表す。 各高次元ベクトル(64次元)を別の高次元ベクトル(32次元)にマッピング パッチごとの表現を集約し、高解像度画像を生成 1層目 2層目 3層目 𝑊1: 𝑐 ×
𝑓1 × 𝑓1 × 𝑛1 𝑊2: 𝑐 × 𝑓2 × 𝑓2 × 𝑛2 𝐵1: 𝑛1 𝐵2: 𝑛2 SRCNNの各層の役割 𝑓1 = 5 𝑓2 = 1 𝑓3 = 9 𝑛1 = 64 𝑛2 = 32
20.
損失関数 最小二乗誤差(MSE) X : 高解像度画像 Y
: 低解像度画像
21.
補正前 補正後 SRCNN
22.
まとめ • RAISRは高速だが、ダイカストの画像に適応するには 性能が不十分かもしれない • CNNによる超解像が一番うまくいきそう •
今後、SRCNNの派生形(層を増やす、GANの適応)を試 していきたい
Baixar agora