【7/4線上】PyTorch深度學習CNN與Transformer影像辨識與生成模型 – 工研院產業學院(台北)

訓練日期:2026-07-04
上課地點:線上課程
上課費用:線上洽詢

課程介紹:

1.熟悉Python此程式語言以及PyTorch此深度學習框架
2.協助具影像處理專長之學員切入電腦視覺/深度學習領域
3.學會在應用各種CNN與Transformer模型解決各種電腦視覺的工業應用
4.未來可銜接各類進階深度學習課程

課程內容:

 

PyTorch深度學習CNN與Transformer影像辨識與生成模型實作

■ 課程介紹

深度學習在過去十年徹底革新了電腦視覺領域。這一切的起點可以追溯到卷積神經網絡 (CNN) 的崛起,透過獨特的卷積核設計,層層堆疊,從邊緣、紋理到複雜的物件結構,構建出強大的視覺表示能力。從開創性的 AlexNet 誕生標誌著 CNN 時代的開啟,隨後 ResNet 等架構的提出更解決了深層網絡訓練的難題,將CNN 推向頂峰。

然而,隨著 Transformer 架構挾其強大的全局關聯捕捉能力 (Attention Mechanism) 開始引起視覺研究者的關注。Vision Transformer (ViT) 的誕生,證明了 Transformer 能直接處理圖像序列,並在多項任務中超越傳統 CNN,正式開啟了視覺領域從 CNN 到 Transformer 的典範轉移新篇章。

本課程將深入探索剖析為何在圖片分類、語意分割、物件偵測、生成模型乃至自動駕駛等關鍵視覺任務中,模型架構正經歷著從 CNN 到 Transformer 的深刻變革。在圖片分類任務中,Transformer 透過捕捉全局上下文信息,進一步提升了分類的準確性;在語意分割和物件偵測等需要精細定位的任務中,Transformer 的注意力機制能更有效地建模物件間的長距離依賴關係,從而實現更精確的分割與偵測結果。生成模型領域,從早期的 GANs 到如今爆紅的 Stable Diffusion 等 Diffusion Models,Transformer 的引入使得生成高品質、高解析度的圖像成為可能,並帶來了強大的可控性。

應用案例將分享將針對自動駕駛這個高度整合多種感測技術的應用場景中,Transformer 更展現出處理多模態數據(如相機、雷達)和時序信息的巨大潛力,為更安全、更智慧的自動駕駛系統奠定了基礎。本課程將帶領您深入理解這些技術背後的原理,掌握如何應用這些先進模型解決實際問題,為進入高階 AI 應用領域奠定堅實基礎。

 

■ 課程大綱

課程大綱

內容

CNN與Transformer於圖片分類人臉辨識/瑕疵檢測之原理與實作

  1. Alexnet
  2. VGG
  3. Googlenet
  4. ResNet
  5. Vision Transformer(ViT)

語義分割模型簡介

  1. 從FCN到DeepLabv3+,基於Transformer更為強大的SETR
  2. 可透過文字/UI介面實現的語義分割模型Segment Anything Model (SAM)

物件偵測模型簡介

  1. 基於CNN的2D物件偵測模型YOLOv1-v13, 3D物件偵測模型FCOS-3d
  2. Transformer-based的2D物件偵測模型DETR, Anchor DTR, RT-DETR以及3D物件偵測模型DETR-3D

GAN生成模型簡介

  1. 影像生成GAN,DCGAN, StyleGAN, BigGAN, VQ-GAN
  2. 影像轉換GAN,Pix2pix與CycleGAN; 超解析度模型:SRGAN
  3. 去模糊模型: DeblurGAN; 結合Transformer的GAN模型:VQ-GAN
  4. 基於Transformer與GAN的人臉模糊影像還原模型:CodeFormer。

Diffusion生成模型

  1. 影像生成DDPM, DDIM 與 Classifier-free guidance
  2. 影像轉換:Palette, Latent Diffusion Model
  3. 影像編輯:InstructPix2Pix; Stable Diffusion
  4. 及其微調:Controlnet, Dreambooth, LORA, Textual Inversion

自駕車的影像辨識模型

  1. 多攝影機之鳥瞰物件語意分割模型:SimpleBEV
  2. 多攝影機之3D物件偵測模型:DETR3D 基於Transformer,更為先進的3D物件偵測模型
  3. PETR 多攝影機之車道線偵測模型:Lift, Splat, Shoot
  4. 骨幹網路共享之多任務模型:物件偵測+語意分割

師資介紹:

 

備註:
詳細內容及報名需知,請點選報名後見協會網站內容

發佈留言

Back to top button