intTypePromotion=1
zunia.vn Tuyển sinh 2024 dành cho Gen-Z zunia.vn zunia.vn
ADSENSE
 » 
 » 

Bài giảng Học sâu và ứng dụng: Bài 3 - ĐH Bách khoa Hà Nội

Chia sẻ: Khánh Thành | Ngày: | Loại File: PDF | Số trang:48

Thêm vào BST
Báo xấu
30
lượt xem 5
download
 
  Download Vui lòng tải xuống để xem tài liệu đầy đủ

Bài giảng Học sâu và ứng dụng: Bài 3 Giới thiệu về mạng tích chập Conv Neural Networks, cung cấp cho người học những kiến thức như: Lớp gộp max pooling; Một số mạng CNNs cơ bản; Lớp tích chập; ImageNet Large Scale Visual Recognition Challenge (ILSVRC) winners;...Mời các bạn cùng tham khảo!

Chủ đề:

Bình luận(0) Đăng nhập để gửi bình luận!

Lưu

Nội dung Text: Bài giảng Học sâu và ứng dụng: Bài 3 - ĐH Bách khoa Hà Nội

  1. Chương 3 Giới thiệu về mạng tích chập Conv Neural Networks 2
  2. Lịch sử CNNs • Ý tưởng CNNs xuất phát đầu tiên từ công trình của Fukushima năm 1980 3
  3. Lịch sử CNNs • Năm 1998, LeCun áp dụng BackProp huấn luyện mạng CNNs cho bài toán nhận dạng văn bản 4
  4. Lịch sử CNNs • Năm 2012, CNNs gây tiếng vang lớn khi vô địch cuộc thi ILSRC 2012, vượt xa phương pháp đứng thứ 2 theo cách tiếp cận thị giác máy tính truyền thống. 5
  5. Lịch sử CNNs • Hiện nay CNNs ứng dụng khắp nơi, ví dụ trong bài toán phân loại ảnh, truy vấn ảnh 6
  6. Lịch sử CNNs • Ứng dụng CNNs trong bài toán phát hiện đối tượng, phân đoạn ảnh 7
  7. Lịch sử CNNs • Ứng dụng CNNs trong nhận dạng dáng người (human pose), trong trò chơi… 8
  8. Lớp tích chập • Khác với nơ-ron kết nối đầy đủ, mỗi nơ-ron tích chập (filter) chỉ kết nối cục bộ với dữ liệu đầu vào • Nơ-ron tích chập trượt từ trái sang phải và từ trên xuống dưới khối dữ liệu đầu vào và tính toán để sinh ra một bản đồ kích hoạt (activation map) • Chiều sâu của nơ-ron tích chập bằng chiều sâu của khối dữ liệu đầu vào 9
  9. Lớp tích chập … • Bước nhảy stride = 1 • Đầu vào kích thước 7x7, nơ-ron kích thước 3x3 • Đầu ra kích thước 5x5 10
  10. Lớp tích chập • Bước nhảy stride = 2 • Đầu vào kích thước 7x7, nơ-ron kích thước 3x3 • Đầu ra kích thước 3x3 11
  11. Lớp tích chập 12
  12. Lớp tích chập • Để bảo toàn kích thước thường thêm viền bởi các số 0 (zero padding). • Ví dụ: đầu vào kích thước 7x7, nơ-ron kích thước 3x3, bước nhảy stride 1, padding viền độ rộng 1. • Khi đó kích thước đầu ra là 7x7
  13. Lớp tích chập • Giả sử có thêm nơ-ron tích chập khác thì nó cũng hoạt động tương tự và sinh ra bản đồ kích hoạt thứ hai • Lưu ý trọng số của các nơ-ron tích chập là khác nhau 14
  14. Lớp tích chập • Giả sử có 6 nơ-ron tích chập sẽ sinh ra 6 bản đồ kích hoạt • Các bản đồ kích hoạt ghép với nhau thành một “ảnh mới” 15
  15. CNNs • Mạng nơ-ron tích chập là một dãy các lớp tích chập nối liên tiếp nhau xen kẽ bởi các hàm kích hoạt (ví dụ ReLU) 16
  16. Lớp gộp (pooling layer) • Giúp giảm độ phân giải của khối dữ liệu để giảm bộ nhớ và khối lượng tính toán • Hoạt động độc lập trên từng bản đồ kích hoạt • Lớp gộp max pooling giúp mạng biểu diễn bất biến đối với các thay đổi tịnh tiến (translation invariance) hoặc biến dạng (deformation invariance) của dữ liệu đầu vào 17
  17. Lớp gộp max pooling 18
  18. CNNs 19
  19. Một số mạng CNNs cơ bản • LeNet-5 • AlexNet • VGG • GoogleNet • ResNet 20
ADSENSE

CÓ THỂ BẠN MUỐN DOWNLOAD

THÔNG TIN
TRỢ GIÚP
HỖ TRỢ KHÁCH HÀNG
Theo dõi chúng tôi

Chịu trách nhiệm nội dung:

Nguyễn Công Hà - Giám đốc Công ty TNHH TÀI LIỆU TRỰC TUYẾN VI NA

LIÊN HỆ

Địa chỉ: P402, 54A Nơ Trang Long, Phường 14, Q.Bình Thạnh, TP.HCM

Hotline: 093 303 0098

Email: support@tailieu.vn

Giấy phép Mạng Xã Hội số: 670/GP-BTTTT cấp ngày 30/11/2015 Copyright © 2022-2032 TaiLieu.VN. All rights reserved.

 

Đồng bộ tài khoản
5=>2