Bài giảng Cấu trúc dữ liệu và thuật toán: Chương 3 - Một số mô hình thuật toán
lượt xem 4
download
Bài giảng "Cấu trúc dữ liệu và thuật toán: Chương 3 - Một số mô hình thuật toán" trình bày các nội dung chính sau đây: Bài toán tối ưu hóa tổ hợp; Thuật toán vét cạn; Nhánh và cận; Thuật toán tham lam; Chia để trị; Quy hoạch động. Mời các bạn cùng tham khảo!
Bình luận(0) Đăng nhập để gửi bình luận!
Nội dung Text: Bài giảng Cấu trúc dữ liệu và thuật toán: Chương 3 - Một số mô hình thuật toán
- 10/18/2021 Một số mô hình thuật toán Brute force, greedy, branch and bound, divide and conquer, dynamic programming 10/15/2021 hiep.nguyenduy@hust.edu.vn 1 Nội dung • Bài toán tối ưu hóa tổ hợp • Thuật toán vét cạn • Nhánh và cận • Thuật toán tham lam • Chia để trị • Quy hoạch động 10/15/2021 hiep.nguyenduy@hust.edu.vn 2 1
- 10/18/2021 Bài toán tối ưu hóa • Bài toán tối ưu hóa • Tìm kiếm lời giải tốt nhất trong những lời giải khả thi • Nếu đầu vào là rời rạc Bài toán tối ưu tổ hợp • Bài toán tối ưu tổ hợp • Không gian tìm kiếm là hữu hạn hoặc vô hạn đếm được • Thỏa mãn tập ràng buộc C • Với mục đích tối ưu hàm mục tiêu, f(x) min (max) • Phương án giải • Có thể vét cạn hết không gian lời giải khả thi • Xây dựng từng bước lời giải • Giải gần đúng (xấp xỉ) 10/15/2021 hiep.nguyenduy@hust.edu.vn 3 Thuật toán vét cạn • Thuật toán vét cạn: brute-force search hoặc exhaustive search • Là một dạng của thuật toán dạng “sinh và test” – sinh ra phương án và kiểm tra lại xem có đáp ứng ràng buộc của bài toán • Đây là cách thiết kế thuật toán đơn giản nhất (chỉ cần nhìn vào phát biểu bài toán là tạo ra thuật toán được), dựa vào khả năng tính toán của máy tính • Hiệu quả của thuật toán không cao, nhất là khi kích thước đầu vào lớn • Một số bài toán phức tạp không thể giải bằng phương pháp vét cạn được (không gian tìm kiếm phương án có thể quá lớn, vượt khả năng tính toán của máy tính) • Có thể kết hợp thêm với một số kỹ thuật khác (heuristics methods) để giảm bớt không gian cần tìm kiếm lời giải • Dùng để giải các bài toán khi mà yêu cầu về thời gian chạy không phải là yếu tố đáng quan tâm (VD. chỉ cần tìm ra lời giải là được) 10/15/2021 hiep.nguyenduy@hust.edu.vn 4 2
- 10/18/2021 Thuật toán vét cạn • Thuật toán vét cạn • Trong thuật toán luôn có 2 pha là sinh lựa chọn và kiểm tra • Có thể sinh lựa chọn là 1 phương án đầy đủ, hoặc từng bước sinh 1 phần của phương án (VD. thuật toán back tracking) • Pha kiểm tra: • xem phương án sinh ra có thỏa mãn là một lời giải của bài toán hay không, • thường dựa ngay chính vào mô tả ban đầu • Hoặc dùng chính hàm đích cần đạt được của bài toán làm hàm kiểm tra • Bước kiểm tra đôi khi có thể gộp luôn vào quá trình sinh 10/15/2021 hiep.nguyenduy@hust.edu.vn 5 Thuật toán vét cạn • Bài toán 1. Dò mật khẩu ******* • Mật khẩu • là chuỗi các ký tự (thường bao gồm ký tự đặc biệt và số) • Độ dài tối thiểu 6-8 ký tự • Mật khẩu càng dài, càng khó đoán nhưng cũng khó nhớ • Thông thường là dò bằng cách thử hết các khả năng, tuy nhiên có thể kết hợp với các từ điển các password hay dùng để cải thiện thời gian • Thường kết hợp song song chạy trên nhiều CPU 10/15/2021 hiep.nguyenduy@hust.edu.vn https://www.grc.com/haystack.htm 6 3
- 10/18/2021 selectionSort(A[0..n-1]) Thuật toán vét cạn { for i=n to 2 do min = 0 • Bài toán 2. Thuật toán sắp xếp lựa chọn for j=0 to i-1 do • Lần lượt chọn phần tử lớn nhất trong dãy hiện tại, đổi if (A[j]>A[min]) min = j chỗ với phần tử ở cuối dãy SWAP(A[min], A[i-1]) • Lặp lại bước trên nhưng chỉ xét dãy mới là n-1 phần } tử đầu • Nhận xét 𝑇(𝑛) = 𝑂(𝑛2) • Thuật toán xây dựng lời giải từng bước từ lời giải bộ phận • Bước kiểm tra đã nằm sẵn trong bước xây dựng phương án lựa chọn VD. 1, 5, 12, 3, 2, 4 1, 5, 4, 3, 2,12 1, 2, 4, 3, 5, 12 1, 2, 3, 4, 5, 12 1, 2, 3, 4, 5, 12 1, 2, 3, 4, 5, 12 10/15/2021 hiep.nguyenduy@hust.edu.vn 7 Thuật toán vét cạn • Bài toán 3. Tính giá trị đa thức bậc n: 𝑃 𝑥 = 𝑎 𝑥 + 𝑎 𝑥 +. . +𝑎 𝑥 + 𝑎 Algorithm1(A[0..n], x) Algorithm2(A[0..n], x) P=0 P = a[0] For i=n to 0 do For i=n to 1 do power = 1; power = a[n]; for j=1 to i do P = (P+a[i])*x power = power * x Return P P = P+a[i]*power 𝑇2(𝑛) = 𝑂(𝑛) Return P 𝑇1(𝑛) = 𝑂(𝑛2) 10/15/2021 hiep.nguyenduy@hust.edu.vn 8 4
- 10/18/2021 Thuật toán vét cạn • Bài toán 3. cặp điểm gần nhau nhất trong không gian • Cho danh sách n điểm trong không gian 2 chiều (tọa độ x,y) • Hãy đưa ra cặp điểm gần nhau nhất trong danh sách Thử tất cả các cặp điểm có thể 𝑇 𝑛 = 𝑂(𝑛 ) ClosestPair(double P[0..n-1]) { dmin = ∞ for i=0 to n-2 do Giải pháp tốt hơn? for j = i to n-1 do dis = Distance(P[i],P[j]) if(dis
- 10/18/2021 Thuật toán vét cạn • Bài toán 5: người bán hàng – Traveling Salesperson Problem • Cho danh sách n thành phố với chi phí (khoảng cách) để đi lại giữa các cặp thành phố đó • Hãy xây dựng hành trình di chuyển giữa các thành phố sao cho mỗi thành phố chỉ được đến 1 lần trước khi trở lại thành phố xuất phát Vét cạn: thử tất cả các phương án đi có thể 𝑇 𝑛 = 𝑂(𝑛!) 10/15/2021 hiep.nguyenduy@hust.edu.vn 11 Thuật toán vét cạn • Bài toán 6. Bài toán cái túi • Đầu vào n đồ vật với trọng lượng 𝑤 và giá trị 𝑐 , cái túi với tải trọng tối đa 𝑊 • Tìm cách chất đồ vật vào túi sao cho không vượt quá tải trọng và tổng giá trị là lớn nhất • Vét cạn: Duyệt hết các tập con của n đồ vật 𝑇 𝑛 = 2 𝑛 • Thuật toán sinh các hoán vị của tập hợp • Thuật toán hiệu quả hơn? 10/15/2021 hiep.nguyenduy@hust.edu.vn 12 6
- 10/18/2021 Thuật toán vét cạn • Bài toán 7. Bài toán phân công công việc • Đầu vào là danh sách n công nhân, và n công việc cần được phân công • Mỗi công nhân lại có kỹ năng khác nhau nên thời gian hoàn thành mỗi công việc sẽ khác nhau, được cho bởi ma trận nxn • Hãy xây dựng phương án phân công sao cho tổng thời gian hoàn thành n việc là nhỏ nhất Thuật toán vét cạn • Sinh ra các phương án phân công có thể • Tính tổng chi phí 𝑇 𝑛 = 𝑂(𝑛!) 10/15/2021 hiep.nguyenduy@hust.edu.vn 13 Thuật toán nhánh cận - branch and bound • Thuật toán nhánh cận • Là một cải tiến của thuật toán quay lui – back tracking • Áp dụng để giải các bài toán tối ưu tổ hợp • Thuật toán đi xây dựng lời giải từng bước, thường biểu diễn dưới dạng cây trạng thái, mỗi nút là 1 bộ phận của lời giải cuối cùng • Tại mỗi nút (lời giải bộ phận) sẽ tính toán 1 giá trị giới hạn dựa trên hàm mục tiêu cho các nút con, cháu (phần tiếp theo của lời giải) của nó. • Giá trị giới hạn – bound đó dùng để • Cắt tỉa các nhánh mà không tiềm năng (cắt bỏ các nhánh mà giá trị giới hạn này tồi hơn giá trị tốt nhất hiện có) tránh phải duyệt hết các nhánh không tiềm năng • Dùng để định hướng quá trình duyệt qua cây trạng thái (VD. ưu tiên các nhanh tiềm năng –có giá trị bound tốt nhất trước) 10/15/2021 hiep.nguyenduy@hust.edu.vn 14 7
- 10/18/2021 Thuật toán nhánh cận - branch and bound • Không gian trạng thái của bài toán • Chứa tất cả các trạng thái có thể • Thường được biểu diễn dưới dạng đồ thị hoặc cây • Trạng thái khởi đầu: là lời giải ban đầu của bài toán (chưa tối ưu) • Trạng thái đích: là lời giải cuối cùng cần đạt được • Có các luật quy định về việc chuyển giữa các trạng thái • Thuật toán có thể được hiểu dưới dạng 1 bài toán tìm đường đi từ trạng thái khởi đầu về trạng thái đích • Phù hợp nhất với các bài toán giải đố, game,.. 10/15/2021 hiep.nguyenduy@hust.edu.vn 15 Thuật toán nhánh cận • Bài toán qua sông: • Người nông dân – P, Cừu – G, chó sói – W và bao bắp cải – C • Mỗi lần qua sông, người nông dân chỉ chở được 1 thứ • Những thứ không được để cùng nhau mà không có mặt người nông dân: (G và W), (W và C) vì chúng sẽ ăn lẫn nhau • Cây trạng thái của bài toán 10/15/2021 hiep.nguyenduy@hust.edu.vn 16 8
- 10/18/2021 Thuật toán nhánh cận • Bài toán xếp hậu với bàn cờ 4x4 • Mỗi quân hậu phải đứng trên 1 cột riêng, hàng riêng và đường chéo riêng • Không gian trạng thái 10/15/2021 hiep.nguyenduy@hust.edu.vn 17 Thuật toán nhánh cận • Ví dụ 1. Bài toán phân công công việc • Mỗi người chỉ được phân 1 việc • Tổng chi phí để hoàn thành n việc là nhỏ nhất • Cận dưới: 2 + 3 + 1 + 4 (or 5 + 2 + 1 + 4) Theo người hoặc theo việc Bước 0 và 1 được tạo ra với thuật toán best- first Branch-and-bound • Chọn gán công việc cho người với chi phí nhỏ nhất trước • Giới hạn dưới – lower bound sẽ được tính lại tại mỗi nút trên cây trạng thái 10/15/2021 hiep.nguyenduy@hust.edu.vn 18 9
- 10/18/2021 Thuật toán nhánh cận • Ưu tiên nhánh có Lower Bound nhỏ nhất trước 10/15/2021 hiep.nguyenduy@hust.edu.vn 19 10/15/2021 hiep.nguyenduy@hust.edu.vn 20 10
- 10/18/2021 Thuật toán nhánh cận • Ví dụ 2. Bài toán người bán hàng dạo (người du lịch) Traveling Salesperson Problem • Có n thành phố 1, 2, …, n. • Chi phí đi từ thành phố i đến thành phố j là c(i, j). • Hãy tìm một hành trình xuất phát từ thành phố thứ 1, đi qua các thành phố khác, mỗi thành phố đúng 1 lần và quay về thành phố 1 với tổng chi phí nhỏ nhất • Mô hình hoá • Phương án x = (x1, x2, …, xn) trong đó xi {1, 2, …, n} • Ràng buộc C: xi xj, 1 i < j n • Hàm mục tiêu 10/15/2021 f(x) = c(x1, x2) +hiep.nguyenduy@hust.edu.vnc(xn, x1) min c(x2, x3) + … + 21 Thuật toán nhánh cận TRY(k) • Thuật toán vét cạn - duyệt toàn bộ: Begin • Liệt kê tất cả các phương án bằng Foreach v thuộc Ak phương pháp đệ quy quay lui if check(v,k) Begin • Với mỗi phương án, tính toán hàm xk = v; mục tiêu if(k = n) • Giữ lại phương án có hàm mục tiêu ghi_nhan_cau_hinh; nhỏ nhất cập nhật kỷ lục f*; else TRY(k+1); End 𝑇(𝑛) = 𝑂(𝑛!) End Main() Begin TRY(1); End 10/15/2021 hiep.nguyenduy@hust.edu.vn 22 11
- 10/18/2021 Thuật toán nhánh cận TRY(k) { Foreach v thuộc Ak if check(v,k) { • Thuật toán nhánh và cận: xk = v; • Phương án bộ phận (a1,…, ak) trong đó a1 gán if(k = n) { cho x1,… ak gán cho xk ghi_nhan_cau_hinh; • Phương án (a1,…, ak, bk+1,…,bn) là một phương cập nhật kỷ lục f*; } { án đầy đủ được phát triển từ (a1,…,ak) trong if g(x1,…,xk) < f* đó bk+1 gán cho xk+1,…, bn được gán cho xn TRY(k+1); • Với mỗi phương án bộ phận (x1,…, xk), hàm } cận dưới g(x1,…, xk) có giá trị không lớn hơn } giá trị hàm mục tiêu của phương án đầy đủ } phát triển từ (x1,…,xk) Main() • Nếu g(x1,…,xk) f* thì không phát triển lời giải { f* = ; từ (x1,…,xk) TRY(1); } 10/15/2021 hiep.nguyenduy@hust.edu.vn 23 Bài toán người bán hàng dạo • Ma trận chi phí di chuyển là đối xứng • Thỏa mãn bất đẳng thức tam giác 𝑑 𝑖𝑗 + 𝑑𝑗𝑘 >= 𝑑 𝑖𝑘 • Lower bound là chi phí nhỏ nhất tới mỗi thành phố • Chi phí thực sẽ phải >= chi phí nhỏ nhất này • Trong ví dụ theo cột là 7+5+8+5+6 = 31, và theo hàng là 7+5+8+5+6 = 31 • Ta sẽ xây dựng thuật toán nhánh cận dựa trên row minimum branch-and-bound • Hàm mục tiêu tại bước i sẽ là giá trị cạnh 𝑑 𝑖𝑗 + lb của các đỉnh còn lại (bỏ qua i và j) 10/15/2021 hiep.nguyenduy@hust.edu.vn 24 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 12
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 25 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 26 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 13
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 27 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 28 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 14
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 29 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 30 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 15
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 31 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 32 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 16
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 33 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 34 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 17
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 35 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 10/15/2021 hiep.nguyenduy@hust.edu.vn 36 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound 18
- 10/18/2021 10/15/2021 hiep.nguyenduy@hust.edu.vn 37 https://www.slideshare.net/SaravananNatarajan2/tsp-branch-andbound Bài toán người bán hàng dạo - TSP Các dạng thuật toán nhánh cận khác cho bài toán TSP? • Travelling salesman problem using Hungarian method • Travelling salesman branch and bound (penalty) method • Travelling salesman branch and bound method • Travelling salesman nearest neighbor method • Travelling salesman diagonal completion method https://cbom.atozmath.com/example/CBOM/Assignment.aspx?he=e&q=TSP • VD một branch and bound với hàm cận dưới khác • cm là chi phí nhỏ nhất trong số các chi phí đi giữa 2 thành phố khác nhau • Phương án bộ phận (x1,…, xk) • Chi phí bộ phận f = c(x1, x2) + c(x2, x3) + … + c(xk-1, xk) • Hàm cận dưới 10/15/2021 g(x1,…, xk) = f + cm(n-k+1) hiep.nguyenduy@hust.edu.vn 38 19
- 10/18/2021 void TRY(int k){ for(int v = 1; v
CÓ THỂ BẠN MUỐN DOWNLOAD
-
Bài giảng Cấu trúc dữ liệu - Bài 1:Tổng quan về cấu trúc dữ liệu và giải thuật
47 p | 175 | 17
-
Bài giảng Cấu trúc dữ liệu 1: Chương 1 - Lương Trần Hy Hiến
7 p | 162 | 9
-
Bài giảng Cấu trúc dữ liệu và giải thuật trong C++ - Bài 8: Cấu trúc dữ liệu ngăn xếp
28 p | 77 | 9
-
Bài giảng Cấu trúc dữ liệu giải thuật: Các kiểu dữ liệu trừu tượng cơ bản - Cấu trúc dữ liệu tuyến tính
92 p | 116 | 9
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Cấu trúc dữ liệu cây đỏ đen - Bùi Tiến Lên
25 p | 81 | 8
-
Bài giảng Cấu trúc dữ liệu và giải thuật – Bài 17: Cấu trúc dữ liệu dạng cây
21 p | 77 | 8
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Các cấu trúc dữ liệu
193 p | 58 | 7
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Chương 1 - Trần Minh Thái (2016)
62 p | 94 | 6
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Chương 1 - Trần Minh Thái (Trường Đại học Hồng Bàng )
62 p | 159 | 6
-
Bài giảng Cấu trúc dữ liệu - Chương 3: Cấu trúc cây
65 p | 58 | 6
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Cấu trúc dữ liệu cây AA - Bùi Tiến Lên
30 p | 35 | 6
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Chương 1 – Trần Minh Thái (2017)
67 p | 106 | 4
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Cấu trúc dữ liệu cây - Bùi Tiến Lên
68 p | 40 | 4
-
Bài giảng Cấu trúc dữ liệu: Chương 1 - ThS. Thiều Quang Trung (2018)
44 p | 43 | 4
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Cấu trúc dữ liệu cây AVL - Bùi Tiến Lên
38 p | 47 | 4
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Chương 5 - Ngô Quang Thạch
24 p | 58 | 3
-
Bài giảng Cấu trúc dữ liệu và giải thuật: Chương 2 - Th.S Thiều Quang Trung
41 p | 68 | 3
-
Bài giảng Cấu trúc dữ liệu giải thuật: Cấu trúc dữ liệu
17 p | 50 | 2
Chịu trách nhiệm nội dung:
Nguyễn Công Hà - Giám đốc Công ty TNHH TÀI LIỆU TRỰC TUYẾN VI NA
LIÊN HỆ
Địa chỉ: P402, 54A Nơ Trang Long, Phường 14, Q.Bình Thạnh, TP.HCM
Hotline: 093 303 0098
Email: support@tailieu.vn