Bài giảng Trí tuệ nhân tạo - Chương 3: Các chiến lược tìm kiếm Heuristics - Nguyễn Văn Hòa

Nội dung

 Khái niệm

 Tìm kiếm tốt nhất trước

 Phương pháp leo đồi

 Cài đặt hàm đánh giá

 Thu giảm ràng buộc

 Giải thuật cắt tỉa α-β

pdf 43 trang phuongnguyen 3420
Bạn đang xem 20 trang mẫu của tài liệu "Bài giảng Trí tuệ nhân tạo - Chương 3: Các chiến lược tìm kiếm Heuristics - Nguyễn Văn Hòa", để tải tài liệu gốc về máy hãy click vào nút Download ở trên

Tóm tắt nội dung tài liệu: Bài giảng Trí tuệ nhân tạo - Chương 3: Các chiến lược tìm kiếm Heuristics - Nguyễn Văn Hòa

Bài giảng Trí tuệ nhân tạo - Chương 3: Các chiến lược tìm kiếm Heuristics - Nguyễn Văn Hòa
Chương 3: Các chiến lược 
tìm kiếm Heuristics
1
Nội dung
 Khái niệm
 Tìm kiếm tốt nhất trước
 Phương pháp leo đồi
 Cài đặt hàm đánh giá
 Thu giảm ràng buộc
 Giải thuật cắt tỉa α-β
2
Giới hạn không gian hệ thống
 8-puzzle
 Lời giải cần trung bình 22 
cấp (depth)
 Độ rộng của bước ~ 3
 Tìm kiếm vét cạn cho 22 cấp cần 
 3.1 x 1010 states
 Nếu chỉ giới hạn ở d=12, cần trung bình 3.6 
3
triệu trạng thái
[24 puzzle có 1024 trạng thái]
 ⇒ Cần chiến lược tìm kiếm heuristic
Tìm kiếm Heuristics
 Any estimate of how close a state is to a goal
 Designed for a particular search problem
 Examples: Manhattan distance, Euclidean distance
10
5
11.2
Tìm kiếm Heuristic (tt)
 Có nhiều phương pháp để xây dựng một thuật giải 
Heuristic, trong đó người ta thường dựa vào một 
số nguyên lý cơ bản như sau:
 Nguyên lý vét cạn thông minh: Trong một bài toán 
tìm kiếm nào đó, khi không gian tìm kiếm lớn, ta 
thường tìm cách giới hạn lại không gian tìm kiếm hoặc 
thực hiện một kiểu dò tìm đặc biệt dựa vào đặc thù của 
bài toán để nhanh chóng tìm ra mục tiêu.
 Nguyên lý tham lam (Greedy): Lấy tiêu chuẩn tối ưu 
(trên phạm vi toàn cục) của bài toán để làm tiêu chuẩn 
chọn lựa hành động cho phạm vi cục bộ của từng bước 
(hay từng giai đoạn) trong quá trình tìm kiếm lời giải.
5
Tìm kiếm Heuristic (tt)
 Nguyên lý thứ tự: Thực hiện hành động dựa trên một 
cấu trúc thứ tự hợp lý của không gian khảo sát nhằm 
nhanh chóng đạt được một lời giải tốt.
 Hàm Heuristic: các hàm đánh giá thô, giá trị của hàm 
phụ thuộc vào trạng thái hiện tại của bài toán tại mỗi 
bước giải, giúp chọn được cách hành động tương đối 
hợp lý trong từng bước của thuật giải.
Giải thuật tìm kiếm heuristic:
 Giải thuật leo núi (hill-climbing)
 Greedy, TK tốt nhất (best-first search)
 A* search, 
6
Ví dụ phép đo Heuristics
7
Ví dụ phép đo Heuristics (tt)
Heuristic “Số đường thắng nhiều nhất” (theo các đường 
chéo trên bàn cờ) áp dụng cho các con cờ đầu tên đặt 
8
vào bàn cờ trong bàn cờ tic-tac-toe
Ví dụ phép đo Heuristics (tt)
9
Tìm kiếm leo đồi – Hill Climbing Search 
(Pearl, 1984) 
 Chọn một trạng thái tốt hơn trạng thái đang khảo 
sát để phát triển. Nếu không có thuật tóan phải 
dừng.
 Nếu chỉ chọn một trạng thái tốt hơn: leo đồi đơn 
giản, trạng thái tốt nhất: leo đồi dốc đứng. 
 Sử dụng hàm H để biết trạng thái nào tốt hơn. 
10
 Khác với tìm kiếm sâu, leo đồi không lưu tất cả 
các con mà chỉ lưu đúng một trạng thái được chọn 
nếu có.
Tìm kiếm leo đồi (tt)
 Giải thuật
 Xét trạng thái bắt đầu
 Nếu là đích ⇒ dừng
 Ngược lại: thiết lập khởi đầu như TT hiện tại
 Lặp đến khi: gặp đích hoặc không còn luật nào chưa 
được áp dụng vào TT hiện tại
 Lựa một luật để áp dụng vào TT hiện tại để sinh ra một 
TT mới
 Xem xét TT mới này
⇒
11
 Nếu là đích dừng
 Nếu không là đích, nhưng tốt hơn TT hiện tại ⇒ thiết 
lập TT mới là TT hiện tại
 Nếu không tốt hơn thì lặp tiếp tục
Tìm kiếm leo đồi (tt)
 Hiệu quả nếu có được hàm (H) đánh giá tốt
 Giới hạn
Có khuynh hướng bị sa lầy ở những cực đại cục bộ
 Lời giải tìm được không tối ưu
 Không tìm được lời giải mặc dù có tồn tại lời giải
 Có thể gặp vòng lặp vô hạn do không lưu giữ thông tin 
về các trạng thái đã duyệt
12
Tìm kiếm leo đồi (tt)
 Bài toán 8 Hậu
 Trạng thái bắt đầu: mỗi Hậu trên 1 cột
 Trạng thái đích: các Hậu không thể tấn công nhau
 Phép đo Heuristic h(n): số lượng các cập hậu đối kháng 
nhau
13
H(n) = 17 h(n) = 1
Tìm kiếm tốt nhất (BFS)
 Là phương pháp dung hoà của BrFS và DFS
 Có sử dụng để đánh giá ưu thế của mỗi trạng thái, có thể 
là ước lượng từ nó đến TT đích
 Tại mỗi bước, giải thuật sẽ chọn trạng thái mà nó cho 
rằng là có ưu thế nhất trong số các trạng thái đã sinh ra 
được đến thời điểm đó
 Khác với giải thuật leo đồi có cải tiến ở chổ: có lưu tất cả 
những TT đã phát sinh đến thời điểm chọn TT để xét tiếp
14
 Dùng hai danh sách:
 OPEN: chứa các TT sẽ được xét.
 CLOSED: chứa các TT đã xét qua.
Tìm kiếm tốt nhất (BFS)
 Giải thuật
 OPEN = [TT đầu]
 Lặp đến khi: gặp đích hoặc OPEN rỗng
 Lấy TT tốt nhất từ OPEN
 Phát sinh các con của nó
 Với mỗi con:
 Nếu nó chưa được phát sinh: gán nó trị đánh giá, đưa vào OPEN, 
ghi nhận TT cha của nó
15
 Nếu đã được phát sinh trước: Nếu đạt đến bởi đường khác tốt hơn 
⇒ ghi nhận lại TT cha của nó, cập nhật lại trị đánh giá của nó và 
của các con của nó
Tìm kiếm tốt nhất (BFS)
1. open = [A5]; closed = [ ]
2. Đánh giá A5; open = [B4,C4,D6]; 
closed = [A5]
3. Đánh giá B4; 
Open là queue, xếp theo 
Heuristic tăng dần
open = [C4,E5,F5,D6]; 
closed = [B4,A5]
4. Đánh giá C4; 
open = [H3,G4,E5,F5,D6]; 
closed = [C4,B4,A5]
5. Đánh giá H3; 
open = [O2,P3,G4,E5,F5,D6]; 
16
closed = [H3,C4,B4,A5]
6. Đánh giá O2; 
open = [P3,G4,E5,F5,D6]; 
closed = [O2,H3,C4,B4,A5]
7. Đánh giá P3; tìm được lời giải!
Cài đặt hàm đánh giá (EF)
 Xét trò chơi 8-ô, mỗi trạng thái n, một giá trị f(n): 
f(n) = g(n) + h(n)
 g(n) = khoảng cách thực sự từ n đến trạng thái bắt đầu
 h(n) = hàm heuristic đánh giá khoảng cách từ trạng thái 
n đến mục tiêu. 
2 8 3
1 6 4
7 5
start
1 2 3
8 4
g(n) = 0
17
2 8 3
1 6 4
7 5
2 8 3
1 4
7 6 5
2 8 3
1 6 4
7 5
7 6 5
goal
g(n) = 1
6 4 6f(n) = 
h(n): số lượng các vị trí còn sai;
Ví dụ
18
Ví dụ 
19
Ví dụ 
20
Giải thuật A*
 A* là giải thuật tổng quát hơn BestFS, nó tìm 
kiếm trên KGTT là đồ thị. 
 Vì là đồ thị nên phát sinh nhiều vấn đề khi tìm 
đường đi tối ưu. 
 Để ý rằng nghiệm là đường đi nên ta phải lưu lại 
vết của đường đi này. 
 Trong các giải thuật trước, để tập trung cho tư 
tưởng chính của các giải thuật đó chúng ta bỏ qua 
21
chi tiết này, nhưng trong giải thuật này chi tiết 
này được đề cập vì nó liên quan đến nghiệm một 
cách trực tiếp. 
Thông tin mỗi nút
 Mỗi trạng thái u tùy ý sẽ gồm bốn yếu tố (g(n), 
h(n), f(n), cha(n)). Trong đó:
 G(n), h(n), f(n) đã biết 
 Cha(n) là nút cha của nút đang xét n
22
A* Search Progress
source: wikipedia page for A* Algorithm; by Subh83
Mô tả hoạt động của A*
24
Lưu các trạng thái
Bước Open closed
1 A(0,7,0,-)
2 B(3,3,6,A), D(1,6,7,A), C(5,4,9,A) A(0,7,0,-)
3 D(1,6,7,A), C(4,4,8,B) B(3,3,6,A)
4 B(2,3,5,D), C(4,4,8,B) D(1,6,7,A)
5 C(3,4,7,B) B(2,3,5,D)
6 G(5,0,5,C) C(3,4,7,B)
25
Giải thuật dừng ở bước 6 và đường đi thu được độ dài 5 
như sau A-D-B-C-G.
Chi tiết các bước
 Ở bước 2, mọi việc xảy ra bình thường 
 Ở bước 3, tìm được đường đi đến C qua B ngắn hơn 
nên các giá trị của C trong open phải được sửa đổi. 
 Ở bước 4, mặc dù B đã nằm trong closed, tức đã xét 
xong nhưng đường đi mới qua D đến B ngắn hơn nên 
B phải được lấy khỏi closed chuyển qua open chờ xét 
lại với giá trị mới. 
Ở bước 5, lại xảy ra việc chỉnh sửa các giá trị của C 
26

như ở bước 3.
 Giải thuật dừng ở bước 6 và đường đi thu được độ dài 
5 như sau A-D-B-C-G. 
Mã giả giải thuật A*
g(no)=0; f(no)=h(no);
open:=[no]; closed:=[];
while open[] do
loại n bên trái của open và dưa n vào closed;
if (n là một đích) then thành công, thoát 
else 
Sinh các con m của n;
For m thuộc con(n) do
g(m):=g(n)+c[n,m];
If m không thuộc open hay closed
f(m):=g(m)+h(m); cha(m):=n; Bỏ m vào open;
If m thuộc open (tồn tại m’ thuộc open, sao cho m=m’) 
If g(m)<g(m’) then 
g(m’):=g(m); f(m’):=g(m’)+h(m’); Cha(m’):=n;
If m thuộc closed (tồn tại m’ thuộc closed, sao cho m=m’)
If g(m)<g(m’) then
f(m):=g(m)+h(m); cha(m):=n; Đưa n vào open; Loại n’ khỏi closed;
Xếp open để t.thái tốt nhất nằm bên trái;
27
28
Đánh giá giải thuật A*
 Một hàm đánh giá h(n) được gọi là chấp nhận 
được hay là hàm đánh giá thấp nếu như 
h(n)<=h*(n) với mọi n, ở đây h*(n) là đường đi 
ngắn nhất từ n đến đích.
 Nếu hàm đánh giá h(n) là chấp nhận được thì 
thuật toán A* là tối ưu.
A* là thuật tóan hiệu quả nhất trong các thuật 
29

toán đầy đủ và tối ưu.
Chiến lược tìm kiếm có đối thủ
 Đặc điểm
 Hai người thay phiên đi (xen kẽ)
 Hai người biết thông tin đầy đủ về nhau
 Mỗi người tìm kiếm nước đi
 Nước đi tốt nhất là nước đi dẫn đến phần thắng.
 Biểu diễn KGTT bằng cây: cây trò chơi.
Giải thuật tiêu biểu: MiniMax
30
Thủ tục Minimax cơ bản
 Ví dụ: trò chơi Nim
 Có n (n>2) đồng xu. 
 Mỗi nước đi, người chơi chia các đồng xu này thành 
hai đống nhỏ có số lượng mỗi đống khác nhau. 
 Người thua sẽ là người cuối cùng không chia được theo 
yêu cầu của bài toán.
 Phân tích
 Tính toán phản ứng của đối thủ là khó khăn chủ yếu 
của bài toán này
 Cách giải quyết là giả thiết đối thủ cũng sử dụng kiến 
thức về không gian trạng thái
31
Trò Chơi NIM: giá trị tại các nút
MIN
MAX
1
1 1 1
MIN
MAX
1 10 0
0 01
32
MIN
MAX
1
0
0
KẾT QUẢ CỦA 
MIN
KẾT QUẢ CỦA 
MAX
Trò Chơi NIM
 Hai đấu thủ: MIN và MAX. 
 Trong đó MAX luôn tìm cách tối đa ưu thế của mình và 
MIN tìm mọi cách để đưa MAX vào thế khó khăn nhất. 
 Mỗi mức trên KGTT ứng với một đấu thủ. 
 Để chỉ dẫn được cách đi, chúng ta sẽ gán cho các nút lá là 
1 nếu MAX thắng, là 0 nếu MIN thắng.
 Gán giá trị cho các nút
 Truyền ngược các trị từ các nút lá về gốc theo qui tắc:
 Nếu đỉnh ở mức MAX, gán trị cho đỉnh này bằng giá trị 
lớn nhất trong các giá trị của các con của nó
 Nếu đỉnh ở mức MIN, gán trị cho đỉnh này bằng giá trị 
bé nhất trong các trị của các con của nó.
33
Minimax với độ sâu lớp cố định
 Minimax đối với một KGTT giả định
3 là giá trị max 
của các nút con
2 là giá trị min 
của các nút con
34
Các nút lá được gán các giá trị heuristic nào đó
Còn giá trị tại các nút trong là các giá trị nhận được dựa trên 
giải thuật Minimax (min hay max cua các nút con)
Heuristic trong trò chơi tic-tac-toe
35
Hàm Heuristic: E(n) = M(n) – O(n)
Trong đó: M(n) là tổng số đường thẳng có thể của tôi
O(n) là tổng số đường thẳng có thể của đối thủ
E(n) là trị số đánh giá tổng cộng cho trạng thái n
Giải thuật cắt nhánh alpha-beta
 Hạn chế với số mức d đi nữa thì số trạng thái đã 
rất lớn. 
 Cờ vua: nhân tố nhánh b=35; d=3 có 
35*35*35=42.785 trạng thái
 Giảm bớt các trạng thái cần khảo sát mà vẫn 
không ảnh hưởng gì đến việc giải quyết bài toán. 
 Cắt bỏ các nhánh không cần khảo sát.
36
Giải thuật cắt nhánh alpha-beta
 Tìm kiếm theo kiểu depth-first.
 Nút MAX có 1 giá trị α (luôn tăng)
 Nút MIN có 1 giá trị β (luôn giảm)
 Tìm kiếm có thể kết thúc dưới bất kỳ:
 Nút MIN nào có β ≤ α của bất kỳ nút cha MAX nào.
 Nút MAX nào có α ≥ β của bất kỳ nút cha MIN nào.
37
 Giải thuật cắt tỉa α-β thể hiện mối quan hệ giữa 
các nút ở lớp n và n+2, mà tại đó toàn bộ cây có 
gốc tại lớp n+1 có thể cắt bỏ.
Cắt nhánh α (vị trí MAX)
SMAX Có giá trị >= α
A CMIN
α - cut
Có giá 
trị = α Có giá trị <= k
38
BMAX Có giá trị 
= k
X Y . Z 
Điều kiện 1: Chỉ cần biết giá trị tại A và B
Điều kiện 2: Giá trị A > giá trị B
Điều kiện 3: X, Y, .. , Z ở vị trí Max
Bỏ những cây con có gốc là X,Y,, Z
Cắt nhánh β (vị trí Min)
SMIN Có giá trị <= β
A CMAX
β - cut
Có giá 
trị = β Có giá trị >= k
39
BMIN Có giá trị 
= k
X Y . Z 
Điều kiện 1: Chỉ cần biết giá trị tại A và B
Điều kiện 2: Giá trị A < giá trị B
Điều kiện 3: X, Y, .. , Z ở vị trí Min
Bỏ những cây con có gốc là X,Y,, Z
Cắt nhánh α-β: ví dụ
40
Bài tập: bài 1 (trò đố 8 ô như)
Start
1 2 3
6 7
Goal
1 2 3
8 4
Dùng các hàm lượng giá heuristic sau
 h1 = số lượng các vị trí sai khác so với trạng thái goal. 
 h2 = tổng số độ dời ngắn nhất của các ô về vị trí đúng (khoảng cách 
Manhattan)
Hãy triển khai không gian trạng thái của bài toán đến mức 5 (nếu chưa tìm được 
8 5 4 7 6 5
41
goal): 
a) Theo giải thuật leo núi 
b) Theo giải thuật tìm kiếm rộng
c) Theo giải thuật tìm kiếm sâu
d) Theo giải thuật tìm kiếm tốt nhất đầu tiên
Trong cây tìm kiếm dưới đây, mỗi nút có 2 giá trị đi kèm: giá trị bên trái của 
nút (in nghiêng) thể hiện giá trị heuristic của nút, và giá trị bên phải nút 
thể hiện thứ tự nút được duyệt qua. Với mỗi chiến lược tìm kiếm dưới 
Bài tập: bài 2 (duyệt đồ thị)
đây, hãy viết danh sách thứ tự các nút được duyệt, so sánh và cho biết ta 
đã dùng giải thuật tìm kiếm nào trên cây : 
42
a) Tìm kiếm rộng BrFS 
b) Tìm kiếm sâu DFS 
c) Tìm kiếm tốt nhất đầu tiên BFS
d) Tìm kiếm leo núi 
f) A*
Liệt kê danh sách các nút được duyệt theo tìm kiếm DFS.
 Thực hiện giải thuật Minimax trên cây. 
Bài tập: bài 3 (minimax)
43
 Sẽ có gì khác biệt nếu như ta dùng giải thuật cắt tỉa alpha –
beta để định trị nút gốc cho cây?

File đính kèm:

  • pdfbai_giang_tri_tue_nhan_tao_chuong_3_cac_chien_luoc_tim_kiem.pdf