
“Thử nghiệm chạy ổn mà. Nhưng triển khai thật hay chưa thì… để bàn thêm.”
Đây là câu chúng tôi nghe nhiều nhất khi đồng hành cùng doanh nghiệp làm PoC AI Agent. Báo cáo có số liệu, nhân viên thấy “cũng tiện”, nhưng đến buổi họp quyết định thì không ai dám chốt. PoC cứ thế kéo dài thêm một tháng, rồi thêm một tháng nữa.
Trong các bài trước, chúng tôi đã phân tích vì sao PoC AI thành công nhưng không lên được production. Bài này đi vào phần làm thế nào: một công cụ cụ thể để buổi họp sau PoC kết thúc bằng một quyết định rõ ràng, thay vì “để xem thêm”.
Công cụ đó là cổng quyết định (decision gate): bộ tiêu chí được thống nhất trước khi thử nghiệm bắt đầu, nói rõ kết quả thế nào thì đi tiếp, thế nào thì thử thêm, và thế nào thì dừng.
Bài viết này giúp bạn
- Hiểu 3 lý do khiến PoC “chạy tốt” nhưng không ai quyết định
- Biết cách chia tiêu chí thành 3 nhóm: hiệu quả – vận hành – rủi ro
- Đặt ngưỡng đạt (con số) và chọn số lượng mẫu, thời gian thử nghiệm hợp lý
- Có sẵn mẫu bảng tiêu chí để copy, kèm 3 ví dụ cho các nghiệp vụ phổ biến
- Vì sao PoC “chạy tốt” mà vẫn không ai quyết định?
Lý do 1: Tiêu chí được đặt ra sau khi đã có kết quả
Nếu đến lúc PoC xong mới ngồi bàn “thế nào là thành công”, cuộc họp gần như chắc chắn sẽ không có kết luận. Người đề xuất dự án sẽ tìm con số đẹp, người thận trọng sẽ tìm con số xấu. Ai cũng có lý.
Tiêu chí chỉ có giá trị khi được chốt trước khi nhìn thấy kết quả.
Lý do 2: Chỉ nhìn vào “độ chính xác của AI”
Báo cáo PoC thường có một con số kiểu “độ chính xác 92%”. Nhưng điều ban giám đốc thực sự muốn biết là:
- Nhân viên thực tế đỡ được bao nhiêu thời gian?
- 8% còn lại sai thì ai phát hiện, ai sửa?
- Chạy thật mỗi tháng tốn bao nhiêu tiền?
Độ chính xác quan trọng, nhưng chỉ riêng nó thì không trả lời được câu hỏi “có dùng được trong công việc hay không”.
Lý do 3: Không rõ ai là người quyết
Phòng IT chờ phòng nghiệp vụ nói “muốn dùng”. Phòng nghiệp vụ chờ IT nói “an toàn”. Giám đốc chờ cả hai cùng đề xuất. Kết quả là ai cũng chờ người khác.
Ở nhiều doanh nghiệp Việt Nam, quyết định cuối cùng nằm ở CEO hoặc chủ doanh nghiệp. Điều đó giúp chốt nhanh, nhưng cũng có nghĩa là nếu CEO không được tham gia đặt tiêu chí từ đầu, dự án dễ bị dừng chỉ vì một ấn tượng chủ quan sau buổi demo.
- Cổng quyết định chỉ có 3 kết luận
Cổng quyết định là “trạm kiểm soát” cuối giai đoạn thử nghiệm. Chúng tôi khuyên chỉ cho phép 3 kết luận:
Đi tiếp (Go)
- Điều kiện: đạt toàn bộ điều kiện bắt buộc và phần lớn điều kiện mục tiêu
- Việc tiếp theo: lập kế hoạch và ngân sách triển khai thật, chốt người vận hành
Thử thêm có điều kiện
- Điều kiện: trượt 1–2 điều kiện bắt buộc, nhưng đã rõ nguyên nhân và cách khắc phục
- Việc tiếp theo: thử nghiệm thêm một lần duy nhất, có giới hạn thời gian và chi phí
Dừng
- Điều kiện: trượt điều kiện bắt buộc mà không rõ cách khắc phục, hoặc chi phí không tương xứng
- Việc tiếp theo: kết thúc, ghi lại bài học, chuyển sang quy trình ứng viên tiếp theo
Chúng tôi cố ý không có lựa chọn “chờ xem thêm”. Một khi “chờ xem” được chấp nhận, PoC sẽ gần như chắc chắn rơi vào trạng thái “cứ chạy tiếp đã” và chi phí thì vẫn đều đặn phát sinh.
Ghi rõ ai quyết và quyết vào ngày nào
Bảng tiêu chí luôn phải có 3 thông tin:
- Người quyết định: một người duy nhất chọn 1 trong 3 kết luận
- Ngày họp quyết định: trong vòng 2 tuần sau khi thử nghiệm kết thúc, và đặt lịch ngay từ ngày bắt đầu PoC
- Người cần hỏi ý kiến: trưởng bộ phận nghiệp vụ, IT, người phụ trách bảo mật dữ liệu
- Chia tiêu chí thành 3 nhóm: Hiệu quả – Vận hành – Rủi ro
Nhóm Hiệu quả
- Câu hỏi: công việc có thực sự nhanh hơn, nhẹ hơn, ít sai hơn?
- Ví dụ chỉ số: thời gian xử lý mỗi đầu việc, thời gian phản hồi, tỷ lệ phải sửa, số lỗi
Nhóm Vận hành
- Câu hỏi: có duy trì được khi chạy thật không?
- Ví dụ chỉ số: tỷ lệ chuyển cho con người, thời gian nhân viên kiểm tra lại, đã có người vận hành chưa, chi phí hàng tháng dự kiến, mức độ nhân viên muốn tiếp tục dùng
Nhóm Rủi ro
- Câu hỏi: nếu có sai sót, doanh nghiệp có chấp nhận được không?
- Ví dụ chỉ số: số lỗi lọt ra ngoài (đến khách hàng hoặc vào hệ thống chính), việc xử lý dữ liệu cá nhân đã được duyệt chưa, có lưu nhật ký thao tác không, phân quyền
Đừng quên nhóm “Vận hành”
Đây là nhóm bị bỏ sót nhiều nhất. Trong giai đoạn PoC, luôn có một người phụ trách dự án theo sát từng ngày nên mọi thứ trông rất trơn tru. Khi chạy thật, người đó quay lại việc chính của mình. Lúc này cần trả lời được:
- Khi AI không chắc chắn, ai xử lý và trong bao lâu?
- Khi quy trình thay đổi, ai cập nhật prompt và quy tắc cho agent?
- Xử lý bao nhiêu đầu việc mỗi tháng thì chi phí là bao nhiêu?
Rủi ro: đo “lỗi có lọt ra ngoài không”, không chỉ “AI sai bao nhiêu”
Nếu thiết kế có bước con người duyệt trước khi gửi đi hay ghi vào hệ thống, thì việc AI sai là điều đã được tính trước. Thứ cần đo là lỗi có vượt qua được bước kiểm tra của con người hay không. Xem thêm cách phân định việc AI làm và việc con người duyệt trong bài Human-in-the-loop: Vì sao AI Agent vẫn cần con người?
- Cách đặt ngưỡng đạt (con số)
Bước 1: Đo hiện trạng trước khi thử nghiệm
Không biết hiện tại mỗi đơn mất bao nhiêu phút thì cũng không biết “giảm 40%” là tốt hay chưa đủ. Đo hiện trạng không cần quá chính xác:
- Nhờ 2–3 nhân viên ghi lại thời gian xử lý trong 1 tuần
- Đếm số lần phải sửa hoặc làm lại trong 3 tháng gần nhất
- Lấy số lượng đầu việc từ phần mềm đang dùng (CRM, phần mềm bán hàng, kế toán…)
Quan trọng nhất là đo trước và sau theo cùng một cách.
Bước 2: Tách “điều kiện bắt buộc” và “điều kiện mục tiêu”
- Điều kiện bắt buộc: chỉ cần trượt 1 là không đi tiếp (VD: không có lỗi nào lọt đến khách hàng; bộ phận phụ trách dữ liệu đã duyệt)
- Điều kiện mục tiêu: nên đạt, nhưng có thể bù trừ với các chỉ số khác (VD: giảm 40% thời gian xử lý; 70% nhân viên muốn tiếp tục dùng)
Chỉ nên có 3–5 điều kiện bắt buộc. Đặt quá nhiều thì lần nào cũng trượt ít nhất một điều kiện, và dự án sẽ không bao giờ lên production được.
Bước 3: Đặt ngưỡng dựa trên điểm hòa vốn
Trước khi thử nghiệm thì không ai đoán chính xác được kết quả. Vì vậy ngưỡng nên được tính ngược từ điểm hòa vốn: đạt mức này thì chi phí triển khai thật là xứng đáng. Ghi kèm một dòng giải thích:
Ví dụ: Nếu giảm được từ 40% thời gian xử lý trở lên, sau khi trừ chi phí vận hành hàng tháng, doanh nghiệp vẫn tiết kiệm được tương đương thời gian làm thêm giờ của 1 nhân viên.
Cách tính chi tiết có trong bài AI Agent có thực sự tiết kiệm chi phí? Cách tính ROI trước khi đầu tư.
Bước 4: Chọn số lượng mẫu và thời gian
Nếu số mẫu quá ít, có thể toàn rơi vào trường hợp dễ và kết quả đẹp một cách giả tạo. Theo kinh nghiệm của chúng tôi:
- Số lượng: tối thiểu khoảng 100 đầu việc, có đủ các trường hợp ngoại lệ
- Thời gian: 2–4 tuần, có ít nhất một đợt cao điểm (cuối tháng, đợt khuyến mãi, mùa chốt sổ…)
- Dữ liệu: dùng dữ liệu phát sinh thực tế, không chọn lọc. Không dùng bộ dữ liệu “sạch” do nhóm dự án chuẩn bị riêng
- Mẫu bảng tiêu chí cổng quyết định (copy và dùng ngay)
Copy mẫu dưới đây, thay phần trong 【 】 bằng thông tin của doanh nghiệp bạn. Có thể đính kèm vào tờ trình xin ngân sách thử nghiệm.
■ BẢNG TIÊU CHÍ CỔNG QUYẾT ĐỊNH – PoC AI AGENT
【1. Thông tin chung】
- Quy trình thử nghiệm: 【tên quy trình】
- Thời gian thử nghiệm: 【từ ngày … đến ngày … (… tuần)】
- Số lượng mẫu tối thiểu: 【… đầu việc】
- Dữ liệu sử dụng: 【VD: dữ liệu thực tế phát sinh trong thời gian thử nghiệm, không chọn lọc】
【2. Người quyết định】
- Người quyết định cuối cùng: 【họ tên, chức danh – 1 người】
- Ngày họp quyết định: 【ngày … (trong vòng 2 tuần sau khi kết thúc)】
- Người cần hỏi ý kiến: 【trưởng bộ phận / IT / phụ trách bảo mật dữ liệu…】
【3. Hiện trạng (đo trước khi thử nghiệm)】
- Thời gian xử lý mỗi đầu việc: 【khoảng … phút】
- Số lượng đầu việc mỗi tháng: 【khoảng …】
- Số lỗi / lần phải làm lại: 【… lần/tháng】
- Cách đo: 【VD: 3 nhân viên tự ghi lại trong 1 tuần】
【4. Điều kiện bắt buộc (trượt 1 điều kiện là không đi tiếp)】
- Hiệu quả: 【VD: giảm từ …% thời gian xử lý】
- Vận hành: 【VD: đã chỉ định người vận hành khi chạy thật】
- Rủi ro: 【VD: 0 lỗi lọt đến khách hàng / vào hệ thống chính】
- Rủi ro: 【VD: phương án xử lý dữ liệu đã được duyệt】
【5. Điều kiện mục tiêu (đánh giá tổng thể)】
- 【VD: tỷ lệ nhân viên phải sửa tối đa …%】
- 【VD: tỷ lệ chuyển cho con người tối đa …%】
- 【VD: tối thiểu …% nhân viên muốn tiếp tục dùng】
- 【VD: chi phí vận hành dự kiến tối đa … triệu đồng/tháng】
【6. Quy tắc kết luận】
- Đi tiếp: đạt toàn bộ điều kiện bắt buộc + quá nửa điều kiện mục tiêu
- Thử thêm có điều kiện: trượt 1–2 điều kiện bắt buộc, đã rõ nguyên nhân và cách khắc phục
→ chỉ 1 lần, tối đa 【… tuần】, chi phí tối đa 【… triệu đồng】 - Dừng: các trường hợp còn lại → ghi lại bài học, chọn quy trình tiếp theo
【7. Căn cứ hiệu quả đầu tư】
- 【VD: giảm …% thời gian thì sau khi trừ chi phí … triệu đồng/tháng vẫn có lợi】
- Ba ví dụ minh họa
Dưới đây là ví dụ giả định cho 3 nghiệp vụ phổ biến. Các con số chỉ để minh họa cách đặt tiêu chí. Mức phù hợp sẽ khác nhau tùy doanh nghiệp.
Ví dụ 1: Nhập đơn hàng nhận qua email và Zalo (doanh nghiệp phân phối)
AI Agent đọc đơn khách gửi, tạo bản nháp đơn hàng trong phần mềm bán hàng. Nhân viên kiểm tra rồi mới xác nhận.
Điều kiện bắt buộc:
- Thời gian xử lý mỗi đơn: hiện tại khoảng 8 phút, cần giảm từ 40% trở lên
- Số đơn sai được xác nhận vào hệ thống: 0 (AI chỉ tạo nháp, người xác nhận)
- Người vận hành khi chạy thật: đã chỉ định 1 người trong phòng bán hàng
Điều kiện mục tiêu:
- Tỷ lệ đơn nhân viên phải sửa: không quá 20%
- Tỷ lệ AI chuyển cho người vì không chắc chắn: không quá 30%
- Nhân viên muốn tiếp tục dùng: từ 70% trở lên
Điểm chính: vì có bước con người xác nhận, điều kiện bắt buộc là “đơn sai có lọt vào hệ thống không”, chứ không phải “AI có sai không”.
Ví dụ 2: Soạn câu trả lời đầu tiên cho khách hàng (fanpage, Zalo OA, email)
Điều kiện bắt buộc:
- Số câu trả lời sai được gửi đến khách: 0 (nhân viên luôn duyệt trước khi gửi)
- Xử lý dữ liệu cá nhân khách hàng: đã được bộ phận phụ trách duyệt
Điều kiện mục tiêu:
- Tỷ lệ bản nháp được dùng (giữ nguyên hoặc sửa nhẹ): từ 60% trở lên
- Thời gian phản hồi đầu tiên trung bình: giảm từ 30% trở lên
- Thời gian nhân viên xử lý mỗi tin nhắn: giảm từ 25% trở lên
Điểm chính: với chăm sóc khách hàng, “không để câu trả lời sai đến tay khách” quan trọng hơn tốc độ. Kể cả khi tỷ lệ dùng bản nháp chưa cao, nếu nhân viên đỡ phải viết từ đầu thì vẫn có thể đánh giá qua điều kiện mục tiêu.
Ví dụ 3: Đối chiếu chứng từ và nhập liệu kế toán
AI Agent đọc hóa đơn, phiếu chi, sao kê và đề xuất bút toán. Kế toán duyệt trước khi ghi sổ.
Điều kiện bắt buộc:
- Độ chính xác khi đọc số tiền, ngày, đối tác: mỗi trường từ 95% trở lên
- Số bút toán sai số tiền được ghi sổ: 0
- Thời gian thử nghiệm có kỳ chốt sổ cuối tháng: ít nhất 1 lần
Điều kiện mục tiêu:
- Thời gian xử lý mỗi chứng từ: giảm từ 50% trở lên
- Tỷ lệ chứng từ có định dạng lạ: không quá 15% (nếu vượt, thu hẹp phạm vi đối tác)
Điểm chính: kế toán dồn việc vào cuối tháng. Thử nghiệm chỉ trong ngày thường sẽ không phản ánh được áp lực thật, nên “có kỳ chốt sổ” được đặt là điều kiện bắt buộc.
- Năm sai lầm thường gặp
- Bắt đầu thử nghiệm rồi mới đặt tiêu chí. Đây là lỗi phổ biến nhất. Muộn nhất là ở buổi kick-off, tiêu chí phải được người quyết định đồng ý.
- Quá nhiều điều kiện bắt buộc. Thêm “cho chắc” thì lần nào cũng trượt ít nhất một điều kiện, và PoC thử mãi không lên production được.
- Thử nghiệm bằng dữ liệu “sạch”. Kết quả sẽ đẹp, nhưng khi chạy thật sẽ không lặp lại được. Ghi rõ trong bảng tiêu chí là dùng dữ liệu thực tế, không chọn lọc.
- Không tính chi phí vận hành. Khi PoC chỉ chạy vài trăm đầu việc thì chi phí API gần như không đáng kể. Phải tính theo số lượng thực tế mỗi tháng rồi mới so với lợi ích.
- “Thử thêm” hết lần này đến lần khác. Xem mục tiếp theo.
- Đừng để “thử thêm có điều kiện” thành cách kéo dài vô thời hạn
Khi chọn “thử thêm có điều kiện”, phải chốt 4 điều:
- Thay đổi gì: thu hẹp phạm vi, chuẩn hóa quy tắc nghiệp vụ, làm sạch dữ liệu… Phải là biện pháp khác với lần trước
- Đo lại gì: chỉ đo lại các điều kiện bắt buộc đã trượt, không nới lỏng tiêu chí
- Đến khi nào: thời gian tối đa (VD: 4 tuần)
- Tốn tối đa bao nhiêu: giới hạn chi phí
Và chỉ được thử thêm 1 lần. Ở cổng quyết định lần 2, chỉ còn 2 lựa chọn: đi tiếp hoặc dừng.
“Dừng” không phải là thất bại. Biết được quy trình nào chưa phù hợp với AI và còn thiếu điều gì cũng là thông tin rất giá trị để chọn đúng quy trình cho lần tiếp theo. Bài 10 trường hợp doanh nghiệp không nên vội sử dụng AI Agent có thể giúp bạn ở bước này.
Kết luận
Câu hỏi thật sự của một PoC AI Agent không phải là “AI có thông minh không”, mà là doanh nghiệp có dám cam kết trước rằng “đạt điều kiện này thì triển khai thật” hay không.
Thiết kế cổng quyết định nghe có vẻ tốn công. Nhưng thực chất đó chính là việc đo hiện trạng, phân định việc nào giao cho AI và việc nào giữ cho con người, rồi xác định điểm hòa vốn. Làm tốt từ đầu thì buổi họp sau PoC chỉ cần vài chục phút để ra quyết định.
Hãy bắt đầu bằng một quy trình, và thử điền mục “3. Hiện trạng” trong bảng mẫu ở trên.
Thiết kế tiêu chí PoC cùng kỹ sư FDE của Synora
Dù bạn mới chọn được quy trình hay PoC đã chạy xong mà chưa ra quyết định, chúng tôi có thể cùng bạn rà soát hiện trạng và dữ liệu để thiết kế cổng quyết định phù hợp.
- Tiêu chí hiệu quả – vận hành – rủi ro
- Ngưỡng đạt và số lượng mẫu
- Chi phí khi chạy thật
Synora · FDE đồng hành từ PoC đến vận hành
Thiết kế tiêu chí PoC cùng kỹ sư FDE của Synora
Dù bạn mới chọn được quy trình hay PoC đã chạy xong mà chưa ra quyết định, chúng tôi có thể cùng bạn rà soát hiện trạng và dữ liệu để thiết kế cổng quyết định phù hợp.
- Tiêu chí hiệu quả – vận hành – rủi ro
- Ngưỡng đạt và số lượng mẫu
- Chi phí khi chạy thật
30 phút trao đổi · Không ràng buộc