Performance ad variations, lặp lại được

Tài liệu PAM ghi rõ: Playbook re-adapt mỗi lần chạy, không đảm bảo tái tạo y hệt 100%. Hứa hẹn "chạy lại ra kết quả giống hệt" là hứa sai với chính công cụ. Nên câu hỏi phải đổi: nếu nền tảng cố tình không tất định, thì playbook đóng góp gì?

Hai lần chạy có đối chứng cho câu trả lời — và nó không phải câu trả lời được kỳ vọng ban đầu.

Ở Run A (chưa lưu playbook), agent tự đi thẳng, không hỏi về logo — lỗi chỉ lộ ra ở bước Final touches, khi đã render xong và phải vá thủ công. Ở Run B (playbook đã lưu và bật), agent nạp playbook rồi chủ động hỏi trước: "Bạn muốn dùng phiên bản logo VinUni nào?"

Cùng một rủi ro, hai thời điểm phát hiện khác nhau: một bên là vá sau khi hỏng, một bên là câu hỏi năm giây. Với hệ thống không thể tất định hoá, đó có lẽ là định nghĩa thực tế nhất của "reliable".

Prerequisites — thiết lập một lần cho Brand

Mục	Yêu cầu	Cách xác minh
Logo đã upload & parse	Đủ biến thể cần dùng	Brand Assets → Reusable Elements có Design Element riêng
Ảnh nền / hero đã parse	Layer tách được rõ	Kiểm Design Element
Nội dung asset khớp tên file	Mở từng Design Element xem bằng mắt	Không tin tên file — xem mục lỗi F-C1
Guideline màu / typography	Palette + font đã nhập	Customize → Brand Guidelines
QC checklist	Đã điền tiêu chí bám brand	Settings → QC Check list
Quyền người chạy	≥ Editor	Settings → Team

Campaign Input Sheet — điền mỗi chiến dịch

Trường	Ghi chú
hero_asset_id	ID Design Element đã xác minh bằng mắt — không mô tả bằng lời
logo_asset_id	Ghi rõ biến thể nào, kèm mô tả nội dung thật
angle	Học bổng · Tính năng · Khan hiếm
headline	Viết sẵn nguyên văn, kèm giới hạn ký tự
cta	Tách riêng khỏi headline — không lặp cụm từ
ratios[]	Chọn từ 11 preset có thật của PAM
model	Cố định toàn batch, không đổi giữa chừng

Guardrails — bất biến

✕	Hình người nổi tiếng có thật — hard wall, không ngoại lệ
✕	Mô tả sản phẩm/logo bằng lời khi đã có layer parsed
✕	Nhồi toàn bộ reference — chỉ chọn có chủ đích
✕	Để Mode ở Auto trong batch chính thức
✕	Đổi model giữa các creative trong cùng batch
✕	Bịa số liệu, thứ hạng, giải thưởng ngoài tài liệu nguồn

Playbook này không cố ép PAM tất định. Nó khoanh vùng chỗ nào biến thiên là rủi ro và khoá chặt; chỗ nào biến thiên là giá trị thì để mở. Đây là trục thiết kế chi phối toàn bộ tám bước.

Tám bước, mỗi bước có một gate phải thoả mới đi tiếp. Các gate in đỏ là những gate được thêm vào sau khi chạy thật và gặp lỗi.

Definition of Done

01	Đúng kích thước yêu cầu
02	Logo đúng biến thể, xuất hiện đúng một lần, không méo, không bị đè
03	Hero là layer đã parse và đã xác minh nội dung
04	Headline đúng chính tả, đủ dấu tiếng Việt
05	Không lặp cụm từ giữa headline và CTA
06	Không chứa vật thể lạ ngoài phạm vi quảng cáo
07	Copy nằm trong safe-zone kênh đích
08	Màu trong palette brand
09	Đã qua Enhance, có version ghi nhận

Quy ước đặt tên · {brand}_{campaign}_{angle}_{ratio}_{lang}_v{n}

Đây là so sánh sạch nhất chứng minh playbook có tác dụng nhân quả, không phải trùng hợp.

Slot ở Final touches	Run A — chưa có playbook	Run B — playbook đã lưu
Brand logo	✕ "No logo — add one"	✓ "Sharpen & cleanly integrate"
Hero product	✓ Có — nhờ đính kèm asset	✕ "No product — add one"
Bước dò playbook	"No playbook matched"	"Ran Load playbook"
Xử lý logo	Tự đi thẳng, không hỏi	Chủ động hỏi biến thể logo

Cách đọc: ô logo đảo từ lỗi sang đạt, với biến số duy nhất thay đổi là playbook — đây là bằng chứng nhân quả. Ô hero đảo ngược lại, nhưng là hệ quả trực tiếp của sai lệch input đã khai báo (picker attach lỗi nên Run B chạy text-only). Hai ô đảo chiều theo đúng hai nguyên nhân đã biết, thí nghiệm không bị nhiễu.

Lưu ý về tính hợp lệ: Run B không phải phép đo variance thuần tuý. Nó trả lời một câu hỏi khác — playbook đã lưu có bù đắp được phần input thiếu không. Cần nói rõ điều này thay vì trình bày B như bản lặp lại y hệt của A.

Mỗi lỗi được phân loại theo câu hỏi cốt lõi: biến số này thuộc nhóm khoá cứng hay thả tự do? Nếu khoá mà vẫn trôi, đó là lỗ hổng thật của playbook. Nếu thả mà "lỗi", cần xét lại có thực sự là lỗi không.

Rubric v1 chấm bảy creative và cho 49/49 tiêu chí đạt. Đọc đúng, đây không phải thành công — đây là tín hiệu thang đo bị bão hoà. Một thước đo không làm trượt được gì thì không đo được gì.

Vấn đề của v1	Hệ quả
Toàn bộ tiêu chí nhị phân	Không phân biệt được "vừa đủ đạt" với "xuất sắc"
Ngưỡng ở mức tối thiểu	"Logo có hiện diện không" — không hỏi hiện diện mấy lần
Không có tiêu chí so sánh	Mọi mẫu tồn tại độc lập, không ai thua ai
Không chống thiên kiến	Người chấm chính là người làm ra sản phẩm

v1 bỏ sót cả hai lỗi nghiêm trọng nhất — tai nghe và trùng logo — vì không có tiêu chí nào hỏi đến chúng.

v2 — ba lớp, mỗi lớp một vai trò

Lớp	Vai trò	Cơ chế
LỚP 0	Hard gates — nhị phân	Trượt một mục = loại thẳng, không chấm tiếp. Tám gate, trong đó G8 "không chứa vật thể lạ" là gate thêm sau F-C1.
LỚP 1	Chất lượng có thang 1–5	Bảy tiêu chí, mốc neo cụ thể ở mức 1/3/5. Q1 khả năng đọc ở kích thước thật nhân đôi trọng số.
LỚP 2	Xếp hạng bắt buộc	Cấm hoà. Bắt buộc viết một câu về tấm hạng nhất và một câu về tấm hạng cuối.

Kết quả chấm bằng v2

Chỉ số chẩn đoán rubric	Giá trị	Kết luận
Tỷ lệ ô đạt điểm tối đa	14%	Không bão hoà (ngưỡng ≤ 40%)
Tỷ lệ trượt gate	17%	Rubric đã có khả năng làm trượt
Độ phân tán điểm	chưa đủ	Mới chấm đầy đủ 1 creative ở Lightbox

v2 cũng có lỗ hổng — ba lần, ba kiểu khác nhau.

Lộ ra khi	Thiếu gì	Loại lỗ hổng
Áp vào batch 1	Gate G8 — vật thể lạ	Thiếu tiêu chí. Tai nghe lọt qua vì không ai nghĩ phải hỏi.
Áp vào batch 1	Q8 — lặp cụm từ headline/CTA	Thiếu tiêu chí.
Áp vào batch 2	visual_vocabulary	Thiếu ngữ cảnh. Rubric ngầm giả định người chấm thuộc ngôn ngữ thị giác của brand — giả định mâu thuẫn với mục đích của playbook là giao cho người khác chạy.

Hai lỗ hổng đầu sửa bằng cách thêm dòng vào rubric. Lỗ hổng thứ ba thì không — nó phải sửa ở đầu vào, bằng cách yêu cầu brand khai báo trước các phần tử trang trí cố ý. Đây là loại lỗi mà thêm bao nhiêu tiêu chí cũng không giải quyết được.

Framework đánh giá cũng phải được đánh giá — và mỗi lần áp vào dữ liệu thật lại lộ thêm một chỗ hở.

Hạng	Creative	Lý do
01	2:1	Tỷ lệ gần bố cục gốc nhất, khoảng thở tốt nhất. Chỉ mắc lỗi trùng logo.
02	4:5	Sạch, dọc vừa phải, campus còn nhận diện được.
03	3:4	Tương đương 4:5, hơi chật hơn.
04	6:5	Diện tích nhỏ khiến chữ co lại rõ rệt.
05	1:1 Run B	Typography và bố cục tốt nhất batch — nhưng có tai nghe, không dùng được.
06	8:1	Dồn nén nặng nhất, khả năng đọc kém nhất.

Đáng chú ý: creative có lỗi nội dung nặng nhất (1:1 Run B) lại không bị xếp cuối, vì lỗi đó sửa được bằng cách đổi asset. Giới hạn của 8:1 là giới hạn cấu trúc.

Câu hỏi cần trả lời: playbook chỉ hợp với đúng một bộ input, hay dùng lại được? Run C đổi angle sang Trải nghiệm quốc tế, headline khác, CTA khác — và chạy sau khi playbook đã được vá bằng chín lỗi của Run A và B.

Playbook can thiệp vào hành vi agent lần thứ hai

Agent mở đầu Run C bằng câu chưa từng xuất hiện ở Run A:

Guardrail xác minh asset được thêm vào playbook sau khi gặp lỗi tai nghe — và agent tự nêu lý do là "playbook yêu cầu". Vòng lặp sửa lỗi khép kín: gặp lỗi → viết vào playbook → lần chạy sau agent tự chặn.

Cách chặn asset nhiễm mà không cần xoá gì

Câu hỏi làm rõ của PAM có ô "Pick an option above, or type your own answer…". Thay vì bấm chip mù, trả lời bằng chữ nêu đích danh asset bị nhiễm. Agent phản hồi:

Giải pháp tốt hơn dự kiến: không cần xoá asset, không cần sửa thư viện — chỉ cần nói rõ, agent tự chọn đường vòng an toàn.

Batch 2 — kết quả sau khi vá

Hạng mục	Batch 1 · Học Bổng	Batch 2 · Trải nghiệm quốc tế
Số creative	7	7
Nguồn logo	Asset nhiễm → tai nghe	Typography — không dùng asset
Số lần logo xuất hiện	Hai lần trên bản resize	Đúng một lần, nhất quán mọi tỷ lệ
Vật thể lạ	Tai nghe	Không còn
Dấu tiếng Việt	Sạch	Sạch, line-height thoáng
Hard gate (8 mục)	Trượt G8 — vật thể lạ	Qua toàn bộ 8/8
CTA	Lặp cụm từ với headline	Tách riêng — "Tìm hiểu ngay"
Số Directions nhận được	4	3
Playbook được nạp	Không (chưa tồn tại)	Có — agent tự khớp

F-C4: số lượng Directions không cố định — Run A và B cho 4 layout, Run C cho 3. Playbook không nên giả định luôn có 4 lựa chọn.

Đề xuất	Xuất phát từ
Cảnh báo trùng tên Design Element	F-C1 — ba asset cùng tên VINUNI_LOGO-FULL- với nội dung khác hẳn nhau, không có gì phân biệt trong UI
Sinh QC checklist mặc định từ Brand Guidelines	F-A2 — template hiện tại là checklist an toàn giao thông, không liên quan brand nào
Cho @-mention hoạt động khi gõ trực tiếp	F-A3 — docs mô tả @-mention nhưng UI chỉ nhận qua nút Attach
Cảnh báo khi thêm logo vào ảnh đã có logo	F-C2 — lệnh "thêm logo" tạo ra logo thứ hai mà không cảnh báo gì
Giữ pin mode qua session	F-B1 — hoặc ít nhất hiển thị rõ mode đã reset về Auto
Sửa nút Replace ở slot Brand logo	Bấm Replace mở nhầm modal "Select place images" — picker địa điểm, sai ngữ cảnh
Version history cho video	Video hiện không resize và không version được, kém linh hoạt hơn hẳn ảnh