Variants และการเปรียบเทียบแบบ blind

บรีฟเดียว หลายทิศพร้อมกัน Variants ส่งบรีฟเดียวกันเข้าเลนที่มีตัวอักษร — Option A, B, C — แต่ละอันสร้างขนานกันในโปรเจกต์ แล้ว blind compare จับผลลัพธ์มาประชันหน้ากันโดยไม่บอกว่าอันไหนเป็นอันไหน และคุณเลือก ตัวชนะด้วยตา ไม่ใช่ด้วยการรันที่คุณชอบไอเดียของมัน

ตั้งเลน

เลือกจำนวนเลนตอนสร้างโปรเจกต์ (หรือเพิ่ม variant ให้การรันที่มีอยู่) — สองถึง สี่เลนคือช่วงใช้งาน แต่ละเลนเป็นการสร้างอิสระของบรีฟเดียวกันบนเทมเพลตเดียวกัน ความต่างในผลลัพธ์จึงเป็นความต่างจริงของทิศ ไม่ใช่ noise

เลน variant — แถบที่มีตัวอักษรสร้างข้างกันในโปรเจกต์

ส่วนท้ายรายงานยอดรวมของชุด — เช่น "Set total: 3 runs · 124.5k tokens" — ต้นทุน ของการสำรวจจึงมองเห็นได้ขณะเลนทำงาน

Blind compare

เมื่อเลนพร้อม Compare side by side เปิดมุมมองตัดสิน: สองบานนิรนามต่อคู่ เลนสลับ และตัวนับคู่ ("pair 1 of 6") ตัดสินแต่ละคู่:

  • ← Left is better / Right is better → — คำตัดสิน; แล้วเลือกชิปเหตุผล ("stronger hierarchy", "better color") แล้ว Record
  • Tie — เท่ากัน; ข้ามขั้นเหตุผล
  • Skip — ตัดสินไม่ได้; คู่นั้นไม่นับ
blind compare — สองผลลัพธ์นิรนาม ตัวควบคุมการตัดสิน และคำใบ้ "Which is closer?"

คีย์บอร์ดตรงกัน: ← / → สำหรับคำตัดสิน T สำหรับเสมอ S สำหรับข้าม Esc ออกจากรอบ ชื่อ blind คงซ่อนจนตัดสินเสร็จ — คุณจัดอันดับสิ่งที่เห็น ไม่ใช่เลนที่คุณคาดว่าจะชนะ

Tip: ตัดสินที่ทิศ ไม่ใช่ความขัดเกลา — ทุกเลนเป็นร่างหยาบของบรีฟเดียวกัน เลนที่รู้สึกถูกจะถูกเลื่อนและขัดเกลา; การสร้างที่สวยกว่าของทิศที่ผิดก็ยังเป็น ทิศที่ผิด

ผลลัพธ์และการเลื่อน

เมื่อรอบเสร็จ การ์ด result ประกาศตัวชนะ — หรือ เมื่อคะแนนนำเท่ากัน tiebreak ให้คุณตัดสินระหว่างเลนที่เสมอ Promote as is ทำให้ตัวชนะเป็น ผลลัพธ์หลักของโปรเจกต์และทำเครื่องหมายเลนของมันด้วย ★ บนแถบ; การ์ดการตัดสิน ลงใน transcript ("Promoted — Option B") และเลนอื่นอยู่บนแถบไว้อ้างอิง

ทุกเลนในหนึ่งเดียว — มุมมองกริดของชุดหลังการเปรียบเทียบ

แถบเลน

variant strip บนโปรเจกต์ติดตามเลน — Main แล้ว A / B / C — พร้อม สัญลักษณ์สถานะ (กำลังสร้าง พร้อม เลื่อน ★) ก้าวระหว่างเลนด้วย [ และ ] กระโดดด้วย 0 (main) และ 1–4 (ตัวอักษร) หรือคลิกเซกเมนต์ toggle All สลับมุมมองเลนเดียวเป็นกริดของทุกเลนพร้อมกัน

เลนคืออะไร

แต่ละเลนคือการสร้างเต็มรูปแบบ: ไฟล์ของมันเอง การรันเกตของมันเอง transcript ของมันเอง พวกมันสร้างถูก — ประเด็นของ variants คือสามทิศหยาบ ๆ ต้นทุนน้อยกว่า บรีฟเดียวที่ spec เกินและพยายามเดาทิศที่ถูก

สองเลนสร้าง blind compare ตัดสิน ตัวชนะถูกเลื่อน

ใช้เมื่อไหร่

  • ต้นโปรเจกต์ เมื่อทิศยังไม่ตกลง
  • เมื่อสองไอเดียแข่งกันในบรีฟสมควรสู้ยุติธรรม
  • ก่อนรอบสุดท้าย — เลื่อนตัวชนะ แล้วรัน Council บนมัน

ข้ามมันสำหรับการตามหลังและการแก้ — variants ตอบ "ทิศไหน?" ไม่ใช่ "อันนี้ถูก ไหม?"

ที่เกี่ยวข้อง