แบ่งชุดข้อมูลออกเป็นกลุ่มย่อยแล้วกลุ่มย่อยจนกว่าจะมีโอกาส p < 0.05 จากนั้นดูตัวอย่างใหม่เพื่อตัดสินใจว่าสิ่งที่คุณค้นพบนั้นเป็นจริงหรือบังเอิญ
การรักษาไม่มีผลที่แท้จริง ดังนั้นสิ่งสำคัญที่คุณพบคือเสียงรบกวน กรองข้อมูลออกเป็นกลุ่มย่อยและทำการทดสอบซ้ำหลาย ๆ ครั้งเท่าที่จะทำได้จนได้ค่า p ต่ำกว่า 0.05 จากนั้นส่ง 'สิ่งที่พบ' ของคุณไปให้ผู้ตัดสิน จุดหักเห: การตรวจสอบการจำลองจะดึงตัวอย่างอิสระใหม่และทดสอบการกล่าวอ้างที่ถูกต้องของคุณอีกครั้ง เอฟเฟกต์ที่แท้จริงยังคงอยู่ p-hacks หายไป และช่องว่างนั้นคือบทเรียนทั้งหมด
Cherry Picker เป็นเรื่องเกี่ยวกับ p-hacking การเปรียบเทียบหลายรายการ และเหตุใดการจำลองจึงมีความสำคัญ — ความสมบูรณ์ของสถิติ
การกรองเป็นกลุ่มย่อยแล้วรันการทดสอบซ้ำจนกว่าจะมีบางอย่างออกมามีนัยสำคัญ คือการขุดข้อมูลแบบลากอวน หรือ p-hacking: การทดสอบหลายครั้งแล้วรายงานเฉพาะที่ออกมามีนัยสำคัญ
การออกแบบที่เป็นต้นฉบับคือการรักษาไม่มีผลจริง ดังนั้นทุกผลลัพธ์ที่คุณพบจึงเป็นสัญญาณรบกวนโดยการสร้าง
นั่นคือวิธีเดียวที่ซื่อตรงในการสอนเรื่องนี้ เมื่อเล่าอย่างนามธรรม p-hacking ฟังดูเหมือนการโกงที่คนรอบคอบจะไม่มีวันทำ แต่การทำมันกับข้อมูลที่รับประกันว่าว่างเปล่าแสดงให้เห็นว่านัยสำคัญปรากฏขึ้นง่ายเพียงใด และนี่คือปัญหาการเปรียบเทียบพหุคูณ ไม่ใช่ข้อบกพร่องของนิสัย
Cherry Picker เป็นเกมสถิติเกี่ยวกับการแฮ็กข้อมูล การเปรียบเทียบหลายรายการ และเหตุใดการจำลองจึงมีความสำคัญ เป็นเกมเบราว์เซอร์ต้นฉบับฟรีที่สร้างขึ้นสำหรับ PlayPendium