วิจัย
ปรับเทียบข้อกล่าวอ้างทางวิทยาศาสตร์กับหลักฐาน
บันทึกที่ปรับเทียบแล้ว โดยเชื่อมแต่ละข้อสรุปกับรูปแบบการศึกษา ขนาดอิทธิพล ความไม่แน่นอน และข้อจำกัด เพื่อไม่นำเสนอผลแรงเกินหลักฐาน
กระบวนการ
ทำตามลำดับนี้
- ระบุข้อกล่าวอ้างแต่ละข้อ ผู้รับที่ตั้งใจ ประชากรและบริบท ปริมาณที่ประมาณ การออกแบบการศึกษา วันตัดข้อมูล และความแรงของภาษาที่คำถามอนุญาต
- สกัดการประมาณอิทธิพล ช่วงหรือความไม่แน่นอน ขนาดตัวอย่างและข้อมูลที่หายไป ภาวะพหูพจน์ การตรวจความทนทาน และผลลบหรือขัดแย้งที่เกี่ยวข้อง
- ประเมินตัวแปรกวน การวัด การเลือก การรายงาน และข้อจำกัดของการออกแบบ โดยแยกข้อสรุปเชิงเหตุผล เชิงบรรยาย สำรวจ และสมมติฐาน
- กำหนดระดับภาษาที่ปรับเทียบแล้ว เช่น สังเกต ประมาณ มีหลักฐานสนับสนุน เป็นเบาะแส ยังไม่ได้ข้อสรุป หรือถูกหักล้าง และระบุว่าหลักฐานใดจะเปลี่ยนระดับนั้น
- ตรวจสอบแหล่งหลัก โค้ดการวิเคราะห์ การทำซ้ำอิสระ หรือผู้ตรวจที่มีคุณสมบัติเมื่อมี โดยรักษาความไม่แน่นอนแทนการลบด้วยการเฉลี่ย
- เขียนตารางข้อกล่าวอ้างกับหลักฐานพร้อมการอ้างอิง วันที่ ความมั่นใจ คำอธิบายทางเลือก ข้อจำกัด และขอบเขตชัดเจนของสิ่งที่การศึกษาไม่ได้ทดสอบ
- ส่งบันทึกที่ปรับเทียบแล้ว หลักฐาน เหตุผลของความมั่นใจ ความเสี่ยงที่ยังไม่ได้แก้ไข และเจ้าของการทบทวน และหยุดก่อนใช้ผลกับการตัดสินใจที่มีผลกระทบหรือข้อกล่าวอ้างสาธารณะ
เตรียมสิ่งนี้
ข้อมูลที่แมวจะขอ
- ข้อกล่าวอ้างร่างและผู้รับที่ตั้งใจ
- การออกแบบการศึกษา ข้อมูล และการวิเคราะห์
- การประมาณอิทธิพลและความไม่แน่นอน
- บริบทการตัดสินใจและเกณฑ์การทบทวน
เราเตอร์ + playbook เดียว
จัดเส้นทางก่อน เลือกอันเดียว
Cat Paw โหลด playbook เดียวต่องาน ไม่ผสมหลายอัน เริ่มที่เราเตอร์นี้ เส้นทางที่เหลือเป็นตัวเลือกเฉพาะ workflow
- เราเตอร์:
scientific-research-pack skills/scientific-research-pack/scientific-result-claim-calibration/SKILL.md
เส้นเขต
ขอบเขตเดินทางไปกับพรอมต์
- ก่อนเริ่ม ให้ตรวจสอบเครื่องมือ บัญชี สิทธิ์ และพื้นที่ทำงานจริง ห้ามอ้างว่ามีเครื่องมือ บัญชี แหล่งข้อมูล หรือความสามารถที่ไม่พร้อมใช้งาน
- ใช้ Latch/target-workspace สำหรับโค้ดส่วนตัว ผลงาน การตรวจสอบสด หรือข้อมูลที่ไม่เป็นสาธารณะ หากไม่มีสิทธิ์เข้าถึง ให้หยุดที่ขอบเขตและรายงานสิ่งกีดขัด แทนการเดา
- หยุดเพื่อขออนุมัติอย่างชัดเจนก่อนการดำเนินการภายนอกที่มีผลกระทบ แล้วส่งกลับหลักฐาน ความเสี่ยงที่ยังไม่ได้แก้ไข สมมติฐาน และการดำเนินการใดที่ยังรอการอนุมัติ
เสร็จหมายถึง
จุดจบที่ตรวจได้
บันทึกข้อกล่าวอ้างกับหลักฐานปรับเทียบข้อสรุปสำคัญแต่ละข้อกับการออกแบบ การประมาณ ความไม่แน่นอน ข้อจำกัด การอ้างอิง ความมั่นใจ และความเสี่ยงที่ยังไม่ได้แก้ไข โดยไม่กล่าวเกินกว่าหลักฐานว่าเป็นเหตุผล
แหล่งที่มา
กระบวนการนี้มาจากไหน
- github.com/K-Dense-AI/scientific-agent-skills/tree/49c6e97775eaa18ba791bebe23162a70ae601c18/
- www.amstat.org/asa/files/pdfs/P-ValueStatement.pdf
- www.equator-network.org/reporting-guidelines/
แหล่งที่มาตั้งรูปแบบของ workflow โพสต์ Reddit และชุมชน ถ้ามี ให้ถือเป็นเรื่องเล่าจากผู้ปฏิบัติ ไม่ใช่ข้อเท็จจริงสากล
