ประเมินความปลอดภัยและประสิทธิผล

ตัวอย่างที่ 1 จากชั่วโมงบินทดสอบสู่ความน่าเชื่อถือ

บินทดสอบรวม 42 ชั่วโมง ล้มเหลวที่ต้องยกเลิกภารกิจ 2 ครั้ง ภารกิจตรวจคลองหนึ่งรอบใช้ราว 20 นาที (ข้อมูลสมมติ)

import math

T_HOURS, FAILURES, MISSION_MIN = 42.0, 2, 20
mtbf = T_HOURS / FAILURES
r_mission = math.exp(-(MISSION_MIN / 60) / mtbf)
print(f"MTBF {mtbf:.1f} h, reliability of one {MISSION_MIN}-min mission {r_mission:.3f}")
print(f"expected aborts in 100 missions: {100 * (1 - r_mission):.1f}")

for r_target, conf in ((0.95, 0.90), (0.95, 0.95), (0.99, 0.95)):
    n = math.ceil(math.log(1 - conf) / math.log(r_target))
    print(f"to show R >= {r_target} with {conf:.0%} confidence: {n} missions with zero failures")
print(f"30 missions with no failure -> failure rate below about {3 / 30:.0%} (rule of three)")

MTBF 21.0 h, reliability of one 20-min mission 0.984
expected aborts in 100 missions: 1.6
to show R >= 0.95 with 90% confidence: 45 missions with zero failures
to show R >= 0.95 with 95% confidence: 59 missions with zero failures
to show R >= 0.99 with 95% confidence: 299 missions with zero failures
30 missions with no failure -> failure rate below about 10% (rule of three)

ภารกิจละ 20 นาทีมีโอกาสสำเร็จราว 98% จากข้อมูลที่มี แต่ถ้าจะยืนยันว่า 95% ด้วยความเชื่อมั่น 90% ต้องบินสำเร็จโดยไม่ล้มเหลวเลย 45 รอบ ซึ่งเกินเวลาของโครงงาน จึงต้องรายงานระดับความเชื่อมั่นที่ข้อมูลรองรับได้จริง

ตัวอย่างที่ 2 SUS จากเจ้าหน้าที่ชลประทาน 5 คน และประสิทธิผล

import statistics as st

responses = [                      # 10 ข้อ ระดับ 1–5
    [4, 2, 4, 2, 4, 1, 4, 2, 3, 2],
    [5, 1, 4, 2, 4, 2, 5, 1, 4, 3],
    [3, 2, 3, 3, 4, 2, 4, 2, 3, 2],
    [4, 2, 4, 1, 4, 2, 4, 2, 4, 2],
    [4, 3, 3, 2, 3, 2, 4, 3, 3, 2],
]

def sus(r):
    return 2.5 * sum((v - 1) if i % 2 == 0 else (5 - v) for i, v in enumerate(r))

scores = [sus(r) for r in responses]
print("SUS per user:", scores, f"mean {st.mean(scores):.1f}, lowest {min(scores)}")

manual = {"minutes per round": 180, "people": 2}
drone = {"minutes per round": 45, "people": 2}
saved = manual["minutes per round"] * manual["people"] - drone["minutes per round"] * drone["people"]
print(f"staff time saved per 2 km round: {saved} person-minutes ({saved / (manual['minutes per round'] * manual['people']):.0%})")

SUS per user: [75.0, 82.5, 65.0, 77.5, 62.5] mean 72.5, lowest 62.5
staff time saved per 2 km round: 270 person-minutes (75%)

ค่าเฉลี่ยสูงกว่าค่าเฉลี่ยอ้างอิงเล็กน้อย แต่ผู้ใช้สองคนต่ำกว่า 68 ควรสัมภาษณ์ว่าติดตรงไหน ห้าคนยังเป็นตัวอย่างน้อย และผลประหยัดเวลาต้องบอกด้วยว่าไม่รวมเวลาเตรียมเอกสารขออนุญาตบินและเวลาตรวจรายงาน