工作坊流程:用一份共享資料包拼出 PEC 計分卡
PEC3.0 研究陪跑工作坊用同一份去識別的西醫 PGY 練習包,走三輪:先把計畫拼成一張計分卡(Input),再把計分卡做成儀表板並寫出洞察(Insight),最後從紅燈提出介入(Intervention/Outcome)。這一頁說明三輪怎麼進行、資料包目前能支援 PEC 七項的哪些項目,以及解讀數字時必須記得的口徑。
1. 三輪流程
第一輪|Input:拼出計分卡
同桌五人分攤 PEC 簡報模板的七項,每人用 AI 助理深挖自己負責的項目:找證據、定義一個可逐年重算的指標(要有分子、分母)、依判準給燈號。最後拼成涵蓋整個計畫的一張計分卡。
觀察重點:資料的有無——是沒做,還是做了沒記錄?灰燈本身就是發現。
第二輪|Insight:做成儀表板
每人用同一張計分卡產生單檔 HTML 儀表板(資料內嵌、不外連、不含任何個人代碼),先看全貌再看最需要處理的一項,寫三句洞察,並核對儀表板與計分卡數字一致。
觀察重點:資料的品質與意義——來源、分母、口徑可信嗎?
第三輪|Intervention/Outcome:從紅燈到精進專案
從紅燈提出介入,用優先矩陣在影響、投入、急迫與資料把握之間取捨,寫成一頁 PDCA;成效指標就是計分卡上的某一列,明年用同一份資料包重算。
觀察重點:介入的輕重緩急;資料不足時,第一步可能是「先補資料」。
三輪是同一份產出的三個階段:第一輪的計分卡是第二輪儀表板的資料,也是第三輪成效指標的來源。各組以 T、W 或 S 其中一個院區為主軸,其他院區只當參考值、不排名;收斂時把三個院區的計分卡並排,檢驗同一個指標是否三處都算得出來。
2. 練習包是什麼
| 項目 | 內容 |
|---|---|
| 範圍 | 西醫 PGY 共同訓練;495 位學員(匿名碼);三個院區(T、W、S);111–114 學年;10,453 筆評量(Mini-CEX/DOPS/CbD/360)。 |
| 工作表 | 更新後的工作坊版共 36 張工作表:原有 13 張核心表,加上 W、S 兩院的計畫書對照表(7b、7c),以及只有 T 院才有的 21 張在地補充表(L 開頭)。 |
| 去識別 | 只用共享版:沒有姓名、沒有評語原文,只有匿名碼與 AI 編碼;聚合人數少於 5 顯示「<5」。 |
| 兩種評量來源 | WBA 表單(各學年都有,114 學年的唯一來源)與 PGY360(只有 111–113 學年、沒有日期、沒有表單類別)。兩者性質不同,不能不加區分地合算。 |
3. 資料可行性:PEC 七項能不能算
下表只回答「資料包裡有沒有可重算的證據」,不呈現任何指標數值。「有」=四個學年都有;「部分」=只有部分學年或口徑受限;「無」=資料包沒有。
| PEC 項目 | 主要工作表 | T | W | S | 需要注意 |
|---|---|---|---|---|---|
| 一 計畫完整性 | 計畫對照、PEC 查檢 | 有 | 部分 | 部分 | T 有完整的計畫書對照(7);W 的對照表(7b)依較舊的 111 學年版計畫書、S 的對照表(7c)只涵蓋部分科別,許多列沒有資料證據,應判讀為「需補資料」。 |
| 二 課程執行 | 課程活動 | 部分 | 部分 | 無 | 課次登錄的起訖學年因院區而異;沒有登錄不等於沒有開課。 |
| 三 教師表現 | 教師、評量表單 | 有 | 有 | 有 | 以「有評量紀錄的教師人數」及師生比為代理;不是教師績效。 |
| 四 學員表現 | 評量表單 | 部分 | 部分 | 部分 | 114 學年只有 WBA 來源且資料到 2026 年 7 月;111–113 學年的 360 不應混入「每位學員 WBA 件數」。 |
| 五 教學成效 | 評量表單、題項(AI 編碼) | 部分 | 部分 | 部分 | 評語編碼只存在 360 來源(111–113 學年);114 學年沒有編碼;編碼由模型產生。 |
| 六 輔導補救 | 困難學員 | 部分 | 部分 | 部分 | 只含「有困難訊號」的列,沒有輔導結案或改善紀錄;只能描述,不能判斷成效。主口徑的分子與分母都只用 WBA;含 360 的全來源口徑只作敏感度分析。 |
| 七 人員留任 | (無) | 無 | 無 | 無 | 資料包沒有留任或完訓追蹤表,需由科部另填。 |
4. 解讀時請記得
- 日期是表單觀察日期,不是回饋文字的填寫日期;360 來源沒有日期,只能以學年度歸屬。
- 困難學員表只含困難訊號列:占比由選樣決定,不能當成盛行率;兩種來源的列不可直接比較。
- 叢集(軌跡分群)是規則式的描述,不是從資料中發現的類別。
- 評語編碼由模型產生,信度中等;應視為「模型標記的分布」,不是已人工確認的事實。
- 分母口徑要先講清楚:360 來源且沒有任何 WBA 的學員,若被算進分母,會拉低「每位學員 WBA 件數」;111–113 與 114 學年的來源組成也不同,跨年比較時要標明。
- 資料包會更新:這份 36 張表的版本比先前公布的 13 張版本多了工作表,也補了部分列;所有數字請以你手上資料包的版本重算,不要沿用舊版示範數字。
- 各院區的差異可能來自表單預設值與匯出流程,而非教學本身;只作描述,不作排名或因果解讀。
- 114 學年資料只到 2026 年 7 月,不是整學年。
5. 為什麼這跟模擬教室有關
計分卡每一列都要有分子、分母與可重算的來源,這和模擬教室要求的「可複核」是同一件事。工作坊裡暴露出的資料缺口(沒有原文、沒有成效追蹤、評語編碼未經人工複核)正是發現缺口一頁所描述的缺口,也是實驗設計想在模擬環境中先行檢驗的問題。