軟件測試管理

第1章 軟件測試基礎(chǔ) 1
1.1 簡介 1
1.2 軟件開發(fā)生命周期中的測試 1
1.2.1 軟件開發(fā)生命周期模型 2
1.2.1.1 順序模型 2
1.2.1.2 增量迭代模型 6
1.2.1.3 模型中的測試 12
1.2.2 軟件測試級(jí)別 13
1.2.2.1 組件測試 13
1.2.2.2 集成測試 17
1.2.2.3 系統(tǒng)測試 22
1.2.2.4 驗(yàn)收測試 23
1.2.2.5 維護(hù)測試 25
1.3 特定系統(tǒng) 26
1.3.1 綜合系統(tǒng) 26
1.3.2 安全關(guān)鍵系統(tǒng) 29
1.4 度量和測度 34
1.4.1 測度的意義和要求 36
1.4.1.1 測度的意義 36
1.4.1.2 測度的要求 40
1.4.2 基本過程 42
1.4.2.1 確立和維持測度承諾 44
1.4.2.2 計(jì)劃測度過程 45
1.4.2.3 實(shí)施測度過程 47
1.4.2.4 評(píng)估測度 48
1.4.3 度量數(shù)據(jù)應(yīng)用 49
1.4.3.1 案例分析：測試用例設(shè)計(jì)進(jìn)度 49
1.4.3.2 案例分析：測試用例執(zhí)行進(jìn)度 50
1.4.3.3 案例分析：測試的充分性 51
1.4.3.4 案例分析：產(chǎn)品發(fā)布準(zhǔn)則 53
1.5 道德規(guī)范 55
1.6 小結(jié) 55
第2章 測試過程 57
2.1 簡介 57
2.2 測試過程模型 58
2.3 測試計(jì)劃和控制 59
2.3.1 主要活動(dòng) 59
2.3.2 測試計(jì)劃 64
2.3.3 測試執(zhí)行進(jìn)度 64
2.3.4 階段度量指標(biāo) 65
2.4 測試分析和設(shè)計(jì) 66
2.4.1 主要活動(dòng) 67
2.4.2 階段度量指標(biāo) 68
2.5 測試實(shí)現(xiàn)和執(zhí)行 68
2.5.1 主要活動(dòng) 69
2.5.2 測試實(shí)現(xiàn) 71
2.5.2.1 測試規(guī)程規(guī)格說明 71
2.5.2.2 測試環(huán)境搭建 71
2.5.2.3 測試執(zhí)行準(zhǔn)備 75
2.5.3 測試執(zhí)行 77
2.5.3.1 入口準(zhǔn)則 78
2.5.3.2 測試結(jié)果比較 78
2.5.3.3 測試日志 79
2.5.3.4 確認(rèn)測試和回歸測試 79
2.5.4 階段度量指標(biāo) 80
2.6 評(píng)估出口準(zhǔn)則和報(bào)告 81
2.6.1 主要活動(dòng) 81
2.6.2 評(píng)估出口準(zhǔn)則 82
2.6.3 測試報(bào)告 83
2.6.4 階段度量指標(biāo) 83
2.7 測試結(jié)束活動(dòng) 84
2.7.1 主要活動(dòng) 84
2.7.2 數(shù)據(jù)收集和分析 86
2.7.3 經(jīng)驗(yàn)總結(jié)報(bào)告 86
2.8 小結(jié) 89
第3章 測試管理 90
3.1 簡介 90
3.2 測試管理文檔 93
3.2.1 測試方針 94
3.2.2 測試策略 95
3.2.3 主測試計(jì)劃 96
3.2.3.1 介紹 97
3.2.3.2 詳細(xì)內(nèi)容 99
3.2.3.3 其他 101
3.2.4 級(jí)別測試計(jì)劃 106
3.2.4.1 測試項(xiàng)和不測試項(xiàng) 107
3.4.2.2 測試的質(zhì)量屬性 107
3.2.4.3 測試時(shí)間進(jìn)度 109
3.2.4.4 測試準(zhǔn)則定義 110
3.2.4.5 測試風(fēng)險(xiǎn) 112
3.2.4.6 測試文檔輸出 113
3.2.4.7 角色和職責(zé) 114
3.2.5 級(jí)別測試設(shè)計(jì)規(guī)格說明 115
3.2.6 級(jí)別測試用例規(guī)格說明 116
3.2.7 級(jí)別測試規(guī)程規(guī)格說明 117
3.2.8 級(jí)別測試日志 118
3.2.9 異常報(bào)告 119
3.2.10 級(jí)別測試報(bào)告 121
3.2.11 主測試報(bào)告 122
3.3 測試計(jì)劃裁減 123
3.4 測試估算 124
3.4.1 影響因素 127
3.4.2 基于百分比的方法 130
3.4.3 基于專家團(tuán)隊(duì)的方法 131
3.4.4 基于類似項(xiàng)目的方法 132
3.4.5 基于工作分解結(jié)構(gòu)的方法 133
3.5 測試計(jì)劃制定 134
3.5.1 盡早制定測試計(jì)劃 134
3.5.2 測試計(jì)劃的迭代 137
3.6 測試過程監(jiān)控 139
3.6.1 風(fēng)險(xiǎn) 140
3.6.2 測試 143
3.6.2.1 案例分析：測試用例設(shè)計(jì)進(jìn)度 144
3.6.2.2 案例分析：測試用例設(shè)執(zhí)行進(jìn)度 145
3.6.3 覆蓋率 147
3.6.3.1 案例分析：基于需求的測試覆蓋率 147
3.3.6.2 案例分析：基于平臺(tái)的測試覆蓋率 148
3.6.4 缺陷 149
3.6.4.1 案例分析：缺陷發(fā)現(xiàn)階段分布 149
3.6.4.2 案例分析：缺陷所屬模塊分布 150
3.6.4.3 案例分析：發(fā)現(xiàn)缺陷的測試類型分布 151
3.6.5 信心 152
3.6.5.1 案例分析：測試發(fā)現(xiàn)缺陷狀態(tài)變化 152
3.6.5.2 案例分析：測試用例通過率 153
3.7 測試商業(yè)價(jià)值 154
3.7.1 預(yù)防成本 155
3.7.2 檢測成本 155
3.7.3 內(nèi)部失效成本 156
3.7.4 外部失效成本 156
3.8 分布式測試、外包測試和內(nèi)包測試 161
3.8.1 分布式測試 161
3.8.2 外包測試 162
3.8.3 內(nèi)包測試 163
3.8.4 風(fēng)險(xiǎn) 164
3.9 基于風(fēng)險(xiǎn)的測試 167
3.9.1 什么是基于風(fēng)險(xiǎn)的測試 167
3.9.1.1 風(fēng)險(xiǎn)的定義 167
3.9.1.2 產(chǎn)品風(fēng)險(xiǎn)和項(xiàng)目風(fēng)險(xiǎn) 168
3.9.1.3 基于風(fēng)險(xiǎn)的測試策略 170
3.9.2 風(fēng)險(xiǎn)管理過程 174
3.9.2.1 風(fēng)險(xiǎn)識(shí)別 175
3.9.2.2 風(fēng)險(xiǎn)分析 182
3.9.2.3 風(fēng)險(xiǎn)應(yīng)對(duì) 184
3.9.2.4 ISO/IEC 16805 190
3.9.3 風(fēng)險(xiǎn)管理實(shí)踐 197
3.9.4 基于風(fēng)險(xiǎn)的測試方法 199
3.9.4.1 作用和優(yōu)點(diǎn) 200
3.9.4.2 基于FMEA的測試 204
3.9.4.3 注意點(diǎn)和誤區(qū) 213
3.10 失效模式和影響分析 215
3.10.1 什么是FMEA 215
3.10.2 應(yīng)用領(lǐng)域 218
3.10.2.1 產(chǎn)品 219
3.10.2.2 過程 220
3.10.3 實(shí)現(xiàn)步驟 221
3.10.3.1 了解分析對(duì)象 223
3.10.3.2 識(shí)別失效模式 224
3.10.3.3 分析失效影響 224
3.10.3.4 確定嚴(yán)重程度 225
3.10.3.5 確定可能性 225
3.10.3.6 確定檢測難度 226
3.10.3.7 分析潛在原因 226
3.10.3.8 計(jì)算風(fēng)險(xiǎn)優(yōu)先級(jí)因子 227
3.10.3.9 確定處理優(yōu)先級(jí) 227
3.10.3.10 采取應(yīng)對(duì)措施 228
3.10.3.11 重新計(jì)算RPN 228
3.10.4 收益與成本 229
3.10.5 確定RPN 230
3.11 測試管理難題 231
3.11.1 探索性測試 231
3.11.1.1 什么是探索性測試 231
3.11.1.2 基于會(huì)話的測試管理 233
3.11.2 綜合系統(tǒng) 234
3.11.3 安全關(guān)鍵系統(tǒng) 236
3.11.4 非功能性測試 237
3.12 小結(jié) 239
第4章 評(píng)審 241
4.1 簡介 241
4.2 基本原則 244
4.3 選擇合適的評(píng)審類型 246
4.3.1 審查 246
4.3.2 技術(shù)評(píng)審 248
4.3.3 走查 249
4.3.4 非正式評(píng)審 249
4.3.4 管理評(píng)審和審計(jì) 250
4.3.6 特殊工作產(chǎn)品的評(píng)審 251
4.3.7 正式評(píng)審的開展 252
4.4 有效的評(píng)審過程 253
4.4.1 計(jì)劃階段 254
4.4.2 預(yù)備會(huì)階段 255
4.4.3 個(gè)人準(zhǔn)備階段 255
4.4.4 評(píng)審會(huì)議階段 256
4.4.5 返工階段 257
4.4.6 跟蹤結(jié)果階段 257
4.5 評(píng)審成功因素 259
4.6 小結(jié) 261
第5章 缺陷管理 262
5.1 簡介 262
5.2 缺陷發(fā)現(xiàn)階段 264
5.3 缺陷生命周期 264
5.3.1 識(shí)別 265
5.3.2 調(diào)查 266
5.3.3 改正 267
5.3.4 總結(jié) 268
5.3.5 案例 269
5.4 缺陷要素 273
5.5 缺陷度量 275
5.5.1 缺陷發(fā)現(xiàn)進(jìn)度 276
5.5.2 缺陷修復(fù)進(jìn)度 277
5.5.3 缺陷優(yōu)先級(jí) 278
5.5.4 缺陷嚴(yán)重程度 279
5.6 缺陷溝通 281
5.7 小結(jié) 287
第6章 標(biāo)準(zhǔn)和測試過程改進(jìn) 288
6.1 簡介 288
6.2 相關(guān)標(biāo)準(zhǔn) 288
6.2.1 標(biāo)準(zhǔn)的來源和有效性 288
6.2.2 國際標(biāo)準(zhǔn) 290
6.2.2.1 ISO 290
6.2.2.2 IEEE 291
6.2.3 國家標(biāo)準(zhǔn) 292
6.2.4 特定領(lǐng)域標(biāo)準(zhǔn) 294
6.2.4.1 航空電子系統(tǒng) 294
6.2.4.2 航天工業(yè) 295
6.2.4.3 食品與藥物管理局 295
6.2.5 其他標(biāo)準(zhǔn) 295
6.3 測試改進(jìn)過程 296
6.3.1 改進(jìn)的方法 296
6.3.2 改進(jìn)的類型 297
6.4 測試過程優(yōu)化 297
6.5 TMM 298
6.5.1 成熟度等級(jí) 299
6.5.2 內(nèi)部結(jié)構(gòu) 301
6.5.3 評(píng)估模型 304
6.6 TPI 306
6.6.1 模型結(jié)構(gòu) 306
6.6.2 評(píng)估過程 311
6.7 CTP 312
6.7.1 模型結(jié)構(gòu) 312
6.7.2 評(píng)估模型 316
6.8 STEP 317
6.8.1 組成 317
6.8.2 架構(gòu) 318
6.8.3 活動(dòng)時(shí)序 319
6.8.4 工作產(chǎn)品 320
6.8.5 角色和職責(zé) 321
6.9 CMMI 321
6.9.1 模型組成 322
6.9.1.1 表述方式 323
6.9.1.2 過程域 325
6.9.1.3 評(píng)估方法 326
6.9.2 驗(yàn)證和確認(rèn) 326
6.10 小結(jié) 329
第7章 測試工具與自動(dòng)化 330
7.1 簡介 330
7.2 測試工具的概念 330
7.2.1 成本效益和風(fēng)險(xiǎn) 331
7.2.2 測試工具策略 335
7.2.3 測試工具集成 335
7.2.4 腳本和腳本語言 337
7.2.5 測試準(zhǔn)則 340
7.2.6 測試工具部署 343
7.2.6.1 工具引入的成本效益 344
7.2.6.2 工具選擇 344
7.2.6.3 工具引入 345
7.2.7 開源測試工具 346
7.2.8 測試工具開發(fā) 348
7.2.9 測試工具分類 350
7.3 測試工具分類 351
7.3.1 測試管理工具 351
7.3.2 測試執(zhí)行工具 352
7.3.3 調(diào)試工具 354
7.3.4 錯(cuò)誤傳播和注入工具 355
7.3.5 模擬器與仿真器 356
7.3.6 靜態(tài)和動(dòng)態(tài)分析工具 356
7.3.6.1 靜態(tài)分析工具 356
7.3.6.2 動(dòng)態(tài)分析工具 357
7.3.7 關(guān)鍵字驅(qū)動(dòng)測試自動(dòng)化 358
7.3.8 性能測試工具 358
7.3.9 Web測試工具 359
7.4 小結(jié) 360
第8章 個(gè)人技能和團(tuán)隊(duì)構(gòu)成 330
8.1 簡介 330
8.2 個(gè)人技能 330
8.2.1 角色和職責(zé) 331
8.2.2 軟技能 334
8.2.3 個(gè)人技能評(píng)估 337
8.3 團(tuán)隊(duì)能力 341
8.3.1 團(tuán)隊(duì)角色分類 341
8.3.2 案例：測試團(tuán)隊(duì)分析 343
8.3.3 測試團(tuán)隊(duì)優(yōu)化 345
8.4 測試團(tuán)隊(duì)獨(dú)立性 347
8.4.1 測試組織結(jié)構(gòu) 347
8.4.2 測試外包 351
8.5 激勵(lì) 352
8.5.1 激勵(lì)方式 352
8.5.2 量化管理 358
8.6 溝通 359
8.6.1 正確對(duì)待缺陷 360
8.6.2 開發(fā)和測試的合作 360
8.7 小結(jié) 361
參考文獻(xiàn) 362
附錄A IGMP需求列表 364