德尔菲法计算说明
提示:本指南只针对德尔菲法特有的内容进行描述,关于软件的通用操作流程(如文件上传、参数设置、结果下载等),请查看:通用计算说明
1. 方法概述
德尔菲法(Delphi Method)是一种通过多轮专家问卷调查收集和综合专家意见,进而做出相应决策的研究方法。本工具提供了完整的德尔菲法分析功能,包括:Kendall协调系数检验、评价指标筛选界值计算、专家意见集中程度分析和指标筛选建议。
特别提醒: 本工具主要用于德尔菲法的统计分析和指标筛选,适用于已完成专家问卷调查并收集到评分数据的情况。
2. 计算步骤
2.1 专家问卷设计
在使用德尔菲法之前,你应该已经完成了以下工作:
- 确定评价指标体系:根据研究目的,初步确定需要评价的指标列表
- 设计专家问卷:通常采用李克特量表(如1-5分制或1-10分制)
- 选择专家:选择相关领域的专家进行问卷调查
- 收集评分数据:专家对每个指标的重要性进行打分
2.2 评分标准示例
常用的评分标准(以5分制为例):
| 分数 | 含义 |
|---|---|
| 5分 | 非常重要,该指标必不可少 |
| 4分 | 比较重要,该指标很有必要 |
| 3分 | 一般重要,该指标可以考虑 |
| 2分 | 不太重要,该指标作用有限 |
| 1分 | 不重要,该指标可以删除 |
2.3 数据文件格式
德尔菲法需要上传包含专家评分数据的Excel文件。
文件格式要求:
- Excel文件必须包含一个名为"原始数据"的Sheet
- 第一列为"专家编号"(如:专家1、专家2、专家3…)
- 第一行为"指标名称"(如:指标1、指标2、指标3…)
- 数据区域为专家对各指标的评分(数值型数据)
- 不允许有缺失值,所有单元格都必须填写评分
数据示例:
| 专家编号 | 指标1 | 指标2 | 指标3 | 指标4 | 指标5 |
|---|---|---|---|---|---|
| 专家1 | 5 | 4 | 3 | 5 | 5 |
| 专家2 | 5 | 4 | 2 | 4 | 5 |
| 专家3 | 4 | 5 | 2 | 4 | 5 |
| 专家4 | 4 | 4 | 3 | 4 | 5 |
| 专家5 | 5 | 5 | 3 | 5 | 5 |
2.4 参数设置
德尔菲法提供以下参数设置:
-
最大打分:评分量表的最大值(如5分制则为5,10分制则为10)
- 系统会根据上传数据自动识别最大打分值
- 您也可以手动调整
- 用于计算满分频率指标
-
结果保留小数位:计算结果保留的小数位数
- 默认值:4
- 取值范围:1-10
- 控制所有统计量的小数精度
2.5 计算结果
德尔菲法分析结果包含以下四个部分:
2.5.1 Kendall协调系数检验
<div style=“text-align: center;”> <img src=“/guide/figures/delphi/肯德尔系数检验.png” width=“900” alt=“肯德尔协调系数检验”> </div>
**Kendall协调系数(W)**用于衡量多个专家评分的一致性程度:
-
取值范围:0~1
- W < 0.2:一致性程度较差
- 0.2 ≤ W < 0.4:一致性程度一般
- 0.4 ≤ W < 0.6:一致性程度中等
- 0.6 ≤ W < 0.8:一致性程度较强
- 0.8 ≤ W ≤ 1.0:一致性程度很强
-
显著性检验:通过卡方检验判断一致性是否显著
- p < 0.05:通过检验,具有显著的一致性
- p ≥ 0.05:未通过检验,不具有显著的一致性
2.5.2 评价指标筛选界值
<div style=“text-align: center;”> <img src=“/guide/figures/delphi/筛选界值.png” width=“1100” alt=“评价指标筛选界值”> </div>
系统计算三个统计量的界值,用于判断指标是否应该保留:
-
算术平均值界值 = 平均值 - 标准差
- 指标的算术平均值 小于 界值则不通过
- 反映专家对指标的总体认可度
-
变异系数界值 = 平均值 + 标准差
- 指标的变异系数 大于 界值则不通过
- 反映专家意见的离散程度(值越小表示意见越一致)
-
满分频率(%)界值 = 平均值 - 标准差
- 指标的满分频率 小于 界值则不通过
- 反映专家给出最高分的比例
2.5.3 专家意见集中程度
<div style=“text-align: center;”> <img src=“/guide/figures/delphi/专家意见集中.png” width=“1200” alt=“专家意见集中”> </div>
对每个指标进行详细的统计分析和筛选判断:
统计指标:
- 算术平均值:所有专家评分的平均值,值越大表示指标越重要
- 标准差:评分的离散程度,值越小表示专家意见越一致
- 变异系数:标准差/平均值,消除量纲影响的离散度指标
- 满分频率(%):给出最高分的专家占比,值越大表示认可度越高
筛选判断:
- 算术平均值判断:≥ 界值为"通过",< 界值为"不通过"
- 变异系数判断:≤ 界值为"通过",> 界值为"不通过"
- 满分频率判断:≥ 界值为"通过",< 界值为"不通过"
综合判断:
- 保留:3个判断指标全部通过,建议保留该指标
- 综合取舍:有1-2个判断指标未通过,需结合实际情况综合考虑
- 删除:3个判断指标均未通过,建议删除该指标
3. 应用场景
3.1 指标体系构建
德尔菲法常用于构建评价指标体系:
- 初步确定指标:通过文献研究和专家访谈,初步确定候选指标
- 第一轮德尔菲调查:专家对指标重要性进行评分
- 指标筛选:根据本工具的分析结果,删除不重要的指标
- 第二轮德尔菲调查(可选):对保留的指标再次征求专家意见
- 最终确定指标体系:形成最终的评价指标体系
3.2 多轮调查
德尔菲法通常需要进行2-3轮调查:
- 第一轮:专家独立评分,收集初步意见
- 第二轮:向专家反馈第一轮统计结果,专家可修改评分
- 第三轮(可选):继续反馈和修改,直到专家意见趋于一致
每轮调查后都可以使用本工具进行分析,观察Kendall协调系数的变化。
4. 常见问题
4.1 专家数量要求
问:德尔菲法需要多少位专家?
答:一般建议15~50位专家。专家数量太少会影响结果的可靠性,但也不是越多越好。关键是要选择真正了解该领域的专家。
4.2 评分量表选择
问:应该使用几分制的评分量表?
答:常用的有5分制、7分制和10分制。5分制简单易懂,适合大多数情况;7分制和10分制可以提供更细致的区分度。选择时要考虑专家的认知负担和实际需求。
4.3 一致性不显著怎么办
问:如果Kendall协调系数没通过检验怎么办?
答:这说明专家意见分歧较大,可以考虑:
- 向专家反馈统计结果,进行第二轮调查
- 检查是否有专家误解了评分标准
- 分析意见分歧的原因,必要时与专家沟通
- 如果多轮调查后仍不一致,可能需要重新审视指标设计
4.4 "综合取舍"的指标如何处理
问:对于"综合取舍"的指标,应该保留还是删除?
答:需要结合实际情况综合判断:
- 查看具体是哪个统计量未通过
- 考虑该指标的理论重要性
- 参考专家的定性意见
- 权衡指标体系的完整性和精简性
- 可以在第二轮调查中重点关注这些指标
4.5 满分频率的计算
问:满分频率是如何计算的?
答:满分频率 = (给出最高分的专家数量 / 专家总数) × 100%。例如,使用5分制,如果10位专家中有6位给某指标打了5分,则满分频率为60%。这个指标反映了专家对该指标的强烈认可程度。