演化算法的非参数检验.pptxVIP

演化算法评价中的非参数检验Non-parametric Test in the Evaluation of Evolutionary Algorithms 杨国强 2017.7.12 目录 假设检验简介 演化算法的对比实验 对比实验中的假设检验 参数检验 非参数检验 假设检验Hypothesis Testing 统计推断 由样本推断总体 假设检验简介 假设检验（例） 假设检验（例） 假设检验（例） 假设检验（例） 检验统计量（观察值、自变量） 假设几率/显著性（概率、面积） 显著性水平 假设检验（例） 拒绝原假设 接受原假设 假设检验（例） 假设检验（例） 拒绝原假设 接受原假设 假设检验（例） 假设检验步骤总结 临界值法 p值法 演化算法与假设检验Evolutionary Algorithm with Hypothesis Testing 演化算法的实验结果 演化算法的实验结果 演化算法的实验结果 演化算法的实验结果 演化算法的实验结果 对实验结果的假设检验 例：现有两个演化算法关于CEC2017 的实验结果：51次独立运行的平均 误差。 问：两个算法孰好孰坏？ func Mean Func Error HSAS/FFT CMA-ES f1 0.00E+00 3.52E-23 f2 0.00E+00 1.53E-23 f3 0.00E+00 2.37E-22 f4 2.67E-03 6.24E+01 f5 5.66E+00 7.66E+00 f6 0.00E+00 4.84E+01 f7 7.32E+02 1.31E+02 f8 3.37E+00 2.61E+01 f9 0.00E+00 3.37E-03 f10 1.88E+03 3.73E+03 f11 5.34E+00 7.19E+00 f12 2.70E+02 4.84E+02 f13 2.09E+02 8.62E+02 f14 4.20E+00 2.00E+01 f15 3.69E+00 3.48E+01 f16 4.01E+00 6.20E+01 f17 2.76E+02 2.02E+01 f18 2.32E+01 6.27E+01 f19 2.38E+01 1.21E+02 f20 3.08E+01 2.36E+02 f21 4.53E+02 4.18E+02 f22 1.03E+02 1.33E+02 f23 3.62E+02 3.73E+02 f24 4.52E+02 4.25E+02 f25 3.79E+02 3.82E+02 f26 9.45E+02 9.55E+02 f27 5.00E+02 5.50E+02 f28 3.00E+03 4.47E+04 f29 4.75E+02 4.88E+02 f30 4.43E+02 1.97E+03 func Mean Func Error HSAS/FFT CMA-ES f1 0.00E+00 3.52E-23 f2 0.00E+00 1.53E-23 f3 0.00E+00 2.37E-22 f4 2.67E-03 6.24E+01 f5 5.66E+00 7.66E+00 f6 0.00E+00 4.84E+01 f7 7.32E+02 1.31E+02 f8 3.37E+00 2.61E+01 f9 0.00E+00 3.37E-03 f10 1.88E+03 3.73E+03 f11 5.34E+00 7.19E+00 f12 2.70E+02 4.84E+02 f13 2.09E+02 8.62E+02 f14 4.20E+00 2.00E+01 f15 3.69E+00 3.48E+01 f16 4.01E+00 6.20E+01 f17 2.76E+02 2.02E+01 f18 2.32E+01 6.27E+01 f19 2.38E+01 1.21E+02 f20 3.08E+01 2.36E+02 f21 4.53E+02 4.18E+02 f22 1.03E+02 1.33E+02 f23 3.62E+02 3.73E+02 f24 4.52E+02 4.25E+02 f25 3.79E+02 3.82E+02 f26 9.45E+02 9.55E+02 f27 5.00E+02 5.50E+02 f28 3.00E+03 4.47E+04 f29 4.75E+02 4.88E+02 f30 4.43E+02 1.97E+03 对实验结果的假设检验 演化算法的实验分析研究方向 测试函数的设计（设计更复杂的测试函数） 实验设计（指定科学的实验标准） 对实验内容的统计分析（如何定量地对比实验结果） 演化算法实验分析现状 大部分论文只对多组实验的均值（Mean）进