A Decomposition-Based Harmony Search Algorithm for Multimodal Multiobjective Optimization

Table 5

Normalized wall-clock time of six algorithms.

	MMOEA/D-HSA	MO_Ring_PSO_SCD	TriMOEA-TA&R	DN-NSGA-II	MOEA/D	LORD
MMF1	0.0056	0.0169(+)	0.0045(−)	0.0220(+)	0.0049(−)	1.0000(+)
MMF1_e	0.0111	0.0317(+)	0.0046(−)	0.0213(+)	0.0057(−)	1.0000(+)
MMF1_z	0.0051	0.0133(+)	0.0036(−)	0.0107(+)	0.0037(−)	1.0000(+)
MMF2	0.0071	0.0339(+)	0.0039(−)	0.0437(+)	0.0059(−)	1.0000(+)
MMF3	0.0071	0.0327(+)	0.0039(−)	0.0383(+)	0.0061(−)	1.0000(+)
MMF4	0.0040	0.0124(+)	0.0027(−)	0.0072(+)	0.0037(−)	1.0000(+)
MMF5	0.0059	0.0181(+)	0.0039(−)	0.0219(+)	0.0049(−)	1.0000(+)
MMF6	0.0053	0.0168(+)	0.0036(−)	0.0204(+)	0.0047(−)	1.0000(+)
MMF7	0.0038	0.0115(+)	0.0034(−)	0.0093(+)	0.0036(=)	1.0000(+)
MMF8	0.0042	0.0160(+)	0.0025(−)	0.0088(+)	0.0041(=)	1.0000(+)
MMF9	0.0035	0.0102(+)	0.0031(−)	0.0043(+)	0.0028(−)	1.0000(+)
MMF10	0.0044	0.0107(+)	0.0029(−)	0.0048(+)	0.0028(−)	1.0000(+)
MMF11	0.0028	0.0088(+)	0.0028(=)	0.0034(+)	0.0026(=)	1.0000(+)
MMF12	0.0042	0.0171(+)	0.0034(−)	0.0080(+)	0.0037(−)	1.0000(+)
MMF13	0.0049	0.0126(+)	0.0036(−)	0.0050(+)	0.0040(−)	1.0000(+)
MMF14	0.0655	0.1534(+)	0.0500(−)	0.0603(−)	0.0259(−)	1.0000(+)
MMF14_a	0.0803	0.1813(+)	0.0453(−)	0.0762(−)	0.0309(−)	1.0000(+)
MMF15	0.0385	0.1573(+)	0.0535(+)	0.0612(+)	0.0262(−)	1.0000(+)
MMF15_a	0.0471	0.1925(+)	0.0618(+)	0.0791(+)	0.0342(−)	1.0000(+)
SYM_PART simple	0.0079	0.0422(+)	0.0044(−)	0.0172(+)	0.0061(−)	1.0000(+)
SYM_PART rotated	0.0103	0.0502(+)	0.0037(−)	0.0283(+)	0.0066(−)	1.0000(+)
Omni-test	0.0060	0.0240(+)	0.0015(−)	0.0102(+)	0.0042(−)	1.0000(+)
Sum up	+/ = /-	22/0/0	2/1/19	20/0/2	0/3/19	22/0/0