On the Potential of Algorithm Fusion for Demographic Bias Mitigation in Face Recognition

Table 4

FMRs in percent when using the global system threshold on demographic subsets.

(a) Comparisons only within the same demographic group
Model	Demographic group
	All	Female	Male	Dark	Light	df	dm	lf	lm
af_casia	0.1	0.117	0.287	0.521	0.087	1.353	0.562	0.122	0.017
af_glint360k	0.1	0.101	0.307	0.450	0.086	0.748	0.531	0.108	0.155
af_ms1mv2	0.1	0.139	0.227	0.337	0.116	1.194	0.373	0.147	0.212
af_ms1mv3	0.1	0.162	0.167	0.267	0.129	0.890	0.296	0.174	0.069
af_mxnet	0.1	0.121	0.240	0.278	0.121	0.696	0.324	0.130	0.401
af_webface600k	0.1	0.184	0.138	0.215	0.153	0.673	0.239	0.203	0.114
Curricularface	0.1	0.123	0.191	0.319	0.093	1.630	0.315	0.115	0.080
ef_arc	0.1	0.103	0.300	0.471	0.081	1.161	0.538	0.105	0.111
ef_arcplus	0.1	0.086	0.327	0.519	0.066	1.360	0.578	0.083	0.108
ef_cos	0.1	0.116	0.255	0.386	0.096	1.177	0.421	0.118	0.183
ef_cosplus	0.1	0.084	0.315	0.436	0.079	0.908	0.496	0.084	0.254
Magface	0.1	0.246	0.048	0.080	0.195	0.551	0.086	0.278	0.047
COTS	0.1	0.188	0.170	0.269	0.150	1.025	0.306	0.207	0.122
(b) Comparisons only across demographic groups
Model	All	Gender	Skin	df–dm	df–lf	df–lm	dm–lf	dm–lm	lf–lm
af_casia	0.1	0.024	0.011	0.321	0.037	0.007	0.009	0.005	0.009
af_glint360k	0.1	0.030	0.029	0.156	0.030	0.026	0.022	0.064	0.026
af_ms1mv2	0.1	0.028	0.025	0.154	0.045	0.036	0.016	0.052	0.032
af_ms1mv3	0.1	0.030	0.029	0.125	0.057	0.025	0.025	0.031	0.025
af_mxnet	0.1	0.037	0.035	0.092	0.035	0.048	0.020	0.104	0.068
af_webface600k	0.1	0.023	0.016	0.098	0.043	0.019	0.012	0.020	0.037
curricularface	0.1	0.051	0.054	0.234	0.123	0.089	0.041	0.061	0.041
ef_arc	0.1	0.030	0.029	0.194	0.050	0.037	0.022	0.049	0.021
ef_arcplus	0.1	0.034	0.034	0.259	0.057	0.047	0.023	0.064	0.019
ef_cos	0.1	0.035	0.034	0.209	0.063	0.060	0.022	0.067	0.034
ef_cosplus	0.1	0.040	0.040	0.200	0.047	0.073	0.024	0.107	0.048
Magface	0.1	0.006	0.005	0.023	0.020	0.001	0.003	0.002	0.012
COTS	0.1	0.009	0.006	0.090	0.030	0.002	0.002	0.012	0.013

The lowest error rates are marked in bold.