折腾了下下这个很2的问题。
网上放的方法比较旧， Android5.1的话， 设置后当时生效， 重启后就失效了。

        private void updateLanguage(Locale locale) {
            try {
                Object objIActMag, objActMagNative;
                
                Class clzIActMag = Class.forName("android.app.IActivityManager");
                
                Class clzActMagNative = Class.forName("android.app.ActivityManagerNative");
                
                
                Method mtdActMagNative$getDefault = clzActMagNative
                        .getDeclaredMethod("getDefault");
                
                objIActMag = mtdActMagNative$getDefault.invoke(clzActMagNative);
                
                Method mtdIActMag$getConfiguration = clzIActMag
                        .getDeclaredMethod("getConfiguration");
                
                Configuration config = (Configuration) mtdIActMag$getConfiguration
                        .invoke(objIActMag);
                
                config.locale = locale;
                
                Class clzConfig = Class.forName("android.content.res.Configuration");
                java.lang.reflect.Field userSetLocale = clzConfig.getField("userSetLocale");
                userSetLocale.set(config, true);
                
                // 此处需要声明权限:android.permission.CHANGE_CONFIGURATION
                // 会重新调用 onCreate();
                Class[] clzParams = { Configuration.class };
                
                Method mtdIActMag$updateConfiguration = clzIActMag.getDeclaredMethod("updateConfiguration", clzParams);
                
                mtdIActMag$updateConfiguration.invoke(objIActMag, config);
                
                BackupManager.dataChanged("com.android.providers.settings");
                
            } catch (Exception e) {
                e.printStackTrace();
            }
        }

不同的地方在添加了

Class clzConfig = Class.forName("android.content.res.Configuration"); 
java.lang.reflect.Field userSetLocale = clzConfig.getField("userSetLocale"); 
userSetLocale.set(config, true);

Debug发现的逻辑是：
1： 持久化保存下来

SystemProperties.set("persist.sys.language", l.getLanguage());
SystemProperties.set("persist.sys.country", l.getCountry());

2： 开机AndroidRuntime读取这个属性， 更新系统之前的属性。

估计是为了方便跑测试的Case添加的这个逻辑。