首先，需要在米家APP中进入“我的设备”页面，找到已经添加的万能遥控器设备，并进入该设备的设置页面。

然后，在该页面中找到“添加设备”或“添加遥控器”的按钮，点击后可以选择需要添加的设备种类，比如电视、空调、风扇等等。

选择对应的设备后，按照提示进行操作，成功添加即可更换设备。

需要注意的是，米家万能遥控器设备只能控制部分品牌和型号的设备，所以在更换设备前需要确认是否支持目标设备。