正德四年闰九月召为光禄少卿，旋改尚宝司卿。其年冬，与通政丛兰等出理边屯，世忠往蓟州。明年奏言：“占种盗卖，积弊已久。若一一究问，恐人情不安，请量为处分。”从之。刘瑾败，言官劾其尝请清核屯田，助瑾为虐。世忠故方鲠，朝议宽之，得免。再迁大理少卿。八年擢右佥都御史巡抚延绥。寇在河套，逐之失利，乃引疾归。
赞曰：明至英宗以后，幸门日开。传奉请乞，官冗役繁，用度奓汰，盛极孽衰，国计坐绌。李敏诸人斤斤为国惜财，抵抗近幸，以求纾民。然涓滴之助，无补漏卮。国家当承平殷阜之世，侈心易萌。近习乘之，糜费日广。《易》曰：“节以制度，不伤财，不害民”，又曰“不节若，则嗟若”，此恭俭之主所为凛凛也。