是的，行政执法人员执法时必须出示执法证件，表明身份。这是法定程序要求。依据《中华人民共和国行政处罚法》第五十五条，执法人员在调查或检查时，应当主动向当事人或有关人员出示执法证件。当事人或有关人员有权要求执法人员出示证件。如果执法人员未出示有效执法证件，当事人有权拒绝其调查、检查，但需注意方式方法，避免被认定为阻碍执法。此规定旨在保障执法行为的规范性和公信力，防止假冒执法人员侵害公民权益。但需区分“出示证件”和“当场交付文书”。对于简易程序处罚等需要当场交付决定文书的，不出示证件可能构成程序违法，但拒绝接受处罚本身可能产生其他法律风险。建议在拒绝的同时，记录执法人员外貌特征、执法车辆号牌等信息，并向其所属机关或纪检监察部门投诉。