根据《中华人民共和国行政复议法》第二十三条至第二十八条的规定，确定复议机关需遵循以下规则：1. **对县级以上地方政府工作部门的具体行政行为不服**：可以向该部门的**本级人民政府**申请复议，也可以向**上一级主管部门**申请复议。例如，对某市市场监管局的处罚不服，可向该市人民政府或省市场监管局申请复议。2. **对地方各级人民政府的具体行政行为不服**：应向**上一级地方人民政府**申请复议。例如，对乡镇政府的决定不服，向县级政府申请复议。3. **对国务院部门或省级政府的行政行为不服**：向**作出该行为的国务院部门或省级政府**申请复议。对复议决定不服的，可以向人民法院提起行政诉讼，也可以向国务院申请最终裁决（选择国务院裁决后不可再诉讼）。4. **对海关、金融、国税、外汇管理等实行垂直领导的行政机关和国家安全机关的具体行政行为不服**：应向**上一级主管部门**申请复议。建议在申请前，查看行政行为决定书上是否载明了复议机关，或咨询专业法律人士。