您可以按约定主张违约金，但对方有权请求法院予以适当减少，法院最终是否全额支持取决于违约金是否“过分高于造成的损失”。

法律依据：《民法典》第五百八十五条：约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。当事人就迟延履行约定违约金的，违约方支付违约金后，还应当履行债务。

司法实践标准：根据《全国法院贯彻实施民法典工作会议纪要》及以往司法解释精神，当事人主张约定的违约金过高请求予以适当减少的，应当以实际损失为基础，兼顾合同的履行情况、当事人的过错程度以及预期利益等综合因素，根据公平原则和诚实信用原则予以衡量。通常，违约金超过造成损失的30%的，一般可以认定为“过分高于造成的损失”。

本案分析：
- 您作为守约方，有权依据合同条款主张20%的违约金。
- 若违约方提起诉讼或仲裁，并以违约金过高为由提出抗辩或反诉请求调低，法院会进行审查。
- 法院会首先审查您的实际损失证据。如果实际损失确实远低于20%，比如仅为合同金额的5%，那么20%的违约金（相当于损失的4倍）很可能被认定为“过分高于”。
- 法院可能将违约金调整至实际损失的130%左右，但也会考虑违约方的过错程度、合同履行情况等因素。

建议：在诉讼中，您应尽可能举证证明实际损失，以及因对方违约导致的间接损失、商业机会丧失等，以支撑较高的违约金主张。