不能一概拒绝支付全部货款，但有权对短缺部分拒绝付款，并对已接收的合格货物部分，在扣减短缺货物价款后支付余款。根据《民法典》第六百二十九条，买受人收到标的物时应当在约定的检验期限内检验。发现数量不符合约定的，应当及时通知出卖人。您的正确做法是：1. 在合同约定或合理的检验期内，清点货物并记录短缺情况。2. 立即书面通知卖方数量短缺的事实，要求其补足或就短缺部分进行处理。3. 对于已验收合格的部分货物，应按合同约定支付相应价款。如果卖方不同意，您可以暂扣与短缺货物等值的货款。若拒绝支付全部货款，可能被卖方主张您逾期付款违约。核心是区分对待，并履行及时通知的义务。