“住了几十年”不能直接等同于合法建筑，但确是认定处理时需要考虑的重要因素。征收中认定和处理“违建”必须遵循法定程序。根据《行政强制法》和《城乡规划法》等相关规定，行政机关不能随意口头认定违建。合法程序通常包括：立案调查、现场勘查、责令限期改正或限期拆除告知、听取当事人陈述申辩、作出并送达书面《限期拆除决定书》。如果房屋建于《城乡规划法》（2008年）实施之前，或由于历史原因、管理原因一直未办证，实践中很多地方会本着尊重历史、实事求是的原则，在符合一定条件（如符合当时规划、是唯一住房等）下，予以认定为合法建筑或参照合法建筑给予适当补偿，而非一律无偿拆除。如果征收方未经上述严格程序就直接认定为违建并不予补偿，其行为很可能不合法。您应要求其出具书面认定文件，并依法申请行政复议或提起行政诉讼维权。