当然也有不理智的言官弹劾，说燕云之地是祖宗之地，太祖太宗一直想要收复，如今却交到藩镇手中，对不起祖宗云云。这样的言官，赵构直接就给免了，永不叙用。赵构说，藩镇也是朝廷的藩镇，宗族之地封给藩镇，就如同在朝廷手中一样。
这些风波只是插曲，李慢侯答应了移藩，但现在还无法成行，因为燕京还在别人手里呢。
他不打算跟韩常在燕京死战，燕京也不值得拿人命换。那座城里几乎只有军人，两万女真、汉儿军和他们的家属，总计四五万人。真正的老百姓，除了一些随军的工匠外，没有其他。
因为这里不但屡经战火，女真人的统治也很残暴。
粘罕坐镇燕云，征发无度。虽然粘罕的统治非常稳固，可并不意味着社会安定。粘罕统治的稳定，靠的是强大的军队和严酷的法度。
女真人崛起于山林，法律规矩都很简单，但也易行。严重的罪行，杀人剽窃，规定用锤子剖其脑而至之死，家人为奴。亲人可以给赎身。除了这种杀人罪之外，其他则是轻罪用柳条鞭打，重罪罚财物。
粘罕用这些刑罚来对付那些地方官，让他们征发民夫，征收财物。县令馈饷失期，鞭一百。对女真人来说，这是理所应当的，他们的皇帝动公库买酒，都还要被粘罕打呢，更何况小小的县令、知州。但这对那些文官出身的辽宋官僚却难以接受，他们早都习惯了刑不上大夫的原则。因此文官们被粘罕抽打了，往往羞耻的不敢出门。
在这种刑罚威慑之下，粘罕手下的官僚机构，虽然完整程度还比不上宋辽两国，但效率却大大提高。官府效率如果是为了建设，那当然好，如果用来搜刮，破坏性也非常恐怖。
征发最惨的一次，正是耶律余睹谋反之前，奉命北伐耶律大石，让他进攻可敦城。那可是几千里外的漠北，给了耶律余睹一万女真兵，一万汉兵，为了保证这些士兵的给养，全都是征发燕云签军，结果这次进入大漠，没找到耶律大石，民夫却死了无数，“车牛十无一二得还”。
这造成了燕云地去数以万计的青壮消耗。耶律余睹谋反之后，女真人又大肆屠杀军中的契丹汉儿，又有数万青壮被杀。之后清洗郭药师等燕云辽臣，引起巨大叛乱。
其他还有征发签军南征的，强行掳掠人口的，整体迁移到辽东的。给这里的民众带来了巨大的灾难，造反却又打不过女真人。于是人口凋敝的厉害，女真人灭辽之前，燕云十六州生活着三百九十万汉人，现在恐怕只有二三十万了。