试管婴儿如果残疾，责任会分别由不同的方面承担。

首先，医生和医疗机构承担医疗责任，如果医护人员在进行试管婴儿操作或者日常监护中出现差错或疏忽，导致婴儿出现残疾，则医生和医疗机构需要承担相应的法律责任。

其次，家长也会承担一定的法律责任，因为如果家长知道自己患有某种遗传病，仍然进行了试管婴儿，且导致婴儿出现对应的遗传病，那么家长也应该承担法律责任。总而言之，责任需要根据具体情况判断，而相关法律法规也会规范相应的责任承担程序。