如果孩子的监护人不是父母的，则不能追究父母为被告。
我国法律规定，依法具有监护资格的人之间可以协议确定监护人。
协议确定监护人应当尊重被监护人的真实意愿。法律依据：《民法典》第三十条
依法具有监护资格的人之间可以协议确定监护人。
协议确定监护人应当尊重被监护人的真实意愿。
《民法典》第二十七条
父母是未成年子女的监护人。
未成年人的父母已经死亡或者没有监护能力的，由下列有监护能力的人按顺序担任监护人：
（一）祖父母、外祖父母；
（二）兄、姐；
（三）其他愿意担任监护人的个人或者组织，但是须经未成年人住所地的居民委员会、村民委员会或者民政部门同意。