抚养义务是法定的,国家不允许随便就不履行,非常明显别人要抚养,也不是简单、容易的事,这么简单的道理明白以后就知道你所谓的协议书是否有法律效力了,如果根本没有通过民政局,实际上就不是协议书,更别提效力了。自动用实际行动进行抚养是可以的,只要保留了证据,以后有可能得到利益,特别是孤儿