回答这个问题的前提，我们首先应当先来审查遗嘱的效力问题。因为根据我国《继承法》第22条的规定，无行为能力人或者限制行为能力人所立的遗嘱无效。在这种情况下，遗嘱无效，遗嘱继承人并不能按遗嘱来继承遗产，遗产应按法定继承处理。对于，遗嘱部分无效的情况，也同样是如此。因此，遗产是否能够全部由遗嘱继承人来继承的关键，还是要看遗嘱的效力。