She called me to remind me it yesterday to remind me it yest

严格说,是to remind me (of) it是目的状语.
yesterday是整个句子的时间状语（called提示了这一点）,不能放在这个不定式短语中.
再问： 那是不是就是说如果放在句首通顺的话就是修饰全句，如果一个不定式里有时间状语，如果那一个时间状语又可以放在句首那就是修饰全句，如果放在句首不行的话就是修饰不定式，就可以和不定式看作一个整体 是不是吖
再答： 楼主说得很有道理，赞！ 不过我个人倾向于句意翻译之后的通顺与否，这也是做此类判断的一个方法。