Ну да, инфинитивные оборты могуть выступать в роли подлежащего (болтать -- врагу помогать), дополнения (больше всего на свете я люблю читать), обстоятельства (мы пошли в кино посмотреть "Хоббита")...
Наверное, я плохо сформулировала вопрос.. У нас есть предложение, где у главного есть три подчинённых: обстоятельственное времени (1), обстоятельственное причины (2), обстоятельственное места (3). Кто из них скорее будет стоять первым?.. А если в рамках одного предложения у нас есть "Я пришёл", "вчера", "забрать книгу", "к Васе" (опять же, разные обстоятельства), кто из них будет на каком месте?..