Элеанора, по-моему, об этом можно только гадать. Или вспомнить, что два мастера восточных единоборств не будут впустую махать мечами, им достаточно одного пристального взгляда, чтобы оценить противника и без боя решить, кто сильнее. Или вспомним Волкодава и кан-киро
Видимо, в тот момент Саруман был сильнее Гендальфа. У себя в башне, в самом сосредоточии своих сил... Убежать Гендальфу помог случай. Да и то ему пришлось с месяц сидеть на башне, насколько я помню текст ВК...