В 1136 году новгородцы призвали псковичей и ладожан и стали думать, как бы выгнать князя своего Всеволода; подумавши, посадили его в епископском дворе с женою, детьми и тещею, приставили сторожей стеречь его день и ночь с оружием, по 30 человек на день, и не выпускали до тех пор, пока приехал новый князь, Святослав Ольгович из Чернигова. Вины Всеволода так означены в летописи: 1) не блюдет смердов; 2) зачем хотел сесть в Переяславле? 3) в битве при Ждановой горе прежде всех побежал из полку; 4) вмешивает Новгород в усобицы: сперва велел приступить к Ольговичам, а теперь велит отступить. Но изгнание сына Мстиславова и принятие Ольговича не могли пройти спокойно в Новгороде, потому что оставалась сильная сторона, приверженная к Мстиславичам: Новгород разодрался, как разодралась Русская земля, по выражению летописца. В год прибытия Святослава Ольговича (1136) уже встречаем известие о смуте

[1136 г.] Между тем Новогородцы, миря других, сами не умели наслаждаться внутреннею тишиною. Князь был жертвою их беспокойного духа. Собрав граждан Ладожских, Псковских, они торжественно осудили Всеволода на изгнание, ставя ему в вину, 1) что "он не блюдет простого народа и любит только забавы, ястребов и собак; 2) хотел княжить в Переяславле; 3) ушел с места битвы на Ждановой горе прежде всех и 4) непостоянен в мыслях: то держит сторону Князя Черниговского, то пристает ко врагам его". Всеволод был заключен в Епископском доме с женою, детьми и тещею, супругою Князя Святоши; сидел как преступник 7 недель за всегдашнею стражею тридцати воинов, и получил свободу, когда Святослав Ольгович, брат Князя Черниговского, избранный народом, приехал княжить в Новгород.