Андроник был очень начитан, знал несколько языков, был автором ряда философских сочинений и остроумных эпиграмм, не верил ни в бога ни в черта и стремился лишь к власти и наслаждениям.
Андроник и его брат Иоанн были сыновьями Исаака Комнина, младшего брата покойного императора Иоанна. Исаак Комнин, хотя и хранил верность старшему брату, доверием его не пользовался, и вся жизнь его прошла в странствиях, а порой и в бегстве от брата. Сыновья сопровождали отца. Еще мальчиком Андроник повидал немало стран, научился разбираться в интригах, бояться собственных родственников и никому не верить.
Исаак умер в изгнании. Старший его сын, Иоанн, отказался вернуться в Константинополь, остался у конийского султана и даже перешел в мусульманство. Младший, Андроник, был взят в императорский дворец, где его воспитывали вместе с наследником престола Мануилом. Двоюродные братья были ровесниками, оба родились в 1120 году. Они вместе росли и воспитывались. Братья дружили — оба стремились к приключениям и могли удовлетворять самые невероятные капризы.
Очевидно, этой дружбой можно объяснить несвойственную для византийских правов снисходительность Мануила к кузену в последующие годы.
Андроник быстро позабыл о детской дружбе. Соперничество с двоюродным братом, вражда с родственниками, не раз страдавшими от острого языка Андроника, любовные истории, в которых влюбчивый принц никогда не думал о последствиях, рыцарские эскапады — все это увеличивало и популярность Андроника, и ненависть к нему. Особенно обострились отношения с двором, когда у Апдроника завязался роман с его двоюродной сестрой Евдокией.
Ее родные возмутились, в чем была доля ханжества. Родная сестра Евдокии Феодора была официальной любовницей императора, и это возмущения не вызывало. Но разница в положении привела к тому, что все обвинения и упреки, которым должен был бы подвергнуться император, обрушились на Андроника. Это злило тридцатилетнего светского льва, который открыто заявил: «Подданные должны следовать примеру своего государя, и естественно, что товары, изготовленные в одной мастерской, должны нравиться нам с ним одинаково».
Осторожный Мануил решил отправить кузена в почетную ссылку. В 1152 году Андроник был послан в Киликию, чтобы возглавить войска, воевавшие с сельджуками. Византийцам приходилось там расхлебывать последствия Второго крестового похода, который, вместо того чтобы укрепить власть христианства на Ближнем Востоке, показал сельджукам, что европейских рыцарей можно побеждать.