高緯還很有藝術能力，他喜歡彈琵琶，做了一首《無然》曲，上百的宮人跟著唱和，民間百姓稱他為“無愁天子。”
他還有一個弟弟叫高綽，封南陽王，後來高綽為定州刺史時，一次出行，路見一個抱小孩的婦女，高綽上前一把奪過嬰兒喂了他養的狼狗。
嬰兒的母親號啕大哭，對高綽又拉又扯，高綽被這位不懂禮貌的婦女激怒了，他把嬰兒的血塗在婦女的身上，縱狗活活把她給咬死了。
高緯聽說後，馬上讓高綽進京。
當時大臣們都以為高綽會受到法律的嚴懲，沒想到高緯見了高綽，第一句話就是問高綽：“你在定州什麼事情覺得最好玩啊？”
高綽頓時來了精神，回答道：“把人放到蠍子池中，觀之極樂。”
高緯聽了後，當夜就讓人抓了一堆蠍子。
第二天一早，高緯把蠍子倒進大浴盆，然後把一個人扔了進去。
隻聽那人來回翻滾，聲音淒厲，畫麵聲效無一不佳。
高緯回過頭責備高綽道：“如此樂事，怎麼不早告訴我？”
當然了，再好的畫麵，也總有審美疲勞的時候。
高緯後來又迷上了乞討，他在華林園設立了貧兒村，自己穿著乞丐服乞食，居然也是玩得意興盎然、樂在其中。
高緯還特別喜歡顯示皇恩浩蕩，從不吝惜封賞官職和爵位，隻不過獎賞的對象不是大臣而是動物。
北齊宮中的駿馬和鷹犬，都有儀同、郡君的封號，比如赤彪儀同(這是匹馬)、逍遙郡君(這是鬥雞)等等。
高緯一生姬妾無數，其中最有名的就是馮小憐！
馮小憐長得可不一般，據說有人將馮小憐稱作華夏古代第五大美女。
高緯幹的事情，不可謂不奇葩，登基開始，奇葩昏庸的事情一件接著一件。
馮小憐原本是高緯第三位皇後穆邪利的婢女，而穆邪利則是高緯的第一位皇後斛律氏的侍婢。
穆邪利十分得高緯喜歡，高緯為了討她歡心，曾派人用三萬匹錦彩去北周交換珍珠，用以給她做珍珠裙衣。
穆邪利當了皇後之後，恨不得每時每刻都將高緯拴在身邊。
正當穆邪利誌得意滿之時，喜新厭舊的高緯又看上了一對曹姓姐妹，這對姐妹彈得一手好琵琶，人也長得漂亮。
不過，這姐姐不善討好，身上還有一種世家小姐的脾氣，最終高緯忍受不了她的驕傲，於是剝去了她的麵皮，並將她趕出宮去。
曹氏妹妹正和姐姐相反，她很頗得高緯歡心，不久便晉封為昭儀，寵冠後宮。
穆邪利十分氣憤，於是誣陷曹昭儀在宮中行巫蠱之術，高緯竟信以為真，不念舊情，三尺白綾賜死了曹昭儀。
穆邪利打敗了情敵之後，本以為高緯會回到自己身邊，沒想到高緯卻又喜歡上了董昭儀。
穆邪利氣得牙根癢癢，此時馮小憐便上場了。
馮小伶見皇後氣憤難平，便向她獻上一計，要皇後將自己送給高緯，保準能將高緯拉回來。