據《三國誌》記載：劉備身長七尺五寸，捶手下膝，顧自見其耳。可見耳朵比一般人都大，所以叫「大耳」。而後面這個「賊」字則是呂布送的.從《三國誌·先主傳》記載裡我們可以得知，劉備有兩個很明顯的外貌特徵，就是手長，耳朵大。這個手長，跟大耳賊這個外號沒有關係，我們今天不說，光說耳朵。那劉備的耳朵到底有多大呢?
雖然網友們都認可三國誌的記載，但一個正常人要用自己的眼睛去看到耳朵，小篇覺得是很難的。所以我們可以相信劉備的耳朵比一般人大，但要用自己眼睛去看，基本是不可能的。
那劉備這個「大耳賊」的稱呼又是怎麼來的呢，其實這是個外號是呂布給劉備起的，說來呂布和劉備也算是有緣，早在劉備還是一個無名小卒的時候，呂布就是當時一等一的著名將領，而劉備的成名一戰也是那場經典的三英戰呂布。
後來在劉備身為徐州牧的時候，他出兵討伐袁術的時候，呂布收到袁術的請求於是幫著出兵攻打下邳，結果下邳淪陷在了呂布手中，呂布才算是入主了徐州。在呂布入主徐州之後，劉備請求投降，呂布倒也是接受了，還讓劉備駐紮在小沛，後來袁術再次起兵攻打劉備的時候，劉備還向呂布求援，呂布親自前來，讓袁術軍聞之色變，暫時停下了進攻的腳步，但是呂布的兵力也不足，不可能全力支援，之後就發生了著名的轅門射戟，袁術軍畏懼呂布的威名不得不退兵，也是因此劉備和呂布算是過了一段「蜜月期」。但是之後因為劉備在小沛大量的招兵買馬讓呂布感到了巨大的危機，所以呂布出兵攻打了劉備，俘虜了劉備的家人，但是在這之後也算是善待劉備的家人。
可以說劉備和呂布的交往過程中，呂布雖然先是偷襲劉備，但是這也算正常的諸侯之間的征伐，而之後對於劉備的保護對於劉備家眷的保護也算是非常到位的，可以說呂布不曾失信失德於劉備。但是後來劉備在跟著曹操擊敗呂布之後卻是力勸曹操殺掉呂布，因此讓呂布大怒，喊出了劉備「大耳賊最不可信」的話。因此「大耳賊」也成為了劉備流傳至今的一個外號。