民間把「關張趙馬黃」稱為蜀漢的「五虎上將」，《三國誌》也把他們五人合為一傳，但也有人認為這裡面應該剔除趙雲，原因是「劉備並不喜歡他」，在劉備生前「趙雲的地位也不高」，沒有資格並列，有著名學者為此提出了「四虎上將」的新說法。
有類似看法的人還不在少數，那麼真相究竟如何呢?
一：早年跟劉備是同事
趙雲是冀州刺史部常山國真定縣人，即今石家莊一帶。《雲別傳》說他長得高大挺拔、儀表堂堂。常山國屬冀州刺史部，漢末爭雄時屬袁紹的勢力範圍，但當地有一部分人不滿袁紹，他們聚集起來投奔袁紹的對手公孫瓚，這些人推舉趙雲為首領。
從這個記載可以看出兩件事：一是趙雲在當地深得民望，所以大家才推舉他;二是趙雲此時應該沒有什麼官方職務，如果有，應該是袁紹任命的，但史書沒有提到過。
趙雲率眾人來投，公孫瓚很高興，跟趙雲開玩笑道：「聽說你們家鄉的人都投靠了袁氏，你怎麼偏偏回心轉意跑到這裡來呢?」趙雲回答：「天下哅哅，也沒人知道誰對誰錯，只知道老百姓正忍受倒懸之難。我們那裡的老百姓都議論，看誰能施行仁政，倒不是對袁公有成見而私心於您。」從這些話裡可以看出趙雲挺有個性，不挑領導喜歡的話說。
之後趙雲擔任什麼職務不詳，在此前後劉備也帶著關羽、張飛等人投靠公孫瓚，趙雲與他們是同事關係，互相接觸後雙方印象特別好，《雲別傳》說「得深自結托」。
根據《三國誌》記載，公孫瓚派劉備隨田楷到青州發展，並派趙雲協助劉備，統領劉備手下的騎兵，稱趙雲此時在劉備手下「主騎」，有人把它理解是個職務，相當於劉備的衛隊長，但考慮到劉備此時還只是公孫瓚手下的「別部司馬」，即獨立團團長，這種理解略顯牽強。
關羽、張飛這時的職務也不詳，劉備是個團長的話，他們大概也只是營長、連長的角色，與「主騎」趙雲差別不大。
二：被關羽和張飛拉開距離
可惜沒多久趙雲就走了，《雲別傳》說趙雲的哥哥這時突然去世，趙雲向公孫瓚請了假，回常山國老家奔喪。
常山國那時已完全控制在袁紹手中，趙雲此去還能不能回來難以預料，劉備依依不捨，與趙云「捉手而別」，趙雲也深為感動，告訴劉備「我永遠不會忘記您的恩德」。
二人雖然是同事，但趙雲已經把劉備視為上級了。此後趙雲回家鄉真定縣料理兄長的喪事，此後多年裡便沒了消息。劉備率關羽、張飛轉戰徐州，因偶然的機緣劉備突然當上了徐州刺史，地位驟增，關羽、張飛的職務也隨之提高，關羽甚至代理過郡太守。
後來劉備投靠曹操，曹操以朝廷的名義正式任命劉備為左將軍，相當於大軍區司令;任命關羽為偏將軍，相當於副軍長;任命張飛為中郎將，相當於師長。
之後劉備與曹操鬧翻，轉去冀州投靠了袁紹，一直在冀州老家的趙雲聽說劉備來了，立即動身前來相見。《雲別傳》記載他們重逢的地點是袁紹的大本營鄴縣。
見面後劉備特別高興，一刻都捨不得離開趙雲，特別怕他再走，劉備「與雲同床眠臥」。
三：執行過秘密任務
當時袁紹和曹操正準備決戰，劉備的處境很糟糕，甚至很危險，如果曹操獲勝，劉備自然有麻煩，但如果袁紹獲勝，劉備一樣日子不好過。
因為袁紹這個人很賊，表面尊你敬你，但不給你一兵一卒，還暗中監視和提防，所以劉備不得不為自己早做準備。
劉備交給趙雲一項任務，讓他召募人馬，劉備的隊伍已被打散，手下沒有多少人，但如果劉備自己出面募兵，袁紹必定會有警覺和疑慮，趙雲是個新人，目標不大，悄悄做這項工作很合適。
趙雲做得很好，沒用多長時間就召募到幾百人，趙雲私下告訴他們是劉備將軍在召人，這些人「皆稱劉左將軍部曲」。也許是趙雲保密工作做得好，也許是袁紹太忙顧不過來，袁紹對這些事一概不知。
劉備在袁紹那裡呆的時間不長，但已切實感受到了袁紹集團內部的緊張氣氛，派系林立，兄弟不和，勾心鬥角，互相拆台，四周都是挖坑的人，哪天一不小心就得掉進陷阱裡，這樣惡劣的生存環境，還不如當初的許縣。
趙雲的努力果然發揮了重要作用，劉備後來找了個機會脫離袁紹向汝南郡發展，從而避免了與袁軍在官渡前線一同覆滅的命運，而之所以能成功地千里轉戰，與趙雲臨時募來的人馬不無關係。
趙雲此時在劉備手下擔任何職不詳，劉備已與曹操徹底決裂，朝廷不可能再授給趙雲職務，當時又忙又緊張，劉備大概也沒精力考慮趙雲的職務問題，與偏將軍關羽和中郎將張飛相比，趙雲被拉開了很大的距離。
四：得到劉備的絕對信任
讓趙雲大放異彩的是長阪坡之戰，此戰是劉備與曹操本人第三次在戰場上直接交鋒，劉備敗得一塌糊塗。
混戰中，劉備找不到了妻子甘氏和兩歲的兒子阿斗，《三國誌》的說法是「先主棄妻子」。最後劉備與諸葛亮、張飛等數十騎衝出曹軍的包圍圈，曹操把隨同劉備一同南下的十多萬官民百姓以及輜重等全部俘獲。
劉備脫險後清點人數，發現諸葛亮、張飛都在，老婆孩子不在，趙雲也不在。《雲別傳》記載，劉備身邊有人說趙雲已經投降曹操了，劉備聽了很生氣，用手戟敲打說話的那個人：「子龍絕不會棄我而去!」
趙雲確實很英勇，他拚命保護甘氏和劉禪，當時劉備已經往南跑了，趙雲抱著劉禪，保護著甘氏，居然殺出重圍，最後免於一難。
趙雲回來後，劉備大為高興，《三國誌》說劉備臨陣將趙云「遷牙門將軍」，也就是拔此前可能是團長、也可能只是營長的趙雲為軍長。
關羽這時是副軍長，張飛是師長，如果按照《三國誌》的說法，趙雲連升N級，已經後來居上，但其實這是史書的一個誤記。
從字面上看牙門將軍屬雜號將軍，比偏將、裨將要高，但考察一下史書的記載，赤壁之戰後趙雲被任命為桂陽郡太守，那時他才被提拔為偏將，也就是副軍長，明顯存在矛盾。
所以此處「牙門將軍」應該多了一個字，應為「牙門將」。古代君王、將帥的大旗旗桿常以象牙作飾物，故其大旗常被稱為「牙旗」，其營門也稱「牙門」，到南北朝時，「牙門」從軍隊用到了地方上，後來演變出「衙門」一詞。「牙門將」就是守營門之將，並非擁有將軍的軍銜。
五：為何低於「四虎將軍」
赤壁之戰後劉備在荊州站穩了腳，派諸葛亮、趙雲等人收服江南各郡，各郡收服後，劉備提拔趙雲為偏將，以副軍長的身份兼任桂陽郡太守，此時關羽、張飛已升任將軍。
《雲別傳》記載，桂陽郡原太守趙范投降後一心巴結趙雲，他的嫂子樊氏「有國色」，而他哥哥已死，嫂子寡居。趙范想把嫂子嫁給趙雲，被趙雲拒絕。
趙雲不想傷趙范的面子，推辭道：「我和你同姓，你的兄長就好比我的兄長一樣，怎能娶兄嫂?」有人勸趙雲接受，趙雲說：「趙范是被迫投降的，心裡怎麼想還不知道。天下女子多得是，不必著急。」
趙雲這個人，看來很有頭腦，因為後來趙范果然逃亡了。
《雲別傳》記載，劉備率兵入川前特意任命趙雲為留營司馬，類似後方警備司令，讓他協助諸葛亮負責大本營的日常事務。史書認為，劉備之所以做出這項安排，考慮的是他走之後還有一件麻煩事，那就是他的新夫人。
劉備剛娶了孫權的妹妹，這個孫妹妹一向無法無天，劉備在時尚驕橫不法，如果劉備不在跟前，恐怕沒人能夠約束，還不知道會鬧出什麼事來，劉備認為趙雲平時比較威嚴，「必能整齊，特任掌內事」。幸虧這項任命，後來孫妹妹想私自把劉禪帶往江東，被趙雲攔江奪回。
劉備佔領益州後，關羽、張飛二人軍職仍為將軍，諸葛亮被提升為軍師將軍，趙雲被提升為翊軍將軍，黃忠被提升為討虜將軍，魏延被提升為牙門將軍。
這個時候出現了一個罕見的情況：劉備手下幾位重要人物的軍職都一樣，但一樣歸一樣，背後的資歷卻大不相同。
劉備大賞群下，出手十分闊綽，有人還向劉備建議，說成都城裡還有不少官家的房產地產，城外還有許多公家的園地桑田等，不如把這些也分賜給諸將。這樣的提議一般都會受到大家的強烈歡迎，誰反對誰就是跟大家過不去，趙雲不管這些，表示反對，後來劉備採納了趙雲的建議。
劉備漢中稱王后任命關羽為前將軍，張飛為右將軍，馬超為左將軍，黃忠為後將軍，這裡面獨少趙雲，於是成為「趙雲不是劉備心腹」的重要證據之一。
其實，從以上歷史回顧中可以看出，雖然劉備佔領成都後，趙雲在職務上一度追上了關羽、張飛等人，但從資歷上看他還差得遠，無法並列是正常的。
至於馬超，早已是天下知名的宿將，在軍界的資歷遠超關、張;黃忠則有定軍山之戰的首功，與他們並列也是正常的。
六：始終肩負重任
關羽成為蜀漢「武將之首」後即發動了襄樊戰役，開始很順手，但不久便走了麥城，關羽被殺，荊州丟失。
劉備剛從漢中回來，就一心要復仇。復仇前劉備先在成都稱帝，拜馬超為驃騎將軍，張飛為車騎將軍，趙雲的軍職沒有動，還是翊軍將軍，地位甚至低於鎮北將軍魏延，有人認為劉備故意貶趙雲。
其實並非如此，劉備稱帝十分倉促，主要原因有兩個，一是為了整合蜀中力量以伐吳，另一個原因是曹丕突然通過禪讓手段稱帝，劉漢社稷眼看要中斷，劉備稱帝是要把漢室延續起來。
所以這是突然決定的事，除了個別人的職務有所調整外，大多數人都還沒有來得及考慮。至於魏延，因為坐鎮在漢中，實際作用相當於荊州的關羽，所以軍職比較高，這是根據實際需要做出的決定，劉備完全沒有故意貶低趙雲的意思。
劉備要復仇，態度堅決，對任何反對意見一概不聽，但趙雲仍然表達了自己的反對意見。《雲別傳》記載，趙雲勸劉備當前最大的敵人是曹魏而不是孫權，應該先滅曹魏，到那時孫吳不用打自會臣服。
趙雲進一步建議：「當前應當進圖關中，佔據黃河、渭河的上游，從那裡征討曹魏，關東義士必將響應。千萬不能把曹魏擱置起來去伐吳，一旦與孫吳交兵，不能馬上能見分曉啊!」
劉備沒有接受這個意見，出征孫吳也沒帶趙雲，有人認為趙雲因為說話太直已徹底失去了劉備的信任，劉備有意疏遠他，其實也更是誤解。
此時蜀漢能獨擋一面的大將只有張飛、趙雲、魏延等人，張飛已確定隨征，魏延守漢中，益州後方也要有大將留守，趙雲沒參加東征，劉備讓他留守在江州，也就是今天的重慶，以保證東征軍有退路，這個任務當然也很重要。
後來劉備兵敗夷陵，退往白帝城，留守在江州的趙雲星夜馳援，正是因為他率人馬及時趕到，追上來的吳軍才退去。
綜上所述，劉備對趙雲一直很信任，也很看中他的能力和人品，相對於「四虎上將」來說趙雲的職務確實有些偏低，但這是由歷史原因造成的，加上劉備稱王稱帝前後發生的一系列大事都很急迫，劉備不及妥善安排，不能以此為理由懷疑劉備對趙雲的信任和倚重。