年輕的傅熹年喜歡聽(tīng)他們高談闊論，大家見(jiàn)他后生可教，有時(shí)也特地點(diǎn)撥他一二。張珩告訴他，要想了解中國(guó)古書畫，看兩本書就夠了，一本是日本人1937年出的《支那名畫寶鑒》，一本是商務(wù)印書館1936年出的《參加倫敦中國(guó)藝術(shù)國(guó)際展覽會(huì)出品圖說(shuō)》（書畫冊(cè)）。張珩要他把厚厚的硬皮精裝書《支那名畫寶鑒》拿來(lái)，對(duì)照著書一幅畫一幅畫地為他講解，這回說(shuō)不完下回繼續(xù)，他邊聽(tīng)邊拿鉛筆在書上做記號(hào)。其中就畫一個(gè)圈，特別好的畫兩個(gè)圈。如宋代崔白的花鳥(niǎo)畫名作《雙喜圖》，旁邊用鉛筆注明“真跡”，還有一個(gè)“故”字，意為故宮藏。傅熹年到現(xiàn)在還保留著這兩本書。
傅熹年說(shuō)，前人看書畫有所謂“望氣派”之說(shuō)，鑒定書畫的關(guān)鍵在于見(jiàn)識(shí)真跡。那時(shí)，他得到了一個(gè)極其難得的機(jī)會(huì)。
1952年后，國(guó)家收購(gòu)和個(gè)人捐獻(xiàn)的大量書畫古籍都集中到文物局（后來(lái)全部交給了故宮書畫館），有時(shí)會(huì)有領(lǐng)導(dǎo)和來(lái)參觀。每逢有這樣的好事，長(zhǎng)輩們都不忘叫上他。
“人家當(dāng)然不能為我開(kāi)放，但是有領(lǐng)導(dǎo)來(lái)的時(shí)候，你在旁邊遠(yuǎn)遠(yuǎn)瞧著點(diǎn)，他看完了你過(guò)來(lái)探探頭，這還是可以的?！眳⒂^時(shí)，還能聆聽(tīng)到張珩、徐邦達(dá)等的現(xiàn)場(chǎng)講解。
就這樣，傅熹年看了大量名畫真跡，《千里江山圖》《清明上河圖》《韓熙載夜宴圖》等如今如雷貫耳的“大IP”，他當(dāng)時(shí)都見(jiàn)過(guò)了。

他沒(méi)想到的是，四年級(jí)劃分時(shí)，清華營(yíng)建系已改為純工科的建筑系，沒(méi)有了建筑史。他被分到工業(yè)建筑，畢業(yè)后分配到中國(guó)科學(xué)院土木建筑研究所。幸而1956年9月中科院與清華建筑系合辦建筑歷史與理論研究室，梁思成任主任，傅熹年被所在單位派到這個(gè)研究室工作，得以回到母校清華。他以為終于實(shí)現(xiàn)了研究中國(guó)建筑史的夙愿，但命運(yùn)再一次捉弄了他。
反右運(yùn)動(dòng)中，因一些私下閑談被人揭發(fā)，他被劃成右派，1959年春下放建筑工程部的北京南口農(nóng)場(chǎng)勞動(dòng)。
說(shuō)起這次下放，他只淡淡地說(shuō)工作是“放牛、養(yǎng)豬、種老玉米”。他覺(jué)得自己很厲害的是給母豬接生，十個(gè)八個(gè)呼嚕一下子就生出來(lái)了，“挺好玩的”。下放的近兩年里，他抽空反復(fù)通讀了帶去的《資治通鑒》和宋《營(yíng)造法式》。
1960年10月，他摘掉了右派帽子，返回單位。反右后，建筑歷史與理論研究室已被清華撤銷，經(jīng)梁思成聯(lián)系，傅熹年等非清華人員調(diào)到了建筑工程部所屬的建筑科學(xué)研究院建筑歷史室。工作室的主任是梁思成，副主任是劉敦楨、汪季琦。傅熹年被編入民居研究組，參加了王其明負(fù)責(zé)的浙江民居調(diào)查。

王其明覺(jué)得傅熹年很有鉆勁兒。他是紅綠色弱，考清華建筑系前就有意識(shí)地做“預(yù)習(xí)”，畫畫知道自己哪個(gè)顏色不準(zhǔn)，就注意調(diào)整。她覺(jué)得，傅熹年被劃右派受打擊很大，但對(duì)他來(lái)說(shuō)也算一個(gè)很特殊的成長(zhǎng)環(huán)境，還收獲了知心的愛(ài)人。他劃右派后，要跟在文物出版社工作的女友分手，女友卻堅(jiān)決不改志向，他也毫不動(dòng)搖，兩個(gè)人是等他摘了帽子后才結(jié)婚的。
除了畫圖，傅熹年的文史綜合能力也有了用武之地。在協(xié)助劉敦楨編寫《中國(guó)古代建筑史》時(shí)，他開(kāi)始用研究古建筑的手法來(lái)考察一些重要古代名畫。