《富貴貧賤論》的故事主要講述了孔子與顏回的一段對話，其中涉及到對富貴與貧賤的看法。
在對話中，孔子詢問顏回：“你覺得是富貴重要，還是貧賤的日子重要？”顏回答道：“安貧樂道比什麼都好。”孔又問：“如果一個人家境貧困，甚至窮得連飯都吃不上，該怎么辦？”顏回再次回答：“那他就可以和朋友們一起找點樂子，自己也應該樂於窮困。一個人能夠樂於窮困，這便是大丈夫了。”
這段對話反映了古代中國人對富貴與貧賤的觀念，即人們應該以平和的心態看待富貴和貧賤，不應過分追求物質上的富裕，而應注重精神上的滿足。同時，也強調了大丈夫應該具有的品質，即在面對困難和挑戰時，要有勇氣和決心去面對並克服它們。