「阿哥所」並非指某一特定的建築，而是清代對皇子固定住所的通稱。
這個術語的意思類似於「冷宮」，後者用於指代被囚禁或失寵妃嬪的住所，儘管「冷宮」並非指一個具體的地點。在清代，皇子出生後，妃位以上的嬪妃所生的皇子通常由其生母撫養至6歲，之後會被送往妃位以上的養母處撫養。例如，雍正帝在出生時由孝懿仁皇後撫養，而他的弟弟十四阿哥則由其生母德妃親自撫養。
此外，「阿哥所」一詞還源於藏語中的「阿」和「哥」兩個字，其中，「阿」意為尊敬、敬畏，而「哥」是對男性的尊稱，因此，「阿哥」一詞可以理解為對男性長者或領袖的尊敬稱呼。在承德避暑山莊，也有一組古建築被稱為「阿哥所」，這裡是清朝皇子學習和居住的地方，康熙、乾隆、嘉慶等皇帝的皇子曾在此接受正規的教育。