不是每個單位都必須交的殘疾人保障金。根據《中華人民共和國殘疾人保障法》的規定，只有下列單位才有義務向殘疾人保障中心繳納殘疾人保障金：①就業單位；②高等學校、中等學校、技工學校等招收本地殘疾人就讀的學校；③招收殘疾人專業技術人員的人才交流機構；④殘疾人技能培訓機構。 具體來說，就業單位招聘殘疾人時，應當向殘疾人保障中心繳納殘疾人保障金；學校招收殘疾人就讀時，應當向殘疾人保障中心繳納殘疾人保障金；人才交流機構招聘殘疾人專業技術人員時，應當向殘疾人保障中心繳納殘疾人保障金；殘疾人技能培訓機構培訓殘疾人時，應當向殘疾人保障中心繳納殘疾人保障金。 殘疾人保障金是政府支持殘疾人基礎生活保障的重要資金，也是政府促使就業單位、教育機構、技能培訓機構積極招聘和培訓殘疾人的重要措施。規范殘疾人保障金的繳納，能夠有效地支持殘疾人獲得就業和教育機會，改善殘疾人的基本生活，是政府機構和企事業單位在維護殘疾人群體基本權益方面的重要責任。 拓展知識：殘疾人保障金的繳納，也是政府實施殘疾人社會保障和保障政策的一種重要舉措，它不僅僅是一種資金支持，更是政府對殘疾人群體關愛和社會責任感的體現。同時，政府也要積極倡導企業和社會各界支持殘疾人就業，投入更多的資金和精力，為殘疾人創造更多就業機會，提高他們的生活水平。