ถึงกระทรวงอื่น ๆ แต่ก่อนก็มีหน้าที่ทางตุลาการต้องชำระคดีอันเนื่องต่อกระทรวงนั้น ๆ แต่ตั้งศาลและสำนักงานกระทรวงที่บ้านเสนาบดีด้วยกัน เพราะฉะนั้น แต่ก่อนมา เสนาบดีจึงบัญชาการกระทรวงที่บ้าน แม้มีสำนักงานอยู่ที่อื่น เช่น กระทรวงมหาดไทยและกลาโหมก็ไม่ไปบัญชาการที่สำนักงาน เจ้าหน้าที่ในกระทรวงต้องไปเสนอราชการและรับคำสั่งเสนาบดีที่บ้านเป็นนิตย์
แต่ตามประเพณีเดิม ข้าราชการกระทรวงต่าง ๆ ตั้งแต่เสนาบดีลงมาได้รับเบี้ยหวัดประจำปี กับค่าธรรมเนียมต่าง ๆ ในการที่ทำ เป็นผลประโยชน์ในตำแหน่ง หาได้รับเงินเดือนไม่
อนึ่ง แต่ก่อนมา การพระคลังกับการที่เกี่ยวกับการต่างประเทศ (อันเรียกว่า กรมท่า) รวมอยู่ในกระทรวงเดียวกัน เจ้าพระยาพระคลัง เสนาบดีจตุสดมภ์ เป็นหัวหน้า
ครั้นถึงรัชกาลที่ ๕ เมื่อ พ.ศ. ๒๔๑๘ โปรดให้แยกการพระคลังจากกรมท่ามาจัดเหมือนเป็นกระทรวงหนึ่งต่างหาก ตั้งสำนักงาน ณ หอรัษฎากรพิพัฒน์ จัดระเบียบในสำนักงานตามแบบออฟฟิศอย่างฝรั่งขึ้นเป็นกระทรวงแรก คือ ให้บรรดาผู้มีตำแหน่งในหอรัษฎากรพิพัฒน์รับเงินเดือนแทนค่าธรรมเนียมอย่างแต่ก่อน และต้องมาทำงาน ณ สำนักงานตามเวลาเสมอทุกวัน ทั้งผู้ใหญ่ผู้น้อย ยกเว้นแต่สมเด็จเจ้าฟ้ากรมสมเด็จพระบำราบปรปักษ์ เวลานั้น ยังดำรงพระยศเป็นกรมพระ ซึ่งเป็นอธิบดีพระองค์เดียว เห็นจะเป็นเพราะทรงพระราชดำริว่า ท่านทรงบัญชาการอยู่ทั้งกระทรวงวังและกระทรวงพระคลัง โปรดอนุญาตให้ทรงบัญชาการที่วังอย่างแต่ก่อน เพราะฉะนั้น ระเบียบสำนักงานที่ใช้ในหอรัษฎาฯ จึงยังเป็นอย่างเก่าเจืออยู่บ้าง
จนถึง พ.ศ. ๒๔๒๘ ทรงพระกรุณา
