ในช่วงทศวรรษแรกของการก่อตั้ง คณะอักษรศาสตร์และวิทยาศาสตร์เปิดสอนที่วังกลางทุ่ง หรือวังวินเซอร์ของสมเด็จพระบรมโอรสาธิราชเจ้าฟ้ามหาวชิรุณหิศ (ปัจจุบันตัวตึกรื้อออกแล้ว อยู่บริเวณสนามศุภชลาสัย กรีฑาสถานแห่งชาติ) ต่อมาเมื่อมูลนิธิร็อกกีเฟลเลอร์ให้ความสนับสนุนจุฬาลงกรณ์มหาวิทยาลัยและสร้างตึกใหม่อีกหนึ่งหลัง ปัจจุบันคือตึกชีววิทยา คณะวิทยาศาสตร์ หรือที่มักเรียกกันว่า "ตึกขาว" คณะอักษรศาสตร์และวิทยาศาสตร์จึงย้ายมาที่ตึกหลังนี้ในพ.ศ. ๒๔๗๑ และในปีต่อมา คือ พ.ศ. ๒๔๗๒ วิชาอักษรศาสตร์ได้ย้ายมาทำการสอนที่ตึกบัญชาการ ซึ่งเป็นตึกหลังแรกของจุฬาลงกรณ์มหาวิทยาลัยที่เดิมเป็นที่เรียนของนิสิตคณะรัฎฐประศาสนศาสตร์และคณะวิศวกรรมศาสตร์ ดังนั้นตึกนี้จึงกลายมาเป็นตึกอักษรศาสตร์ ๑ หรือเป็นที่รู้จักกันในนาม "เทวาลัย"
ส่วนตึกอักษรศาสตร์ ๒ มีรูปแบบทางสถาปัตยกรรมเช่นเดียวกับตึกอักษรศาสตร์ ๑ สร้างแล้วเสร็จใน พ.ศ. ๒๕๐๐ เพื่อเป็นหอสมุดกลางของจุฬาลงกรณ์มหาวิทยาลัย แต่ส่วนหนึ่งได้ใช้เป็นห้องเรียนและห้องพักอาจารย์ของคณะอักษรศาสตร์ด้วย เนื่องจากตึกนี้มีทางเชื่อมกับตึกอักษรศาสตร์ ๑ ต่อมาเมื่อหอสมุดกลางย้ายไปยังสถานที่แห่งใหม่ คือ อาคารมหาธีรราชานุสรณ์ จุฬาลงกรณ์มหาวิทยาลัยจึงได้มอบตึกหอสมุดกลางแก่คณะอักษรศาสตร์
สำหรับตึกอักษรศาสตร์ ๓ เป็นตึก ๒ ชั้น เดิมเป็นตึกของคณะพาณิชยศาสตร์และการบัญชีซึ่งต่อมาได้ย้ายไปยังสถานที่แห่งใหม่ใกล้บริเวณแยกสามย่าน จุฬาลงกรณ์มหาวิทยาลัยจึงได้โอนมาให้คณะอักษรศาสตร์เช่นกัน
ใน พ.ศ. ๒๕๑๕ คณะอักษรศาสตร์ได้รับงบประมาณสร้างอาคารเรียนหลังใหม่อีก ๑ อาคาร เป็นตึก ๓ ชั้น ตึกนี้คือตึกอักษรศาสตร์ ๔ สมเด็จพระนางเจ้ารำไพพรรณี พระบรมราชินีในรัชกาลที่ ๗ ได้เสด็จพระราชดำเนินมาทรงวางศิลาฤกษ์เมื่อวันที่ ๒๕ มกราคม พ.ศ. ๒๕๑๖
สภาพทางกายภาพของคณะอักษรศาสตร์คงเป็นเช่นนี้ต่อไปประมาณ ๒๐ ปี และเริ่มเปลี่ยนแปลงอีกครั้งเมื่อมีการรื้อตึกอักษรศาสตร์ ๓ เพื่อสร้างอาคารบรมราชกุมารี ซึ่งเป็นอาคารเรียนรวมทางด้านมนุษยศาสตร์ของมหาวิทยาลัย และเมื่อภาควิชาต่างๆ ของคณะอักษรศาสตร์พร้อมทั้งห้องพักอาจารย์ได้เข้าใช้พื้นที่ชั้น ๘-๑๒ ของอาคารบรมราชกุมารีใน พ.ศ. ๒๕๓๗ แล้ว ส่งผลให้คณะอักษรศาสตร์ต้องมอบตึกอักษรศาสตร์ ๑ ให้แก่มหาวิทยาลัย ส่วนตึกอักษรศาสตร์ ๒ ยังคงเป็นของคณะอักษรศาสตร์ โดยเป็นที่ตั้งของสำนักคณบดี สำนักงานเลขานุการคณะ และศูนย์สารนิเทศมนุษยศาสตร์หรือห้องสมุดคณะอักษรศาสตร์ อย่างไรก็ตาม ในปัจจุบันตึกอักษรศาสตร์ ๑ และ ๒ ได้เปลี่ยนชื่อเป็นอาคารมหาจุฬาลงกรณ์และอาคารมหาวชิราวุธตามลำดับ
ครั้นเวลาผ่านไปจนถึง พ.ศ. ๒๕๕๑ ตึกอักษรศาสตร์ ๔ ก็ไม่สามารถรองรับการใช้งานของคณะอักษรศาสตร์ได้อย่างเพียงพอ จึงได้รื้อถอนและสร้างตึกใหม่ ๙ ชั้นทดแทน คือ อาคารมหาจักรีสิรินธร ซึ่งแล้วเสร็จและเข้าใช้งานได้ใน พ.ศ. ๒๕๕๔