Tứ Kỳ nằm hoàn toàn giữa hệ thống sông Thái Bình, đất đai của huyện được hình thành nên nhờ sự bồi đắp hệ thống sông này.
Hầu như xung quanh huyện bốn mặt được bao bọc bởi các con sông của hệ thống sông Thái Bình; chính giữa địa bàn huyện là con sông Tứ Kỳ, chảy theo hướng chủ đạo là Tây sang Đông tạo thành hệ thống đường thủy thuận lợi. Đường bộ có Đường tỉnh 391, chạy theo hướng Tây Bắc - Đông Nam, nối thành phố Hải Dương qua thị trấn Tứ Kỳ với Quốc lộ 10.
Trước Cách mạng tháng Tám (1945), Tứ Kỳ là 1 phủ với 8 tổng chia làm 89 xã. Sau cách mạng Tháng Tám, Tứ Kỳ là 1 huyện; với 26 xã và ổn định đến nay.
Năm 2019, thực hiện chủ trương sắp xếp, giảm đầu mối các đơn vị hành chính, huyện Tứ Kỳ hiện có 22 xã, 1 thị trấn; giảm 4 xã so với trước đây; trong đó, sáp nhập xã Ngọc Sơn vào Thành phố Hải Dương theo Nghị quyết số 788/NQ-UBTVQH14. Huyện có 105 thôn, khu dân cư; giảm 11 thôn, khu dân cư (trong đó, có 03 thôn thuộc xã Ngọc Sơn đã chuyển về thành phố Hải Dương).