Đường viền của Quận Smith gần như là một hình tứ giác dài 30 dặm về phía bắc và nam, và 22 dặm về phía đông và tây. Khu vực này là khoảng 660 dặm vuông. Nó có các quận sau cho ranh giới: Scott ở phía bắc, Jasper ở phía đông, Jones và Covington ở phía nam, và Simpson và Rankin ở phía tây.