Viết tiếp cho đoạn này - Năm 1850, Penniman đánh bại đảng Dân chủ đương nhiệm Alexander W. Buel để được bầu làm một đảng Whig từ khu vực đại hội thứ 1 của Michigan vào Quốc hội thứ Ba mươi hai, phục vụ từ ngày 4 tháng 3 năm 1851 đến ngày 3 tháng 3 năm 1853. Ông là công dân Plymouth đầu tiên được bầu vào Quốc hội Hoa Kỳ. Ông không phải là ứng cử viên tái bổ nhiệm vào năm 1852. Ông là một thành viên của hội nghị đã gặp nhau dưới cây sồi ở Jackson, Michigan, ngày 6 tháng 7 năm 1854, tại tổ chức của Đảng Cộng hòa ở Michigan. Ông là đại biểu của Đại hội Quốc gia Cộng hòa năm 1856
từ Michigan.