Lênh đênh qua cửa Thần Phù 
Khéo tu thì nổi vụng tu thì chìm. 
(Ca dao cổ) 
  
Theo thư tịch cổ, đầu Công nguyên vùng biển Thần Đầu (đến thời Lê đổi tên gọi là cửa Thần Phù) nằm trên đường hành quân xâm lược của Đại Hán do lão tướng Mã Viện cầm đầu.

Tháng 11 năm 43 (SCN), sau khi tiêu diệt xong lực lượng kháng chiến của Hai Bà Trưng, Mã Viện trực tiếp chỉ huy 20.000 quân cùng 2.000 tàu thuyền lớn nhỏ tiến vào Cửu Chân (Thanh Hoá) tiến đánh lực lượng kháng chiến của lão tướng Đông Dương bằng hai đường thuỷ, bộ. Cánh quân bộ bị chặn đứng lại trước núi rừng vùng Tam Điệp ngày nay. Cánh quân thuỷ bị chao đảo trước sóng to, gió lớn của biển Thần Đầu (Thần Phù). Mã Viện phải sai quân đào sông qua dãy núi đá vùng này mà thư tịch cổ gọi là Tạc Khẩu.

Vào cuối thế kỷ thứ X, khi Đinh Tiên Hoàng vừa mới mất (năm 979), tên phản thần Ngô Nhật Khánh cùng quân Chiêm Thành tiến ra Hoa Lư đánh tiêu diệt triều nhà Đinh, nhưng vừa tới cửa Tiểu Khang (cửa Thần Phù) thì bị gió bão đánh chìm. Nhật Khánh chết đuối, chúa Chiêm may mắn thoát nạn.

Địa danh Thần Đầu (Thần Phù), cửa biển Tạc Khẩu, cửa Càn… vẫn trường tồn trong lịch sử vùng quê Ninh Bình. Những chứng tích lịch sử mà  Thần Phù ghi nhận là niềm tự hào của quân dân ta trong sự nghiệp bảo vệ quê hương, đất nước.