Der erste Siedler in Williamstown war Thomas Adams, der den Ort "Victoria Creek" nannte.
Er gründete 1839 eine Siedlung, die später in Williamstown umbenannt wurde. Die Siedlung wuchs langsam, aber 1850 hatte sie bereits etwa 100 Einwohner. Die Nähe zum Hafen und die gute Verkehrsanbindung machten Williamstown zu