You would strictly have to be agnostic about whether there is a teapot in orbit about Mars, but that doesn't mean you treat the likelihood of its existence as on all fours with its non-existence.
Tarkasti ottaen ihmisen tulisi olla agnostikko sen suhteen, kiertääkö Marsia todellakin teekannu, mutta se ei tarkoita että pitää sen olemassaoloa yhtä vuorenvarmana kuin sen olemassaolemattomuutta.