怎样拒绝领导让你天天搭他车上下班

先说明我两都是男的，请各位不要使用丰富的想象力。

我昨天刚来到某个小镇的工厂做数据统计工作，和厂长也在同一个办公室。
小镇交通特别不方便，路程又有点选。
昨天厂长看见我在等车就拉我一程，今天下班又遇见他。特别巧的是他住的地方离我也近，而且他也是和我一样才来这个小镇不久人生地不熟。他让我以后都搭他车上下班。明天早上在路上等他。
我不知道该怎么拒绝，感觉这样很麻烦他，而且也不知道他真实的想法。