Город протянулся на 4 км с северо-запада на юго-восток вдоль реки Квай. Северо-восточная граница города - ул. Сенг-Чхуто-Род идет параллельно реке примерно в 400 м от русла по северо-восточному берегу. Это главная улица Канчанабури. На ней расположен ж/д вокзал. Автовокзал также находится на Сенг-Чхуто-Род в юго-восточной ее части близ городского рынка. От главной улицы к реке ведут многочисленные улочки и переулки. На воде стоят на якоре традиционные бамбуковые плоты. Их тут очень много. На плотах - рестораны или дискотеки. Впрочем, хозяева многих лодок и плотов катают на них туристов. Печально известный Мост через реку Квай находится на северо-западной окраине города.
В 1941-1942 гг. японцы для снабжения оккупационных войск в Бирме пытались построить в джунглях железную дорогу (415 км), названную Дорогой смерти (маршрут проложили англичане в не стали). При помощи этой дороги планировалось обеспечить прямое сообщение между японской военной базой в Сингапуре и индийским фронтом. Одним из важнейших инженерных сооружений на ней должен был стать мост через реку Квай. На его строительстве использовался труд 60 тыс. австралийских, американских, английских военнопленных и сотен тысяч местных жителей. Первые поезда по дороге прошли в октябре 1943 г. В 1944 г. мост был разрушен английской авиацией. Его восстановили после войны как мемориал в память о тех, кто погиб при строительстве. Ежегодно в первую неделю декабря проходит неделя моста через реку Квай, во время которой устраиваются выставки, организуются цвето-музыкальные шоу и инсценируется бомбардировка моста. Бывшие заключенные собираются на солдатском кладбище на траурную церемонию.
Музей Дороги смерти. Основан настоятелем монастыря Чхайчхумпхон в память о военнопленных, погибших при строительстве моста через реку Квай. Экспозиция размещается в длинном бамбуковом П-образном бараке. На стенах развешаны вырезки из газет, картины, фотографии. Описание тропических болезней, укусов ядовитых змей и палящего солнца, которые чаще всего были причиной смерти заключенных. Сильное впечатление производят картины пыток, запечатленные художниками-примитивистами. В экспозиции собраны оружие и военная амуниция времен Второй мировой войны.