Letak Kastil Batavia sudah tidak ada lagi, sekarang letak imaginernya berada di Kampung Tongkol yang tak jauh dari kawasan Kota Tua Jakarta.
Pemandu wisata menceritakan pembuatan tembok pertahanan dibuat karena kota Batavia belum dikelilingi oleh dinding dan adanya ancaman dari kerajaan-kerajaan disekitarnya seperti Banten dan Mataram bahkan Inggris.
Sekitar tahun 1628 -1629, pasukan Mataram melakukan serangan ke kota Batavia. Mengevaluasi dari serangan tersebut pimpinan VOC pada masa itu menilai bagian Timur kota merupakan salah satu titik terlemah pertahanan kota.Â
Kemudian, VOC memutuskan untuk memperkuat pertahanan ke arah Timur. Setelah Gubernur Jenderal Jacques Specx menjabat sebagai Gubernur di Batavia (1629-1632), didirikanlah pagar di bagian timur kota dengan menggunakan tembok dari batu.Â
Tembok kota ini dibangun setinggi 5 meter dengan ketebalan diperkirakan 3 meter yang dilengkapi 15 kubu pertahanan (Bastion) dibeberapa sudut tembok kota yang berbentuk kotak persegi memanjang pada dinding Utara Selatan.Â
Dinding  ini berpangkal dari Kastil / Benteng Batavia yang sudah berdiri lebih dulu yang terletak di ujung muara Sungai Ciliwung di kawasan Sunda Kalapa, kemudian ke Gudang Barat lalu ke Selatan hingga lokasi Stasiun Beos (Kota), lanjut ke Utara hingga Gudang Timur, berakhir di kastil Batavia sisi tenggara.
Pada akhir abad 18 ketika Prancis berkuasa, kondisi keamanan sudah dianggap kondusif dan bentuk peperangan sudah berbeda, sehingga memungkinkan Batavia memperlebar wilayah hingga keluar tembok kota. Perluasan tersebut juga ditambah kondisi kesehatan lingkungan serta sanitasi kota di dalam tembok kota yang buruk.Â
Pengembangan kawasan kota baru yang diberi nama Weltervreden di selatan menjadi penting. Di masa pemerintahan Gubernur Jenderal Deandels ini, Pemerintah Hindia Belanda setelah VOC dibubarkan karena bangkrut dimulai mempreteli tembok kota yang mengengelingi kota Batavia lama dan Kastil Batavia (Heuken, 1983).Â
Batu-batu tersebut sebagian digunakan untuk membangun gedung baru di pusat kota baru Weltevreden (Jakarta Pusat), salah-satunya Istana Deandels (Gedung Kementerian Keuangan seberang lapangan banteng). Tapi Deandles masih menyisakan beberapa bagian dari Tembok Kota Batavia sebagai peninggalan.Â
Ternyata Tembok Kota Batavia masih bisa kita lihat hingga saat ini, walaupun dalam kondisi yang tidak baik. Di antaranya, Tembok Kota sisi Gudang Tepi Barat (Westzijdsche Pakhuizen) dan Tembok Kota sisi Gudang Timur / Gandum (Graan Pakhuizen).