Çünkü haritanın üzerinde #map id'li div var. Bu div tüm haritanın üzerini kapatıyor. Eğer boyutunu küçültürseniz veya içindeki sol-sağ divlerine position:relative kullanırsanız harita hareket ettirilebilir.

Şöyle bir şey olabilir. Ortadaki boş alan üzerinden hareket ettirilir.

https://jsfiddle.net/tehet/8oegwsd0/21/