তুরাগ তীরে প্রস্তুত ইজতেমার মাঠ, আসতে শুরু করেছেন মুসল্লিরা