Поселение Ко Паньи было основано в конце 18 века кочевым малайским рыбаком[1]. На малайском языке Ко Паньи был известен как Пулау Панджи. Именно в этот период времени местный закон ограничивал владение землёй — оно было доступно исключительно людям тайского национального происхождения. Именно поэтому поселение, населённое преимущественно из малайцами, было построено на сваях в пределах защиты залива, в котором находился острова. Такое расположение обеспечивало лёгкий доступ рыбаков к нему. С увеличением благосостояния общества и в связи с развитием туристической индустрии в Таиланде, покупка земли в Ко Паньи стала возможной, за которым последовали постройка первых соответствующих зданий: мечети и колодца с пресной водой.