Theo như trong thần thoại Thái Lan kể lại thì đây là một hòn đảo được tạo ra bởi vị thần Tarutao - một vị thần tối cao của Thái Lan được cho là người đã đặt một lời nguyền lên hòn đảo đá này. Bất kỳ khách du lịch Thái Lan nào cũng sợ bị nguyền rủa đeo bám suốt đời nếu đánh cắp những viên sỏi hay hòn đá tại đây để mang về nhà.
Một điều rất thú vị là hàng năm, những người đã lỡ nhặt các hòn đá ở đảo này đã gửi đến trung tâm bảo về công viên quốc gia qua đường bưu điện. Mong muốn những hòn đá được quay về chốn cũ hóa giải lời nguyền để không bị ám ảnh suốt đời.
Bất cứ ai đến thăm hòn đảo này đều phải biết rằng nếu bạn nhặt những hòn đá ở đây về thì có nghĩa là bạn sẽ phải hứng chịu những cơn thịnh nộ của vị thần Tarutao. Đây cũng được coi như là lời cảnh báo đến du khách đi tour du lịch Thái Lan.
Mặc dù là không thể nhặt lấy những viên đá mang về nhà, nhưng bạn có thể chơi với chúng trong phạm vi là ở đảo. Chẳng hạn như đối với người Thái, họ thích sử dụng những viên đá để xây dựng lên những bảo tháp thu nhỏ theo như tín ngưỡng sau đó quỳ trước mặt bảo tháp để cầu nguyện và đặt lại những lời chúc chân thành nhất trên bãi đá.
Còn đối với những du khách du lịch, họ chỉ đơn giản là viết lên những thông điệp ngắn gọn trong màu đá đen trắng xen lẫn, như những bông hoa nổi trên nền đá. Lần lượt những vị khách kế tiếp sau này đến viếng thăm hòn đảo đều làm những điều tương tự, dựa theo những dấu vết mà người viếng thăm trước đó để lại trước khi mà họ rời đảo.
Thật thú vị là khi đến hòn đảo này, người ta thường tìm đến một ông già trên hòn đảo Koh Lipe gần đó để thưởng ngoạn chuyến đi vòng quanh đảo và thường phải mặc cả giá. Mức giá trung bình là khoảng 800 -1000 THB (Bạt Thái Lan) cho một chuyến đi gồm 10 người và cuộc hành trình từ hòn đảo Koh Lipe đến đảo Koh Hingham chỉ mất khoảng 20 phút.