Бронзовый барабан культуры Донгсон (500 - 100 лет до н.э.), найденный на острове Самуи, свидетельствует о раннем заселение острова мусульманскими морскими цыганами, происходящими с малайского полуострова, более чем 2000 лет назад. Очень вероятно, что эти поселенцы также посещали близлежащий остров Кох Пханган. Однако, более современная история Кох Пханган начинается чуть более 600 лет назад. Проплывающие мимо монахи обратили внимание на тихую уединенность, естественную красоту и духовный потенциал острова и основали буддийский центр медитации недалеко от места, где сейчас находится Тхонг Сала, там, где теперь стоит храм Ват Пху Као.

Историки и археологи считают, что первые настоящие поселения на острове были основаны около 200 лет назад китайскими иммигрантами из Хайнаня. Поначалу они существовали за счет рыболовства, но вскоре после этого началась эксплуатация месторождений железной руды на острове, а также производство кокосового масла. Свидетельством разработки олова на острове Кох Пханган на сегодня является единственное пресноводное озеро на мысе севернее от Сри Тхану. Благодаря этому времени остров получил свое название, которое означает как ''белая песчаная полоса - остров''.

Остров Кох Пханган в течение последних 140 лет регулярно был посещаем тайской королевской семьей: самые популярные тайские короли Таиланда, включая нынешнего регента, посетили остров. Король Рама V Чулалонгкорн за время своего правления с 1869 по 1910 посетил остров 14 раз. Обычно корабль вставал на якорь перед Тхан Садет. С тех пор река называется в переводе с тайского ''Королевская река'', прозрачные воды которой считается священным потоком. Недалеко расположенные от побережья водопады, очаровав своим видом правителей Таиланда, сподвигли из на многочисленное восхождение вдоль потока . Офицер, сопровождающий короля, документировал, что в это время на острове Кох Пханган проживало примерно 300 семей, в основном тайцы и китайцы.

Три последних преемника, король Рама VI Вачиравудх (1910-1925), король Рама VII Прачадипок (1925-1935), а также почитаемый его подданными король Таиланда Рама IX Пумипон Адульядет были также очарованы красотами острова Кох Пханган и посещали регулярно остров во время своего правления.

Развитие современных транспортных средств, которые упростили путешествия до сильно удаленных стран, разительно увеличило с середины 80-х годов поток первых туристов, что фундаментально повлияло на развитие острова. Сначала это были путешествующие по Азии хиппи, которым местные жители острова стали предлагать комнаты в бамбуковых хижинах. Надо заметить, что в то время на острове не было электричества, а также других современных удобств сегодняшнего времени. В скором времени приступили к развитию инфраструктуры острова и, как результат этой модернизации, наряду с электричеством, остров предлагает полный ассортимент туризма с проживанием, ресторанами и барами, развлечениями любого уровня цен и стиля.

Введение постоянных массовых вечеринок каждую ночь полнолуния (и также каждую ночь с полумесяцем, новой луной и другими лунными ночами) на пляже Хат Рин с конца 80-х годов посодействовали, хотя и сомнительной репутацией, но международной известности. И то, что Кох Пханган был одним из основных мест съемки знаменитого голливудского фильма "Пляж", поспособствовало еще большей знаменитости острова на международном уровне.