Когда впервые англичане прибыли на острова, здесь проживало 12 племен, которые делились на три группы: североандаманскую, южноандаманскую и группу племен онге. Племена дробились на более мелкие родовые подразделения — кланы, причем каждый из них имел своего вождя. Кроме того, аборигены Андаманских островов делились на ариото — жителей побережья и эремтага — обитателей джунглей или тех, кто жил в районах, расположенных далеко от прибрежной полосы. Обе эти группы постоянно враждовали.
Различие между ариото и эремтага заключалось главным образом в способе добывания пищи. Главный источник пропитания ариото — море, поэтому они были отличными пловцами и ныряльщиками. Ариото умели прекрасно ловить рыбу и стрелять из лука и выглядели более крепкими. Эремтага великолепно ориентировались в джунглях, знали гораздо больше о флоре и фауне, чем ариото, и проявляли большую сноровку в охоте на кабанов.
Ранее существовало мнение, что андаманцы — пигмеи, но это не так. Согласно М. В. Портмену, проведшему довольно тщательное и детальное изучение андаманцев, средний рост мужчины составлял 4 фута 10,5 дюйма, а женщины—4 фута 6 дюймов. Среди андаманцев встречаются мужчины, чей рост выше 5 футов. Вес взрослого андаманца колеблется от 85 до 100 фунтов.
Доктор Ф. Муат писал, что андаманцы идеально сложены, конечности у них вполне совершенной формы. Они так же изящны, как и любой европеец.
В свою очередь, М. В. Портмен отмечал, что андаманские мужчины и молодые женщины имеют приятную внешность. У некоторых из них хорошо очерченные носы, тонкие губы, небольшой рот, белые зубы, глаза с блеском и даже очень красивые фигуры. Но в то же время он добавлял, что старые люди зачастую с годами становятся безобразными.
Андаманцы вовсе не носят одежды, плохо переносят жажду и голод. Они валятся от усталости, если не поспят сутки, хотя во время празднеств могут танцевать порой по четверо суток.
Половая зрелость у андаманцев наступает в возрасте около 15 лет, но женятся они лет в 25. Среди андаманцев весьма распространены половые сношения до замужества, но, как только молодые вступают в брак, супружеская верность строго соблюдается. Измена жены может грозить смертью ей и, возможно, ее любовнику. Развод здесь практически неизвестен, так же как и кровосмешение. Первое имя ребенок получает еще в утробе матери, второе — после рождения; оно указывает на его пол. Женщинам также дают имена цветков; это делается в период менструации — молодую девушку называют по имени цветка, который распускается в тот период.
