Question

почему не по себе пишется раздельно?

Answer 1

по после "не" и перед "себе" есть предлог "по"

Answer 2

не с местоимениями пишется раздельно,кроме того здесь предлог ПО
более того, это фразеологизм(устойчивое сочетание) не по себе, не в себе и т.д.