Ce pantalon traditionnel japonais était, originellement, porté aussi bien par les femmes que par les hommes. Le hakama perdit progressivement son caractère unisexe à partir de la fin de l'ère Edo (1603 à 1868 ap. J.-C.). A titre d'exemple, au début de l'ère Meiji (1868 à 1912 ap. J.-C.), en dehors des hommes, les hakama ne sont plus portés que par les femmes professeurs et les étudiantes. Au XIXème siècle, le Hakama devient essentiellement un vêtement masculin. S'il est aujourd'hui porté que par les hommes, il existe cependant deux exceptions. Ces exceptions s'expliquent évidemment par l'origine historiquement unisexe du Hakama. Ainsi, les femmes pratiquants les arts martiaux (kendô, aïkidô, kenjutsu et jiu jitsu) sont autorisées, à l'instar des hommes, à porter ce vêtement. Le Hakama continu aussi a être revêtu par les servantes des sanctuaires shintô (miko) et à de très rares occasions lors de la cérémonie du thé.