El tipo de mareo que describes no es normal, además dado que esta asociado a pérdida de equilibrio e inestabilidad, podría tratarse de un Vértigo. Los vértigos no siempre tienen su origen en el oído, aunque la mayoría sean así, existe otro porcetanje que tiene origen en el cerebro. Realmente no creo que los nervios sean la causa, considero que lo que tienes debe ser estudiado más a fondo, sugiero que consultes inicialmente con un médico general y un otorrinolaringólogo, si no se encuentra la causa con un neurólogo.