Иван, если говорить о шизоидном расстройстве, многие люди живут с этим всю жизнь, не считая это проблемой. Поэтому, отвечая на ваш вопрос:
"Стоит ли мне переживать из-за этого и как-то менять свою жизнь или же стоит не думать об этом и продолжать жить так же асоциально?"
Это решать только вам. Если человек адаптируется в обществе так, что ему это не мешает, то и беспокоиться не о чем. Если же вы чувствуете, что вам это мешает, ограничивает по жизни, снижает качество жизни - тогда есть смысл задуматься насчет терапии и устранить эту проблему.