Определение места жительства ребёнка

Здравствуйте. Ребёнок прописан вместе с мной, сожитель - в другом месте. На данный момент проживаем вместе, но через пару дней я собираюсь уйти с ребёнком жить на место пропитки. Значит у ребёнка автоматически определено место жительства с мной? Сожитель (отец ребёнка) вправе забрать его туда где проживает сам? Может ли он без моего согласия изменить прописку ребёнка? В браке не были, соответственно и развода не было. Отцовство установлено и я получаю алименты. Как мне определить место жительства ребёнка с мной и составить график встреч ребёнка с сожителем, так как мне надоело, что он постоянно угрожает, что заберёт ребёнка.