ну как вариант такой образ мысли.
Можно, но это уже не будет ваш дедушка.
всё сущее всего лишь вероятности/измерения.
изменяя прошлое вы всеголишь порождаете другую вероятность.
Само ваше появление в прошлом породит другое течение событий, и это уже будет не ваше прошлое, а совершенно другое ответвление реальности. Убив человека, который в вашей реальности - ваш дедушка вы породите другую реальность в которой вас(ребенком) нет, есть вы из "будущего", которое никогда в этой вероятности не наступит.

з.ы. если придерживаться такой теории, то путешествие во времени не имеет смысла для текущей реальности, поскольку вернуться в "свою" реальность не удастся.