Можно ли не марковский процесс представить как марковский?

Да, немарковский процесс можно представить как марковский. yandex.ru Для этого в описание состояния системы добавляют скрытые переменные. yandex.ru Например, если состояние системы частиц в каждый момент времени описывается наблюдаемыми переменными (координаты частиц) и скрытыми (их скорости), то процесс становится марковским: зная координаты и скорости в текущий момент, можно рассчитать их значение для следующего момента. yandex.ru

Также в некоторых случаях немарковский процесс можно свести к марковскому искусственно, если число состояний системы не очень велико, а потоки событий, участвующие в задаче, представляют собой (точно или приближённо) потоки Эрланга. scask.ru Тогда в схему возможных состояний системы вводят фиктивные «псевдосостояния», что позволяет свести немарковский процесс к марковскому и описать его с помощью обыкновенных дифференциальных уравнений. scask.ru