En general no es una buena practica colocar un include usando la ruta relativaabsoluta de una librería externa, las rutas relativas deben usarse solo para los archivos de tu proyecto.
Asi que asumiendo que estas usando qmake para tu proyecto entonces puedes acortar la ruta usando INCLUDEPATH:
*.pro
INCLUDEPATH += /usr/include/python3.6m
y solo usar #include <Python.h>
para incluir la libreria.
Entonces considerando lo anterior solo es necesario cambiar el INCLUDEPATH segun la OS, y qmake lo permite facilmente:
unix{
INCLUDEPATH += /usr/include/python3.6m
}
win32{
INCLUDEPATH += la_otra_ruta
}