El error es que has definido la propiedad `columns` dentro de la propiedad `ajax`.

##Solución:

Debe mover `columns` al mismo nivel que `ajax` (no dentro).

###Ejemplo:

    $('#rank').DataTable( {
      ajax: {
        url: 'table/datos.php',
        type: 'POST',
        dataType: 'json'
      },
      columns :[
        {data: 'nombre'},
        //...