Некорректно сортируется матрица.

#include <stdio.h>
#include <stdlib.h>
#include <time.h>
#define false 0;
#define true 1;
typedef unsigned short bool;
int randInDiapazon();
void sortMatrix(int **, int);
 
int main() {
    int size;
    int ** matrix;
    int i;
    int j;
    srand(time(NULL));
    while (size < 1 || size > 20){
        printf("Enter size of matrix N = ");
        scanf("%d",&size);
        if (size < 1)
            printf ("Incorect size of vector. Please enter again\n");
    }
    //Генерація матриці
    matrix = (int **)malloc(size * sizeof(int*));
    for (i = 0; i < size; i ++){
        matrix[i] = (int *)malloc(sizeof(int));
    }
    printf ("Matrix:\n");
    for (i = 0; i < size; i ++){
        for (j = 0; j < size; j ++)
            matrix[i][j] = randInDiapazon();
    }
    for (i = 0; i < size; i ++){
        for (j = 0; j < size; j ++){
            printf ("%3d ",matrix[i][j]);
        }
        printf("\n");
    }
    sortMatrix(matrix,size);
    
    printf ("\nMatrix after sorting:\n");
    for (i = 0; i < size; i ++){
        for (j = 0; j < size; j ++){
            printf ("%3d ",matrix[i][j]);
        }
        printf("\n");
    }
    return (EXIT_SUCCESS);
}
 
int randInDiapazon(){
    return rand() % 21 - 10;
}
 
void sortMatrix(int **matrix, int size){
    int i;
    int j;
    int k;
    int temp;
    for (k = 0; k < size; k ++){
        for (i = 0; i < size; i ++){
            for (j = 0; j < size; j++){
                if(matrix[k][i] > matrix[k][j]){
                    temp = matrix[k][i];
                    matrix[k][i] = matrix[k][j];
                    matrix[k][j] = temp;
                }
            }
        }
    }
}