Сократить количество итераций в циклах проверки элементов массива на симметричность

#include <iostream>
#include <locale>
 
 
using namespace std;
 
int main()
{
    setlocale(LC_ALL, "rus");
    int M ;
    int N ;
    int i, j;
    int** matrix;
    cout << "Введите количество строк/столбцов ";
    cin >> M;
    N = M;
 
    matrix = new int*[M];
    for ( i = 0; i < M; i++)
        matrix[i] = new int[N];
 
    for ( i = 0; i < M; i++)
        for ( j = 0; j < N; j++)
        {
            cout << "Введите элемент " << "[" << i << "][" << j << "]  ";
            cin >> matrix[i][j];
        }
 
 
 
        cout << endl;
        for ( i = 0; i < M; i++)
            for ( j = 0; j < N; j++)
            {
                cout << matrix[i][j];
            }
        
        for (int i = 0; i < N; i++) {
            for (int j = 0; j < M; j++) {
                if (matrix[i][j] != matrix[j][i])
                {
                    matrix[i][j] = 0;
                    matrix[j][i] = 0;
                }
            }
        }
        cout << endl << "Матрица отсортированная по главной диагонали\n";
        for (i = 0; i < M; i++)
            for (j = 0; j < N; j++)
            {
                cout << matrix[i][j];
            }
        for (int i = 0; i < N; i++)
            for (int j = 0; j < M - i; j++)
                if (matrix[i][j] != matrix[N-1-j][N-1-i])
                {
                    matrix[i][j] = 0;
                    matrix[N - 1 - j][N - 1 - i] = 0;
                }
                
 
        cout << endl << "Матрица отсортированная по побочной диагонали\n";
        for (i = 0; i < M; i++)
            for (j = 0; j < N; j++)
            {
                cout << matrix[i][j];
            }
 
        for (i = 0; i < M; i++)
                    delete[] matrix[i];
            delete[] matrix;
            system ("pause");
            return 0;
}

for(i=0; i <=N/2; i++) {
  for (j=i; j<=N-i-1; j++) {
    if (m[i][j]!= m[j][i] || m[i][j] != m[N-j-1][N-i-1] || m[N-i-1][N-j-1]) ...
  }
}