Двумерный массив, неправильно считается среднее арифметическое

//соседями элемента {A}_{kl} в матрице назовем элементы А с i - 1 = <k = <i + 1, j - 1 = <i = <j + 1, (k, l) != (i, j).
//операция сглаживания матрицы дает дает новую матрицу того же размера каждый элемент который получатся как среднее арифметическое имеющихся соседей соответствующего элемента исходной матрицы.
//Построить результат сглаживания заданной вещественной матрицы размером 10 на 10.
//В сглаженной матрице найти сумму модулей элементов, расположенных ниже главной диагонали
#include <iostream>
#include <conio.h>
#include <time.h>
#define N 10
using namespace std;
int main()
{
    setlocale(LC_ALL, "RUS");
    srand((unsigned)time(0));
    double sum = 0;
    static double A[N][N], B[N][N];
    for (int i = 0; i<N; i++)
    {
        for (int j = 0; j<N; j++)
        {
            A[i][j] = rand() % 10 - 5;
            if (A[i][j]<0)
                cout << A[i][j] << " ";
            else
                cout << " " << A[i][j] << " ";
        }
        cout << endl;
    }
    cout << endl << endl;
    for (int i = 0; i<N; i++)
    {
        for (int j = 0; j<N; j++)
        {
            if (i == 0 && j == 0 || j == N - 1 && i == N - 1 || A[i - 1][j - 1] == 0 || A[i + 1][j + 1] == 0)
                B[i][j] = A[i][j];
            else {
                B[i][j] = (A[i - 1][j - 1] + A[i + 1][j + 1]) / 2;
            }
        }
    }
    for (int i = 0; i<N; i++)
    {
        for (int j = 0; j<N; j++)
            cout << B[i][j] << " ";
        cout << endl;
    }
    for (int i = 1; i<N; i++)
        for (int j = 0; j<i; j++)
            sum += fabs(B[i][j]);
    cout << "\n\nСумма элементов ниже главной диагонали: " << sum;
    
    return 0;
}