我如何改进和缩短下面的算法，该算法比较两个数组并返回它们之间的对称差异？

function symmetricDifference(arr1, arr2) {
  var result = [];

  // 遍历第一个数组，将不在第二个数组中的元素添加到结果数组中
  for (var i = 0; i < arr1.length; i++) {
    if (arr2.indexOf(arr1[i]) === -1) {
      result.push(arr1[i]);
    }
  }

  // 遍历第二个数组，将不在第一个数组中的元素添加到结果数组中
  for (var j = 0; j < arr2.length; j++) {
    if (arr1.indexOf(arr2[j]) === -1) {
      result.push(arr2[j]);
    }
  }

  return result;
}

var array1 = [1, 2, 3, 4];
var array2 = [3, 4, 5, 6];
var difference = symmetricDifference(array1, array2);
console.log(difference); // 输出 [1, 2, 5, 6]