96-6=90(分),90-80=10(分),100-90=10(分),所以六(1)班上学期期末数学考试的平均成绩是90分.如果将小明的96分记作+6分,那么小芳80分应记作-10分,聪聪的100分应记作+10分.故答案为:-10,+10.