Для ответа на вопрос необходимо преобразовать прямую речь в косвенную в прошедшем времени.
My brother asked me <strong>why I had been</strong> so sad the previous day.
Ответ: why I had been