Для завершения вопросов необходимо использовать How much или How many. How much используется с неисчисляемыми существительными, а How many - с исчисляемыми.
В данном случае: молоко - это неисчисляемое существительное.
Ответ: How much milk do we need?