4. Мы читали книгу ... водой, май ... травой.

У воды, в траве.
Предлог "у" указывает на близость, предлог "в" - на нахождение внутри.