Скажите, как написать правильно: нужно выпить сладкого "чая" или "чаю"?

Оба варианта корректны. В современном литературном языке в письменной речи преобладает форма чая, но в разговорной речи часто употребляется чаю.