Стоит ли изучать JDBC?
jdbc как подсистему стоит изучать только если есть желание написать новый драйвер, если вдруг такого еще нет или улучшить существующий.

а сам интерфейс (который стандарт де-факто) учится быстро и походу изучения бд.
Да, однозначно стоит. Можете также взять и написать пару пет-проектов с использованием jdbc + mysql, postgres и т.д.
Также вдобавок будет очень полезным, если вы изучите такие технологии, как Hibernate (ORM), EclipseLink