Почему такое название, если там продают алкоголь? Всё дело в том, что в русских чайных до 1917 года действительно продавали лишь чай и сопутствующие продукты. Запрещалось продавать вино, водку, пиво. После 1917 года запрет на продажу алкоголя сняли, а название осталось.
Найдено здесь:
https://vk.com/russe?w=wall-180852721_16117