В дебаг-меню Telegram Android появился пункт «Reed all Dialogs», который позволяет отметить все чаты прочитанными.

Чтобы зайти в меню отладки, откройте Настройки и сделайте два длинных тапа по строке с версией приложения.