Берете раствор на очень мелком заполнителе, разводите пожиже, и затираете им швы прямо по кирпичу. Через некоторое время мокрой тряпкой отмываете кирпич. Попробуйте на небольшом участке - если покатит, то сделаете всю стену. Оставшиеся следы (если будут) можно затереть плиточной затиркой подходящего цвета.