Есть в Excel функция Вставка-символ. Вам будет представлено меню, где вы можете выбрать стрелку по вкусу. Затем этот символ из ячейки можно скопировать в числовой формат в ословном форматировании, и, соответственно, присвоить ей нужный цвет.  
Единственное неудобство - ячейка, где выводятся стрелки недолжны быть пустыми (т.е. содержать хотя бы 0)