Скачайте плагин для Internet Explorer по следующей ссылке:
http://www.lizardtech.com/download/dl_options.php?page=viewers
после установки плагина файлы формата djvu будут сами открываться в IE
Если установлена смотрелка IrfanView - она позволяет смотреть практически все форматы изображения, в том числе и djvu. Можно смотреть и через плагин к броузерам, но эти два способа медленны.
Но наиболее удобный просмотрщик - WinDjView. Он кстати встроен в файловый менеджер TotalComander. Не требует инсталяции, один раз в нем открыть и привязка готова. Смотрелка быстрая, интерфейс напоминает Adobe Reader.