Я разобрался с вопросом сам.
Чтобы DJVU отражалось в области предпросмотра, надо:
в HKEY_CLASSES_ROOT\.djvu\ShellEx\{e357fccd-a995-4576-b01f-234630154e96}
Установить по умолчанию строку: {C7657C4A-9F68-40fa-A4DF-96BC08EB3551}
а в HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows Desktop Search\Previewers\Extension\.djvu
Установить по умолчанию строку: {C7657C4A-9F68-40fa-A4DF-96BC08EB3551}
Если таких разделов нет в реестре, их нужно создать.
А вот с установкой DjVu Shell Extention Pack для x64 не получилось. Я не понял что и куда она устанавливает. Исполняемых файлов нет, только .DLL.