RewriteEngine   on
RewriteCond     %{HTTPS}        "off"
RewriteRule     .?       https://%{HTTP_HOST}%{REQUEST_URI}

RewriteRule の matching pattern には「問答無用で」っていう指定ができないので、「.?」にしてみた。