Hasta ahora en hardy la instalación del modulo passenger era fácil de instalar desde apache o desde gems haciendo lo siguiente:
sudo gem update --system
sudo gem1.8 install rails
sudo gem1.8 install passenger
sudo passenger-install-apache2-module
Otra opcion era instalar libapache2-mod-passenger pero en mi caso como tengo otros modulos instalados y por configuracion no me es posible usar he tenido que hacerlo a mano.