Railsでデプロイ環境に合わせてrobots.txtを出力するコントローラ ref: http://qiita.com/items/1876

robots_controller.rb

class RobotsController < ApplicationController
  def index 
    render_text = File.read "#{::Rails.root}/public/robots.#{::Rails.env}.txt"
    respond_to do |format|
      format.text { render :text => render_text, :layout => false }
    end
  end
end