参考: http://naoty.hatenablog.com/entry/20111030/1319973849
そのままだと上手く行かなかったけど、factory_girl じゃなくて factory_girl_rails を require すればいいらしい。
db:seeds じゃなくて fixtures:load 的なことをしたい場合は下記の gist 参考にしてやってみる(まだやってない)
https://gist.github.com/brenttheisen/1045588
使い分けとしては以下の様な感じになると思う。