サイトのクロールに今まで使っているのがnode.jsのrequest。非同期処理の書き方がなれないのでsync-requestを使ったり。sync-requestは同期処理っぽくかけるのでかんたんにリクエスト処理がかける。ただ、連続処理をするとメモリを大量に使って止まる。なの…