サーバを更新しました。

これまでクローラはCentOS6.5で動作させていたのですが、CentOS7.4での動作に更新しました。 クロールに用いるウェブブラウザはPhantomJSとSWTの利用を止めてGoogleChrome headlessモードとFirefoxに 統一しました。 AdobeFlashの対応があるため、Firefoxは必要です。

APIサーバはCentOS6.5のままなので、いずれ更新を行わなければなりません。

現在FinalScraper2を開発しています。うまくゆくかどうかはわかりません。