カテゴリー: インフラ/運用
topコマンド、psコマンドでサーバ上の高負荷なプロセスを探してkillする – Linux編
こんにちは。学生アルバイトの大木です。 突然ですが、皆さんは自分のパソコン以外のサーバを使っていますか？また、そのサーバのスペックはどれくらいですか？最近では、ノートパソコンでもメモリが8GB程度あるのが一般的であったり […]
[運用初心者必見] これだけやれば安心、たった3行でRubyからSlackエラー通知
こんにちは、エンジニアの大壁です。 運用の段階ではプロセスが停止しないように、あるいは停止してもすぐ気付けるように気を配る必要があります。 慣れないうちは中々難しく、一日中サーバーに張り付いている訳にもいかずお困りの方も […]
Chromeの自動アップデート停止と、バージョン指定インストールの方法@Mac環境
こんにちは。アドクロールチームに所属しておりますエンジニアのinoueです。 日々の業務として、広告情報分析のためのクローラー開発・保守に取り組んでいます。 ルーター社では、seleniumというWebアプリケーションを […]
AWS Lambda上のヘッドレスChromeとPuppeteerでサーバーレススクレイピング
こんにちは、ルーターのSakaeです。 IT業界ではその時代時代に流行する単語というものがあり、新たな言葉が日々生まれては、そのうちいくつかが大流行し、そしてまた新しい言葉の登場により、古い言葉が忘れさられていきます。 […]
Chromeにプロキシを設定して、アクセス元IPアドレスを変更する方法ーselenium、curlのプロキシ設定含むー
rooterエンジニアのtoyamaです。 みなさんは大学内や会社内など限られた場所からしか見れないページを自宅から見たいと思ったことはないでしょうか？この方法として、すでに大学や会社のネットに接続されているパソコンをリ […]
Apache BenchによるWeb APIのストレステスト入門
こんにちは、学生アルバイトのohkiです。弊社では、クローリングによるRPAのために、Web APIなどをご提供する機会も多いのですが、その際にWebサーバがどこまでの負荷に耐えられるか、パフォーマンスはどうかを気にしな […]
MacでPIDファイルによるエラーでmysqlを起動できない時の対処法 (ERROR! MySQL server PID file could not be found!)
こんにちは、学生アルバイトのohkiです。 皆さんはノートパソコンを持っていますか？windowsですか？Macですか？私はMacを使っています。 ちなみに弊社では、Macユーザーが多いです。Macユーザーの特権はseq […]
クローラーの負荷監視に便利なSNMPの簡易Rubyラッパー
こんにちは。エンジニアのAraoです。今回は、簡易的なSNMPのRubyラッパーを紹介します。随分と間が空いてしまいましたが、SNMPでサーバーのモニタリングの続きになります。 本記事で実現したいこと 前回記事で、Net […]