カテゴリー: RPA
Apache BenchによるWeb APIのストレステスト入門
こんにちは、学生アルバイトのohkiです。弊社では、クローリングによるRPAのために、Web APIなどをご提供する機会も多いのですが、その際にWebサーバがどこまでの負荷に耐えられるか、パフォーマンスはどうかを気にしな […]
【selenium X ruby X chrome】 profileを使用してログインをパスする
エンジニアのTakahashiです。 selenium/chromeで毎回ログインしたく無い場合があります。例えば、ログインフォームのセキュリティチェックが厳しい場合や、単に面倒臭い場合など。。 そのような場合に、Coo […]
seleniumでログインやスクロールが必要なSNSサイトのスクレイピング
こんにちは。学生エンジニアのhashimotoです。もう平成最後の年末ですね。 今回は、「selenium（セレニウム）を使ってSNSサイトにログインし、タイムラインをスクロールして自動取得する」という流れをご紹介します […]
Sinatra x Puma x Nginxで簡単軽量APIを構築する
お久しぶりです、スクレイピングエンジニアのSakaeです。 弊社の自慢であるクローリングを簡単に説明すると、Web上の公開データをスクレイピングで集めてくることと言えます。が、このクローリング技術を応用することで、普段人 […]
複数サーバー処理のRPAで処理の重複を防ぐ
こんにちは。株式会社ルーターのエンジニアTakahashiです。 弊社はサイトコントローラーを始めとしたRPAを得意としております。今回はRPAを行うサーバーの負荷分散に関する実装についてです。 RPAの実装 弊社では、 […]
Firebase〜概要とGoogle Home試作品アプリ紹介〜
株式会社ルーターでエンジニアをしておりますTakahashiです。 突然ですがFirebaseをご存知でしょうか。MBAASと呼ばれる、モバイルアプリケーション開発のバックエンド側のインフラを提供するサービスです。htm […]
記事投稿のRPA自動化にも最適なMovable Type Data API 応用編
こんにちは、学生エンジニアのKawaguchiです。 今回は、curlだけでMovable Typeに記事を投稿する方法の応用編についてです。 Movable Type Data API ドキュメントの中から一部だけ紹介 […]
Movable Typeの記事をjson形式で出力する方法
こんにちは。エンジニアのohkabeです。 ブログの記事をフィードしたいと思ったことはありませんか今回はMovable Typeの記事をjson形式で出力する方法を紹介します。今回扱うテンプレート機能を使った方法では 記 […]