こんにちは。エンジニアの佐々です。 ルーターが提供する「アドクロール」は、国内最大級の対応媒体数・収集クリエイティブ数のインターネット広告・アプリ広告クリエイティブデータベースです。膨大なデータを効率良く検索できるよう、 […]
MySQLとPostgreSQLの速度比較をしている記事があまりなかったので、自分で比較してみることにしました。 MySQLのDBは、弊社で標準で使用しているMariaDBを選択しました。 今回行ったことは、同じ環境にM […]
エンジニアの Kanazawa です。弊社のデータアグリゲーション事業では、クローラによるデータの取得から、一部では「名寄せ」を行なうことで、さらに利用価値を高めてデータを提供することも行っております。 このブログでは、 […]
こんにちは。エンジニアの増田です。 昨今、様々なシチュエーションで透明性が叫ばれ、官公庁や地方自治体でもデータ公開が増えております。しかし、外向けのデータ公開に慣れていなかったり、既存ツールの制約上、機械判読が困難なPD […]
Androidデバイスと通信するための多用途のコマンドラインツールであるAndroid Debug Bridge(adb)を使ってWSL(Windows Subsystem for Linux)でAndroidデバイスの […]
はじめに こんにちは、エンジニアのhyodoです。 弊社では広告クリエイティブ収集サービス「アドクロールクラウド」のデータとして膨大な広告データを蓄積しています。 （*2023年9月時点での広告データの総取得数は6.2億 […]
はじめまして、今年の5月から入社しましたエンジニアのmiyakawaです。 WEBスクレイピングにはブラウザを直接立ち上げないと情報を収集できないサイトがあります。そこでブラウザの自動操縦できるライブラリが必要になります […]
はじめに こんにちは。アルバイトの秋山です。 弊社では、Railsを用いてアプリケーションを開発していますが、今回はそんなRailsアプリを運用していく上で避けては通れないRailsのバージョンアップグレードの手順につい […]
はじめに アルバイトのajikiです。 今回は、コマンドラインでクラウドストレージ等のファイルを扱うことが出来る「rclone」を使用して、クラウドストレージサービス「Box」を操作できるようになるまでのconfig設定 […]
サマリー Rubyで高速にCSVを読み取りたければネイティブモジュールのrscsvを使うと良い。 国税庁法人番号公表サイトの全国法人CSV534万件（1.1G）で都道府県別集計 Pythonの標準CSVでは9秒 それに対 […]
お問い合わせ・ご依頼はこちらから
