カテゴリー : インフラ/運用
はじめに Dockerは軽量なコンテナ仮想環境で、アプリケーションを構築、テスト、デプロイできるプラットフォームです。 このプラットフォームには、Docker Engine, Docker CLI, Docker Com […]
はじめに こんにちは、エンジニアのmiyakawaです。 DBでテーブルを作成するときに主キーが必要になりますが、主キーに自動でユニークな識別子を与える方法としてAUTO_INCREMENTにより自動採番された連番を用い […]
MySQLからPostgreSQLにデータを移行させる際、pgloaderを使うことでスムーズにデータ移行できたので、今回はpgloaderを使ってMySQLからPostgreSQLに移行させる手順を紹介します。 検証し […]
MySQLとPostgreSQLの速度比較をしている記事があまりなかったので、自分で比較してみることにしました。 MySQLのDBは、弊社で標準で使用しているMariaDBを選択しました。 今回行ったことは、同じ環境にM […]
エンジニアの Kanazawa です。弊社のデータアグリゲーション事業では、クローラによるデータの取得から、一部では「名寄せ」を行なうことで、さらに利用価値を高めてデータを提供することも行っております。 このブログでは、 […]
はじめに こんにちは、エンジニアのhyodoです。 弊社では広告クリエイティブ収集サービス「アドクロールクラウド」のデータとして膨大な広告データを蓄積しています。 （*2023年9月時点での広告データの総取得数は6.2億 […]
はじめに アルバイトのajikiです。 今回は、コマンドラインでクラウドストレージ等のファイルを扱うことが出来る「rclone」を使用して、クラウドストレージサービス「Box」を操作できるようになるまでのconfig設定 […]
はじめに 弊社ではスマホアプリ上のデータを機械的に収集するネイティブアプリスクレイピングの技術を用いてアドクロールなどの様々なサービスに活用しています。 そのため、社内で大量のスマートフォンを保有し、それぞれの端末からデ […]
この記事は こちらの続きになります。 また、ddコマンド、scpコマンドの高速化をしたい人にも参考になると思います。 sshを挟んだddコマンド実行 前回の記事では、ssh接続で他のサーバー（ホスト）に接続し、スナップシ […]
こんにちは、エンジニアの増田です。弊社の一部システムではプロダクションDBのデータをmysqldumpを利用してバックアップし、ステージングDBへリストアしております。データ量が増えるに連れてバックアップ・リストア共に時 […]
お問い合わせ・ご依頼はこちらから
