動画要約っていうか字幕スクレイピング&要約ですよね 生成AIを使ったYouTube動画要約ツールをみかけますが、実態としては動画本体を解釈しているのではなくYouTubeの字幕を要約しているだけというケースもあります。 […]
ルーターエンジニアのtoyamaです。今回はポスグレのスキーマについてです。 ずっとMySQLを使ってきたため、PostgreSQLのスキーマについてあまり理解せずつかっていたのですが、ようやく理解できてきたので情報をま […]
frame,iframe内を参照するには 今回はスクレイピングを行う上で、frameやiframe内の要素を参照する方法を紹介します。 結論、Page.getFrameTree、Page.createIsolatedWo […]
はじめに Dockerは軽量なコンテナ仮想環境で、アプリケーションを構築、テスト、デプロイできるプラットフォームです。 このプラットフォームには、Docker Engine, Docker CLI, Docker Com […]
答え:できる 仮説)スマホのLINEを自動操縦するのは難しいが、Chromeの機能拡張がスクレピングできるなら機能拡張経由でLINEの自動化はできるのではないか? 以下、サンプルソースです。 require ' […]
エンジニアのsassaです。 MySQLからPostgreSQLに移行する際、またはMySQL 5.7 以降へのバージョンアップする際にONLY_FULL_GROUP_BYの設定によって、クエリを修正しなければならない場 […]
はじめに こんにちは、エンジニアのmiyakawaです。 データを視覚的に伝える際、最も効果的な方法の一つがグラフです。ルーターが提供する「アドクロール」でも、データをグラフ形式で表示しています。 Web上でグラフを描画 […]
はじめに ウェブスクレイピングやクローラーの運用では、クロール先のページが変更された場合、クローラーの改修が必要になります。この際、改修前後のデータを比較して、正しく動作しているか、データに差異がないかを確認する作業は非 […]
みなさま、こんにちは、エンジニアの Hodoshima です。 弊社では、ブラウザを用いた自動操縦を行う際には、ruby の chrome_remote というライブラリを用いて Google Chrome の自動操縦を […]
自分以外の他社にデータベースの環境構築をしてもらう時に、バージョンの指定、cnfの指定、ユーザー名パスワードの指定、などなどが必要となり面倒ですよね。そんな時に予めdockerの1コマンドを用意しておくと、環境構築からデ […]
お問い合わせ・ご依頼はこちらから