77Lifeworkベータ版

77Lifeworkベータ版

IT関係の話(ツール開発・インフラ構築)をメインとして、その他私の趣味や雑記用のブログです。ここに書いた内容が少しでも参考になれば嬉しいです。

プログラミング・ツール開発

【初心者向け】GASでWebサイトをスクレイピングする方法(2)

はじめに ビックカメラ.comの商品ページ解析 スクレイピング用コード スプレッドシートへの結果書き込み はじめに こんにちは。今回の記事はタイトルの通り、前回の「【初心者向け】GASでWebサイトをスクレイピングする方法(1)」の続きの内容となります。…

【初心者向け】GASでWebサイトをスクレイピングする方法(1)

はじめに 処理の流れ スクリプトエディタを開く 必要なライブラリ(Parser)の追加 スクレイピング対象ページの解析 おわりに はじめに こんにちは。今回はGAS(Google Apps Script)でWebサイトのスクレイピングをする方法を書いていきます。 GASを実行する方法…

GASでParserライブラリを使ってスクレイピングする方法

はじめに Parserライブラリの追加 Parserを用いたスクレイピングコードの例 おわりに はじめに 今回はGAS(Google Apps Script)でスクレイピングをする際に、Parserライブラリを使ってhtmlを解析する方法について書いていきます。 GAS上でParserを使用できる…

Pythonのスクレイピングでメルカリの価格相場を調べる方法

はじめに 処理の流れ スクレイピングのコード スクレイピングプログラムが動作している様子 取得したcsvファイルの可視化 最後に はじめに この記事ではPythonによるスクレイピングを使って、メルカリでの特定の商品の取引相場を調べるツールを作成する方法…

RaspberryPi+USBカメラで動きを検出して動画を撮影する方法(動体検知)

はじめに 用意したもの OpenCVのインストールと操作 動体検知して動画撮影 はじめに こんにちは。 今回はRaspberryPiにUSBカメラを接続して動体検知し、カメラで写している範囲に動くものがあった際に画像を撮影するよう設定していきます。 用意したもの 家…

RaspberryPiにUSBカメラを接続してストリーミングで映像を確認する方法

はじめに USBカメラの動作確認とストリーミング はじめに こんにちは。今回はRaspberryPiにUSBカメラを接続し、映像をストリーミングで確認する方法を書いていきます。 ストリーミングでリアルタイムに映像を確認することができれば、RaspberryPiをネットワ…

pythonを使って株主優待の変更や廃止をslackに通知する方法

はじめに 処理の流れ Pythonのコード 最後に はじめに こんにちは。 今回はpythonによるスクレイピングを使って、株主優待の内容変更を発表した企業の情報をslackに通知する仕組みをつくっていきます。 というのも私自身、優待狙いで株式を購入したり保有し…

スプレッドシートでTodoリスト作成(GAS)

はじめに Todoリストの機能 コード おわりに はじめに 今回はGoogleスプレッドシートとGAS(Google Apps Script)を使って簡単なTodoリストを作成してみます。 正直、「すぐにTodoリストを使いたい」という目的ならば自作ではなく、世の中に出ているアプリを使…

Pythonによるスクレイピングで炭焼きさわやかに待たずに入れる時間帯を調べる

こんにちは。タイトルが意味不明かもしれませんが、これは以下の記事の続き的な立ち位置です。 www.77-lifework.comさわやかの待ち時間を調べられるサイトを定期的にスクレイピングし、待ち時間をスプレッドシートに記録した上、どの時間帯が空いているのか…

Pythonで株価をスクレイピングしてスプレッドシートに書き込む

目的 Pythonの動作環境設定 Pythonとスプレッドシートの連携方法 Pythonのコード 最後に 目的 今回はPythonを使って、スプレッドシートに記載されている銘柄を読み込んで株価を調べ、結果をスプレッドシートに反映する、というプログラムを書いていきます。 …

PythonでGoogleスプレッドシートを操作する

はじめに Google Cloud PlatformのAPI設定 認証情報の設定 スプレッドシート側の設定 必要なパッケージをインストール Pythonプログラムを編集 最後に はじめに 今回はPythonのプログラムからGoogleスプレッドシートの内容を読み込んだり、スプレッドシート…

PythonでWebスクレイピング:Selenium動作環境設定

はじめに Seleniumのインストール chromedriverのインストール 最後に はじめに 今回はPythonでスクレイピングをする際に使用するSeleniumのインストール方法を説明します。この記事で前提としている環境は以下です。・CentOS 7.6(1810) ・Python 3.6.8 ・Go…

PythonのプログラムからSlackにメッセージを投稿する方法

こんにちは。 自分で書いたプログラムを実行して、処理が終わったタイミングで結果を通知してほしい・・・って思うことありますよね。 今回はPythonのプログラムからSlackへメッセージを送る方法を書いていきます。 Slackの設定 メッセージ送信用Pythonコー…

炭焼きレストランさわやかの待ち時間を監視してSlackに通知する

Pythonで書いたプログラムで炭焼きレストランさわやかの待ち時間を監視して、空いているタイミングでSlackに通知してくれる仕組みをつくろう、という内容です。