pythonロゴ

この記事を読む

【Python】configparserを使っているプログラムがcronで動かなかったので対処方法の覚え書き

pythonで作ったスクリプトがcronで動かなかったので対処方法の覚え書きです。 configparserを使うようになりました。 最近Pythonでconfigparserを使って設定ファイルから値を取り出す方法を覚えた。 例: 実行パ…

pythonロゴ

この記事を読む

【Python】スクレイピングで取得先のページがHTMLではなくJavaScriptでページを構成していた場合の対応

スクレイピングしてみたら 前回スクレイピングの方法について書きました。   そして、いざ実際の複合機の管理画面のデータをスクレイピングで取得してみたら驚いた。 HTMLタグがごそっとない! <body>の直下に<…

pythonロゴ

この記事を読む

【Python】変数の型を調べる

変数の型は様々 Pythonの開発で変数に文字列、数字、日付など様々な値を登録する。 プログラムにはいろいろと決まりごとがあり、特に計算系では 文字列と数字は計算できない 文字列と日付は計算できない などなど、考えれば当たり前だけどそんな制…

pythonロゴ

この記事を読む

【Python】SSL接続で警告されるへのスクレイピング

前回はBasic認証がかかっているページにWEBスクレイピングする方法を紹介しました。   「この接続ではプライバシーが保護されません」が表示される 今度は別の複合機もよろしくと言われ、同じようにブラウザから管理画面へアクセスして…

pythonロゴ

この記事を読む

【Python】Basic認証があるページへのスクレイピング

前回はWEBスクレイピングについて簡単に紹介してみました。 【Python】WEBスクレイピングをしてみよう 認証が必要なページだった。 その後、複合機の管理画面から必要なデータを取ろうとスクレイピングを仕込んでみたら、 なんとその管理画面…

pythonロゴ

この記事を読む

【Python】WEBスクレイピングをしてみよう

PythonでWEBスクレイピングを実装してみたのでやってみたことを書いてみます。   WEBスクレイピングとは WEBサイトからWEBページのHTMLデータを収集して、特定のデータを抽出、整形し直すことである。 なぜ今回WEBス…