プログラミング– category –
-
プログラミング
TwitterAPI v2を使ってユーザー情報を取得する
前回に引き続きTwitterAPI v2関連の記事です。 今回はTwitterAPI v2を使ってユーザー情報を取得する方法を解説します。 【TwitterAPI v2を使ってユーザー情報を取得する】 TwitterAPI v2でユーザー情報を取得するサンプルコードを以下に示します。 from re... -
プログラミング
TwitterAPI v2を使ってツイートを削除する
前回に引き続きTwitterAPI v2関連の記事です。 今回はTwitterAPI v2を使ってツイートを削除する方法を解説します。 【TwitterAPI v2を使ってツイートを削除する】 事前準備 TwitterAPIを使ってツイートをするには、TwitterAPIによる書き込みを許可する必要... -
プログラミング
TwitterAPI v2を使ってツイートを投稿する
前回に引き続きTwitterAPI v2関連の記事です。 今回はTwitterAPI v2でツイートを投稿する方法を解説しました。 【TwitterAPI v2でツイートを投稿する】 事前準備 TwitterAPIを使ってツイートをするには、TwitterAPIによる書き込みを許可する必要があります... -
プログラミング
TwitterAPI v2でツイートなどの書き込みを許可する
イーロンマスクがTwitterを買収してから従来のTwitterAPIが廃止され、新しくTwitterAPI v2なるものが登場しました。 私は最近TwitterAPI v2に触れたのですが、APIを使うにあたりその事前準備からかなり苦戦しました。というのもネットの情報を見てもその情... -
プログラミング
pipコマンドを使ったらWARNINGが出たときの対処法
Pythonで使うライブラリをインストールするためにpipコマンドを使ったら警告文が出たので、警告文が出た状況と対処法をまとめました。 【状況と原因】 状況 TwitterAPIを使うためにrequests-oauthlibというライブラリを下記コマンドでインストールしようと... -
プログラミング
selenium 4.3.0前後でのfind_elementメソッドに関する対応と書き換えまとめ
selenium 4.3.0からブラウザ上の要素を検索するfind_element_by_**メソッドが非推奨になりました。 そのためバージョンアップに伴い、以前は動いていたプログラムがエラーを吐いて動かなくなるといった現象が私の環境で起こりました。 対処法は下の記事に... -
プログラミング
find_elementとfind_elementsの違いを解説
seleniumで要素を検索する際に使うのがfind_elementとfind_elementsメソッドです。 名前のよく似ている2つですが、スクレイピングをする際には各メソッドの違いについて理解して使い分ける必要があります。 そこで今回はfind_elementとfind_elementsメソ... -
プログラミング
Macでのスクレイピングに時間がかかったときに試した方法
MacでWindowsと同じスクレイピングプログラムを動かしたら倍以上の時間がかかったので、そのときの状況と対処について記録を残しておきます。 【状況と対処】 状況 某証券会社のサイトから評価損益を引っ張ってくるだけの簡単なプログラムを組みました。 M... -
プログラミング
【Python】seleniumで「Unable to obtain chromedriver using Selenium Manager…」のエラーメッセージが出た時の対処法
先日Pythonでスクレイピングする時に使うwebdriver.Chromeコマンドを実行したらエラーを吐かれました。 これまでは問題なく通っていたので混乱しましたが、解決策を見つけたので同じエラーに遭遇した人用に記録として残しておきます。 【エラー状況と原因... -
プログラミング
BeautifulSoupのfindメソッドとselectメソッドの対応まとめ
BeautifulSoupを使ってスクレイピングしたHTMLソースの解析をする際によく使うのがfind系メソッドとselect系メソッドです。 毎回メソッドの記述方法を忘れてネットで調べるのですが、サイトによって扱うメソッドがバラバラで自分でコーディングをしたいと... -
プログラミング
【Python】BeautifulSoupでaタグに含まれるURLだけを取得する方法!
スクレイピングを行うプログラムのコーディングをしていると、現在スクレイピング中のWebページに含まれるURLだけを取得したいときが多々あります。 ということで今回は見出しの通り、BeautifulSoupでaタグに含まれるURLだけを取得する方法を解説します。 ... -
プログラミング
【Python】seleniumでHTMLソースを取得するpage_sourceコマンド
【ドライバで開いているページのHTMLソースを取得する】 seleniumを使ってスクレイピングをしている際に、ドライバが開いているページのHTMLコンテンツを取得したいときにはpage_sourceコマンドを使用します。 例として、このブログのトップページのHTMLコ... -
プログラミング
【Python】seleniumのスクレイピング時にブラウザを起動しないようにする方法!
Pythonでseleniumを使ってスクレイピングを実行すると毎回ブラウザが自動で起動します。 VSCodeから勝手に画面が切り替わったり、エラーが起きた時に自分で起動したブラウザを閉じたりしないといけなかったりと、何かと煩わしく感じていました。 というこ... -
プログラミング
【Python】よく利用するpipコマンドまとめ!
個人的にPythonを使う上で一番使うのがpipコマンドです。pipコマンドを使うことでPythonのライブラリを簡単に管理することができます。 今回はpipコマンドの中でも、多くの人ががよく利用するであろうものを厳選してまとめました! 【pipコマンドまとめ】 ... -
プログラミング
【JavaScript】サンプルコードあり!ボタンをクリックしたときの処理方法を紹介!
「HTMLで簡単なWebページを作れる様になったけど、ボタンをクリックしても何も反応しない・・・」 HTMLについて勉強したばかりの場合はこんな悩みをもつの人も多いのではないでしょうか。(私も最近勉強したばかりです笑。) ということで今回はWebページ... -
プログラミング
【JavaScript】local Storageを使ってローカルのJSONファイルを擬似的に操作しよう!
最近Chromeの拡張機能を作っていた際に、設定ファイルであるローカルのJSONファイルにJavaScriptでアクセスする必要がありました。 ネットで調べればすぐに方法が見つかると思いきや、JavaScriptでローカルファイルにアクセスするのはかなり難しそう(ロー... -
Python
【Python】Seleniumで「AttributeError: ‘WebDriver’ object has no attribute ‘find_elements_by_class_name’」が出たときの対処法
Pythonで"find_elements_by_class_name"メソッドを実行した際に出たAttributeErrorの対処方法をまとめました。 【エラー状況と原因】 エラー状況 先日研究室で勧められたスクレイピングの本を見ながらサンプルコードを実行したところ、以下のようなエラー... -
プログラミング
【Python】requestsライブラリが入っているのにimportエラーが出たときの対処法
Pythonでrequestsコマンドを実行した際に出たエラーの対処法をまとめました。 【エラー状況】 先日MacにXcode経由で構築したPython環境でスクレイピングの本を使って勉強していたところ、下記のようなimportエラーに遭遇しました。 ImportError: urllib3 v... -
プログラミング
【Mac】最強エディタVisualStudioCodeをMacにインストールしよう!
【はじめに】 VisualStudioCode(通称VSCode)はプログラマの中でも非常に人気のあるエディタです。私もコーディングをする際は9割方VSCodeを使っています。 今回はそんなVSCodeをMacでインストールする手順を紹介します! 【VisualStudioCodeのインスト...