鳩でもわかるC#

チャットワークのメッセージをSeleniumで取得するプログラムをつくります。まずログインしないといけないのですが、Seleniumだとなかなか画像認証がとおりません。そこで以下の方法をとります。 最初は普通にアクセスし・・・

続きを読む

前回、【ネタ】 齋藤飛鳥の画像をスクレイピングを作成しましたが、これに改良を加えます。 問題点として突然Google Chromeが起動する、ユーザーがこれを閉じてしまうと処理が実行できません。またChromeを表示させ・・・

続きを読む

前回の続きです。前回はYahoo画像検索を使いましたが、今回はGoogle画像検索を使います。Google先生は強敵です。 実際に検索をしてurlはhttps://www.google.co.jp/search?q=%E・・・

続きを読む

面白そうな動画があったのでC#でできるかやってみました。 2019/10/26の動画です。1年以上前の二番煎じです。 Yahoo画像検索を使いますが、ページが例のごとくJavascriptによって描画されるようになってい・・・

続きを読む

前回はTwitterのツイートをスクレイピングで取得しましたが、今回はもっと本格的にやってみます。 Twitterはスクロールすると過去のツイートをみることができます。そのためスクレイピングで過去のツイートを取得するため・・・

続きを読む

C#でTwitterのツイートをスクレイピングすることはできるのでしょうか？　実際に検索してみると情報が公開されていますが、じっさいに書いてあるとおりにやってもうまくいきません。HTMLを解析してスクレイピングする場合、・・・

続きを読む

スプレッドシートには複数のurlが書かれています。urlを取得してそのサイトにアクセスしてサイト情報を抜き出してシートに書き込んでみることにします。これまでと同様にPHPとgoogleapis/google-api-ph・・・

続きを読む

GoogleスプレッドシートをExcelファイルでダウンロードします。またアップロードしたExcelファイルでGoogleスプレッドシートに書き込みます。 動作確認はこちらから 今回はExcelファイルのデータをGoog・・・

続きを読む

webサイトからスプレッドシートに書き込む方法を考えます。今回はC#とは関係がありません。Google Sheets APIとPHPを使います。 まずはGoogle Cloud Platform で Projectを作成・・・

続きを読む

Yahooニュースのコメントをスクレイピングで取得できるかやってみました。 コメント欄にはiframeというフレームが使われているので、ニュースが掲載されているページのurlだけではうまくいきません。ブラウザをつかってフ・・・

続きを読む