pagetaka

写真、PC、ネット、岡山、旅の話題をお届けします

ネット、情報端末

今年はここまで。さらに14チームUPしました:第62回よさこい祭り、10日、帯屋町筋で撮影

今年はここまでです。 10日、帯屋町筋商店街で撮ったよさこい祭りの写真です。 10日の開始から、「帯屋町筋」二巡目前(午後3時頃)までの写真です。チーム陽:第62回よさこい祭り、10日、帯屋町筋で撮影 - PageTAKA's blogpagetaka.hatenablog.com 跳乱舞:…

14チームUPしました:第62回よさこい祭り、10日、帯屋町筋で撮影

10日、帯屋町筋アーケードで撮った第62回よさこい祭りの写真、本日は14チームUPしました。学生よさこいチーム 粋恋(2):第62回よさこい祭り、10日、帯屋町筋で撮影 - PageTAKA's blogpagetaka.hatenablog.com 月下桜舞連(2):第62回よさこい祭り、10日、帯屋…

続:爺が撮った写真が…使われている…よさこい2014

前説:爺が撮った写真が…使われている…よさこい2014 - PageTAKA's blog さっそくお返事をいただきました:外注先の作業結果らしい 次のような返事をメールでいただきました。 大変失礼いたしました。 記事を外注しているのですが、外注先が誤って画像を投稿…

GOOGLE画像検索:顔、期間などでしぼりこみ

午前10時前に、「うらじゃ」をキーワードにし、投稿が1週間以内で「顔」と認識される画像を検索した結果が上の画像です。「検索ツール」アイコンをクリックすると、サイズ、色、種類、時間、などが表示され、それらのなかに、「顔」「写真」など画像の種…

PHP:文字切り出し「mb_substr」サーバーにより文字化け

部分文字列抽出「mb_substr」で予期せぬ結果に… 自サバで「mb_substr」という日本語なども対応する関数で部分文字列を切出したらOKでした。 ところが、レンタルサ-バ-だと、予期せぬ文字化けが出たり、その結果か、表示されるはずの文字列が欠けたり…。 …

PHP:Webスクレイピングのスクリプト、レンタルサーバーで動いた

PHPでDOM、WEBスクレイピングなどして、RSSが無いサイトでも、記事の更新情報を取得したいと6月上旬からどりょくしたふりの爺でありました。 とあるレンタルサバに移植。PDO接続でエラー 自サバからレンタルサバですから、MySQL(DB)関係…

PHP:WEBスクレイピング

「Webスクレイピングとは (Web scraping) ウェブスクレイピング: - IT用語辞典バイナリ」をやろうともがいている(≒あがいている)爺です。使っているのはPHPです。これまでのまとめと、この先の課題をまとめておこうかと思っています。 自サバではおよ…

散歩:今朝10,000歩

今朝の散歩は、約10,000歩とNexus6が示しています。しかし、表示がちょっと少ないのではと…。 ゴミ拾いオジサン歩いてた 今朝は、スーパー袋をもってゴミを拾って歩いておられる方をお見かけしました。TAKAが歩く場所のさらに外側を歩く、というような印…

PHP:URLのワナ。重複に引っかからない仕掛け

PHPでDOM、WEBスクレイピングを使いサイトの新規記事情報を得ようともがいております。 重複URLのはずがチェックを通り抜ける 「新記事」を得ようとすると、これまでどんな記事を取得したかという記録との照合が必要になります。 爺は、URLを…

PHP:サーバー接続時間30秒制限と折り合いをつける

PHPでDOM、WEBスクレイピング実現しようと、浅学菲才ならぬ「浅学被災」な状態になっている爺です。レンタルサーバーで連続使用30秒、というのを何とかしようと考えると熱が出そうです。熱が出ても解決できるならともかく、とてもできそうもないという…

PHP:Maximum execution time of 30 seconds exceeded

1(Aサイト) 11:43:39 : DB接続・サイト基本データ取得開始 11:43:39 : DB切断・サイト基本データ取得終了 11:43:39 : サイト表頁 個別記事リンク用DOM開始 11:43:40サイト代表頁で個別記事リンク取得--終了: 11:43:40 : サイト表頁 個別記事リンク…

PHP:htmlのtitle表示は大切

PHPをつかってDOM、WEBスクレイピングしようという、還暦が過ぎた爺のもがきであります。 HTMLの基礎問題にぶちあたる。titleの表示は大切でそのページに適切な内容を まずは、画像でございまする。 HTMLファイルのヘッダブにある「title」のうち、困…

PHP:正規表現でaタグhref要素のリンク先抽出。条件式で文字列処理も使った。

PHPでDOMとかWEBスクレイピングというようなことをやって、RSSがないサイトでも記事更新状況取得を実現したいと妄想・幻想を抱いている耄碌爺です。 目的サイトでaタグの使い方が一般的な書式ではNGとなる例に当たり、単純な正規表現では「href=」に続…

PHP:正規表現で「href」のリンクURLが抽出できない?

PHPでDOMとかWEBスクレイピングし、RSS未設置のサイト更新情報を得たいと妄想中の爺です。今朝は、HTML「a」タグ要素「href」に続くURL(リンク先)を抜き出せないというトラブルに見舞われました…。 経過と状況 昨夜は、Aサイトでpreg_match(正規表現)は…

PHP:DOMしてWPに自動投稿。ひとつのサイトを対象に自サバではできた。

PHPでDOMとかWEBスクレイプングとかいう動作をして、RSSを設けてないサイトの更新情報を取得。それを、Wordpressに自動投稿しようという爺であります。 割りと時間がかかるDOM 21:21:48 -> DB接続・サイト基本データ取得開始 21:21:48 -> DB切断・サイト基本…

PHP:リダイレクト0秒転送にやられる。サイト内・サイト外リンク判定…

PHPでDOMとかWebスクレイピングし、RSS設置してないサイトの更新情報を取得しようと妄想している爺です。DOMするとき、問題なのはどのHTMLタグを対象にするか、ということです。サイトによって使い方が違うですから、気をつけないといけませぬ。次に気づいた…

PHP:結果はOKだけど、「Notice」が表示される「PHP Simple HTML DOM Parser」

「PHP Simple HTML DOM Parser」を「simple_html_dom.php」でやっています。とあるサイトを対象に実行すると「Notice: iconv(): Detected an illegal character in input string in C:\xampp\php\simple_html_dom.php on line 806」というような注意エラーが…

PHP:WEBスクレイピング、対象URLの抽出まで進行。先は長い

PHPを使ってDOMとかWEBスクレイピングというのを実行し、RSS設置してないサイトの更新状況を取得したいと妄想しています。結果物を、Wordpressに自動投稿する、というのが目標であります(≒ほぼ妄想)…。現在までの進行状況や、先の見通しを中間的に整理しよ…

PHP:URL相対指定「.」をtrimする

PHPでDOMとかWEBスクレイピングして、RSSがないサイトでも、その更新情報を取得できるようにしたい、と妄想中の爺です。 サイト内リンクだと相対指定になっている trim-文字列関数-初心者のPHP入門 行事を載せているサイトだと、行事名と日付だけあってあと…

PHP:DOMするHTMLタグを限定する。

前説:PHP:DOM実行エラー。パスを通し忘れ焦る - PageTAKA's blog aタグはいっぱいある インターネットの特性というか、リンクは命であります。それを表すHTMLタグは「a」です。 ひとつ前の記事で「find('a')」と書いて「a」タグ周りの情報を拾いだしたんで…

PHP:DOM実行エラー。パスを通し忘れ焦る

find('a') as $ele){ echo $ele. "<br />"; } ?>上のPHPスクリプトは条件が整っていれば、このブログのHTMLソースにある「a」タグ関連情報を表示します。 Fatal error: Call to undefined function file_g…

「日刊ゲンダイ」デジタル版、月間PV9000万。長めの見出し

ウェブ用には紙面のメイン見出しやサブ見出し、小見出しをまとめて、わかりやすい1本の見出しに書き換える 「日刊ゲンダイ」デジタル版と爺のWEB記事見出しの考え方は近いと思いました。 新聞記事メインの見出しだけをブログ記事の見出しにしても、無味乾燥…

PHP:PDOのfetchとfetchAllの違いがわからずつまずく

PHPでDOMとかWEBスクレイピングとかいうようなことをやって、RSSを備えてないサイトの更新情報を得たいと妄想している爺です。PHPでMySQLを使い、というところでDB接続が昔と異なっていることに直面したです。それが、PDO接続…。 fetch と fetchAll 「…

PHP:MySQL接続方法が変化してた。PDO接続

手元のPHPならびにMySQLの本、多くは2010年以前の発行で、それで勉強(したふり)してたです。木曜日、姫路往復した時に本屋さんでPHPでMySQLの説明もあるのを買ってきて、少し読んだです。すると、データベース、今回はMySQLですが、その接続方法が変化して…

県北出張でした

本日午前は、県北出張でした。雨の中の往復でした。FTPをつかったサイトの維持管理の急所で悩んでおられました。2台のPCでひとつのサイトを管理するというのは、なかなか骨の折れることです。何が最新のHTMLファイルなのかキッチリ管理するか、FTP接続し…

レンタル・サーバ、ドメイン料金。支払い忘れるととりかえしがつかないことになるかも

どこかのプロバイダでレンタルサーバを借り、ドメイン代が別途必要になるかどうかはともかくとして、これらの支払いを忘れるのは、ちょっと困ったことに…。とあるサイト用の料金請求(ドメイン廃止連絡付)が10日ほど前にメールで届きました。すぐさま、実際…

WindowsLiveメール:削除できない迷惑メール

WindowsLiveメールで電子メールのやり取りしている方も多いのではと思います。昨日、コミュニティのパソコン勉強会でのこと、着信メールのうち削除できないものがあるとのお話がありました。知らないところからのもので、開かないまま、即削除したいとのこと…

PHP:タイマー的に実行するときは、CRONを使うらしい

PHPでDOMするのですが、毎日の午前3時に、とか、6時間おきに、という動作をさせようとネット徘徊しておりました。 CRONを使う レンタルサーバがCRONが使えるようになってないと難しいみたいです…シクシク。さっそく爺が使っているサーバを調べてみました。5…

PHP:サイトをDOMして更新状況をWPに自動公開。非RSS

PHPの本をしょぼついた目で読みながらDOMをやろうとしているです。その結果物をWordpressに自動投稿したいと妄想しているのであります。 これまでできたこと XAMPPを自PCにインストールしApacheがうごくようになった。MySQLも稼働。PHPもちゃんとスクリプ…

PHP:INSERTクエリー失敗 MySQL

PHPでサイト更新状況を自動取得しようと妄想中。かなり長い妄想になっていまい、もはや「幻想」との、ヤジが聞こえてくるが…泣。 取得したデータを、MySQLに追加しようとして失敗 Apacheで動いている、PHPとMySQLです。 データベースサーバ=サーバのバージ…