読者です 読者をやめる 読者になる 読者になる

PageTAKA's blog

写真、PC、ネット、岡山の話題をお届けします

原発ゼロをめざす岡山アクション○毎週金曜日お昼12:15から中国電力岡山支社周辺(岡山市北区内山下1-11-1)○連絡先:岡山県労会議内の実行委員会、086-221-0133

パスワードは大切

本日午後、学区連合町内会のWEB関係者の会議でした。これまでの経過から、外にPWは出さない、というのを一番に確認していただきました。 旧サイトにあったコンテンツの移植は一部(=コミュニティ関係)を除いてほぼ終了など現状の報告。市が用意したサ…

HTML:レイアウト調整に「空白」を使わない

小学校区連合町内会のHTMLサイトの見直し作業中です。ある意味「神経戦」のような様相。多少でも「プログラム」がらみとなると無味乾燥なソースコードの荒野に放り出された状態でなんとか本旨をくみとり、合理的な解決を図りたいという格闘戦が始まる。 …

改めて、著作権、またはその使用権にぶちあたる

小学校区連合町内会の電子町内会サイトの見直し作業を行っています。今回作業の中心は、HTMLタグをできるだけシンプルにし、スマホ表示の時代にも柔軟に対応し、検索機能なども確保して、従来サイトの資産を有効に世間に公開しようという、主に「技術的…

HTML5:レイアウトにtableタグを使わない方向

4日から小学校区連合町内会のWEB担当になりました。これまでさまざまな方々が積み上げてこられたHTMLファイルを見ています。古典的な課題ともいえる「レイアウトにテーブルタグを使わない」という方向性で努力しているんですが、現実という吹雪に身…

散歩:久しぶりに白黒3歳のワンちゃんに会った

思わぬところでワンちゃんとバッタリ。出会うと体を寄せてくる。3歳だそうだ。「春の恋は?」と尋ねたけど「WAN」とも返事をしてくれなかった…。 たばこポイ捨て 吸殻処理、昨夕5本、今朝3本 公園 西公園、異常なし。吸殻8本鎮座継続中 東公園、ゴミ…

写真の著作権関係申し入れ初めて。とある踊りグループサイト

概要 昨日、関西で活躍する踊りのグループ、仮にXさんとします。Xさんサイトに爺撮影の画像が使われていた件(モノクロ化、トリミングなど加工もあり)で、Xさんサイト担当の方とtwitterDMでやっとつながり、善処をお願いしました。画像入手公開事実な…

これは、爺のblog頁、丸写しじゃん

ネット徘徊してまして、以下の画像のようなサイトを見つけました。見出し、本文も同じです。「出典」もちゃんと明示してあります。 國士舞双:第1回YOSAKOI高松祭り@丸亀町グリーンけやき広場(16日)2016年10月19日更新 7view 出典:http://pagetaka.hatenab…

人物画像の商用サイト利用

商用サイト いわゆる「サイト」「ホームページ」などを、事業などのPRに使うのは、ごく当たり前のことです。一方、そこに使用する、画像(写真、イラスト、図表)や文書などは、個人サイトとは異なり、「商用利用」という概念が掛けられるのだろうと思いま…

岡山市電子町内会体験版サイト公開は本日まで…。

5月22日に「岡山市電子町内会説明会」が市役所本庁であったそうです。爺は、後に出席した方から資料の写しをいただきました。それによると、HTML主体のサイトから、Wordpressを使ったサイトへ変更する、ということのようです。本日まで「体験サイト」が公開…

サイト作成でバタバタしてました…

ここ数日、WPを使ったサイト作成でバタバタしてました。やっと一区切りみたいで、この記事を書いてます。 原稿を詰めたが、やっぱり直しがあった 爺は、サイト作るとき、文字を確定稿にしてから作業を本格的に進めることにしています。未確定稿で作業する…

JS:jQueryで$.getJSONをJSONPでおぼろげに成功(クロスドメイン)

数日、机にかじりついておりました。 JavaScript(≒jQuery)をつかって、よそ様のサイトにあるJSONデータを読み込み、ブラウザに表示する、という作業にとりくんでおりました。今回の対象は、自分が設置したWPですので、JSONデータを自動で作ってくれるプ…

続:爺が撮った写真が…使われている…よさこい2014

前説:爺が撮った写真が…使われている…よさこい2014 - PageTAKA's blog さっそくお返事をいただきました:外注先の作業結果らしい 次のような返事をメールでいただきました。 大変失礼いたしました。 記事を外注しているのですが、外注先が誤って画像を投稿…

PHP:HTMLをパースする

PHP Simple HTML DOM Parserの使用方法 - Webスクレイピング ライブラリ PHPでHTMLをパースする | zaru blog PHPでHTMLをパースして解析する簡単な方法 | 三度の飯とエレクトロン PHPでHTMLをパースして解析、編集して保存する方法 - さとうさんのキロク さ…

PHP:Webスクレイピングのスクリプト、レンタルサーバーで動いた

PHPでDOM、WEBスクレイピングなどして、RSSが無いサイトでも、記事の更新情報を取得したいと6月上旬からどりょくしたふりの爺でありました。 とあるレンタルサバに移植。PDO接続でエラー 自サバからレンタルサバですから、MySQL(DB)関係…

PHP:WEBスクレイピング

「Webスクレイピングとは (Web scraping) ウェブスクレイピング: - IT用語辞典バイナリ」をやろうともがいている(≒あがいている)爺です。使っているのはPHPです。これまでのまとめと、この先の課題をまとめておこうかと思っています。 自サバではおよ…

PHP:URLのワナ。重複に引っかからない仕掛け

PHPでDOM、WEBスクレイピングを使いサイトの新規記事情報を得ようともがいております。 重複URLのはずがチェックを通り抜ける 「新記事」を得ようとすると、これまでどんな記事を取得したかという記録との照合が必要になります。 爺は、URLを…

PHP:サーバー接続時間30秒制限と折り合いをつける

PHPでDOM、WEBスクレイピング実現しようと、浅学菲才ならぬ「浅学被災」な状態になっている爺です。レンタルサーバーで連続使用30秒、というのを何とかしようと考えると熱が出そうです。熱が出ても解決できるならともかく、とてもできそうもないという…

PHP:Maximum execution time of 30 seconds exceeded

1(Aサイト) 11:43:39 : DB接続・サイト基本データ取得開始 11:43:39 : DB切断・サイト基本データ取得終了 11:43:39 : サイト表頁 個別記事リンク用DOM開始 11:43:40サイト代表頁で個別記事リンク取得--終了: 11:43:40 : サイト表頁 個別記事リンク…

PHP:htmlのtitle表示は大切

PHPをつかってDOM、WEBスクレイピングしようという、還暦が過ぎた爺のもがきであります。 HTMLの基礎問題にぶちあたる。titleの表示は大切でそのページに適切な内容を まずは、画像でございまする。 HTMLファイルのヘッダブにある「title」のうち、困…

PHP:正規表現でaタグhref要素のリンク先抽出。条件式で文字列処理も使った。

PHPでDOMとかWEBスクレイピングというようなことをやって、RSSがないサイトでも記事更新状況取得を実現したいと妄想・幻想を抱いている耄碌爺です。 目的サイトでaタグの使い方が一般的な書式ではNGとなる例に当たり、単純な正規表現では「href=」に続…

PHP:正規表現で「href」のリンクURLが抽出できない?

PHPでDOMとかWEBスクレイピングし、RSS未設置のサイト更新情報を得たいと妄想中の爺です。今朝は、HTML「a」タグ要素「href」に続くURL(リンク先)を抜き出せないというトラブルに見舞われました…。 経過と状況 昨夜は、Aサイトでpreg_match(正規表現)は…

PHP:DOMしてWPに自動投稿。ひとつのサイトを対象に自サバではできた。

PHPでDOMとかWEBスクレイプングとかいう動作をして、RSSを設けてないサイトの更新情報を取得。それを、Wordpressに自動投稿しようという爺であります。 割りと時間がかかるDOM 21:21:48 -> DB接続・サイト基本データ取得開始 21:21:48 -> DB切断・サイト基本…

PHP:リダイレクト0秒転送にやられる。サイト内・サイト外リンク判定…

PHPでDOMとかWebスクレイピングし、RSS設置してないサイトの更新情報を取得しようと妄想している爺です。DOMするとき、問題なのはどのHTMLタグを対象にするか、ということです。サイトによって使い方が違うですから、気をつけないといけませぬ。次に気づいた…

PHP:配列・配列内の値、どこまで有効。フォーカス範囲を再確認

PHPでイロイロやろうとしてつまずいている爺です。本当は、ひとつのことをやりたくて、それが、うまくいってないという…。DOMなっているんだ…いえ、ドウなっているんだ…などと、寒いダジャレを…作業対象に掛けたツモリ…。昨日は、散歩以外ほとんど家にい…

PHP:結果はOKだけど、「Notice」が表示される「PHP Simple HTML DOM Parser」

「PHP Simple HTML DOM Parser」を「simple_html_dom.php」でやっています。とあるサイトを対象に実行すると「Notice: iconv(): Detected an illegal character in input string in C:\xampp\php\simple_html_dom.php on line 806」というような注意エラーが…

PHP:WEBスクレイピング、対象URLの抽出まで進行。先は長い

PHPを使ってDOMとかWEBスクレイピングというのを実行し、RSS設置してないサイトの更新状況を取得したいと妄想しています。結果物を、Wordpressに自動投稿する、というのが目標であります(≒ほぼ妄想)…。現在までの進行状況や、先の見通しを中間的に整理しよ…

PHP:URL相対指定「.」をtrimする

PHPでDOMとかWEBスクレイピングして、RSSがないサイトでも、その更新情報を取得できるようにしたい、と妄想中の爺です。 サイト内リンクだと相対指定になっている trim-文字列関数-初心者のPHP入門 行事を載せているサイトだと、行事名と日付だけあってあと…

PHP:DOMするHTMLタグを限定する。

前説:PHP:DOM実行エラー。パスを通し忘れ焦る - PageTAKA's blog aタグはいっぱいある インターネットの特性というか、リンクは命であります。それを表すHTMLタグは「a」です。 ひとつ前の記事で「find('a')」と書いて「a」タグ周りの情報を拾いだしたんで…

PHP:DOM実行エラー。パスを通し忘れ焦る

find('a') as $ele){ echo $ele. "<br />"; } ?>上のPHPスクリプトは条件が整っていれば、このブログのHTMLソースにある「a」タグ関連情報を表示します。 Fatal error: Call to undefined function file_g…

PHP:データベースにPDO接続で読み出し

PHPでDOMを使いサイトの更新状況を取得したいと妄想しています。RSSが目標とするサイトにない場合、自力でHTMLタグのなかから必要なのをつかむという作業が必要です。WEBスクレイピングともいうようなことです。 ウェブスクレイピング - Wikipedia Webスクレ…

県北出張でした

本日午前は、県北出張でした。雨の中の往復でした。FTPをつかったサイトの維持管理の急所で悩んでおられました。2台のPCでひとつのサイトを管理するというのは、なかなか骨の折れることです。何が最新のHTMLファイルなのかキッチリ管理するか、FTP接続し…

レンタル・サーバ、ドメイン料金。支払い忘れるととりかえしがつかないことになるかも

どこかのプロバイダでレンタルサーバを借り、ドメイン代が別途必要になるかどうかはともかくとして、これらの支払いを忘れるのは、ちょっと困ったことに…。とあるサイト用の料金請求(ドメイン廃止連絡付)が10日ほど前にメールで届きました。すぐさま、実際…

PHP:タイマー的に実行するときは、CRONを使うらしい

PHPでDOMするのですが、毎日の午前3時に、とか、6時間おきに、という動作をさせようとネット徘徊しておりました。 CRONを使う レンタルサーバがCRONが使えるようになってないと難しいみたいです…シクシク。さっそく爺が使っているサーバを調べてみました。5…

PHP:サイトをDOMして更新状況をWPに自動公開。非RSS

PHPの本をしょぼついた目で読みながらDOMをやろうとしているです。その結果物をWordpressに自動投稿したいと妄想しているのであります。 これまでできたこと XAMPPを自PCにインストールしApacheがうごくようになった。MySQLも稼働。PHPもちゃんとスクリプ…

文字コード:utf8mb4

XAMPPで自サバを動かしながら、PHP作業を進めています(≒実際にはふりだけで、すすんでない)。PHPからExcelファイルの読み書きは少しできたので、MySQLをつかって試してみたいことがある~と妄想。phpMyAdminを使いカラのデータベースをひとつ作りました。…

PHP:「配列」どうしを比較し差分を表示する

PHPのDOMを使って、サイトの更新状況を自動チェックしようと妄想しています。最近、RSSを意図的に設けてないサイトが増えているみたいで、更新状況をチェックするのはある意味、受難な時代に…爺のようなスキルのないものには特にね…グスン。 前回チェックと…

PHP:DOMをどう進めるか、HTMLタグ、リンクは千差万別…

PHPでDOMをやりまして、サイト情報を自動抽出しようと妄想しています。 PHP: DOMDocument - Manual 外部と内部のリンクが混在。その上、画像がリンク先… サイトの表の頁に出ている記事紹介のリンク、舐めてました。反省。考えてみれば当たり前なんですが…

PHP:Excelを併用して行おうとしていることの再確認

先だってから、WinPC内にインストールしたXAMPPにあるWebサーバApacheを稼働してPHPでイロイロ試しています。PHPにさせるのは、ExcelファイルにセットしたいくつかのURLを順にめぐり、DOMで必要なデータを抽出し、セルに書き込んで保存する、というのが第一…

PHP:自分のWinPCでPHPを使うまで

HTML、JavaScript、CSSなどは(ほぼ)スクリプトを書いてネットブラウザなどで表示すれば、それらの言語が動いている、というのが(ほぼ)実感できます。PHPは、ちょっとそうならなかった。では、どうしたら、という課題解決の手順です。 まず危険性というか…

PHP:htmlのaタグから、リンクと文字を抜き出す

前説:PHP: の検索結果 - PageTAKA's blog DOMでaタグを取得できたけど、絶対リンクで無かった PHPを使って、サイトの更新情報などを得ようと妄想しています。これまでに、特定URLに表示された、HTMLから、たとえばaタグを取得する、というようなことがDO…

え、安全でないサイト? 岡山のバス時刻表サイト?

まずchromeでのアクセス先に対する表示です。 岡山県内のバス路線などを案内するサイトの「問い合わせ」リンクをクリックすると上のような表示になりました…はて? この接続ではプライバシーが保護されません攻撃者が、okayama-bus.net 上のあなたの情報(パ…

PHP:特定セルの情報を読み出す

PHPとExcelを使って、指定したURLのサイト更新状況をチェックしようと夢見ています(≒妄想)。最初、PHPとMySQLを使ってなどと思っていたのですが、視認性、Excelの方がよいだろうということで、ひとまずこちらでやってみようという…横着であります。 これま…

webからファイルをダウンロード

Web からファイルをダウンロードする - Windows ヘルプ 昨日は、朝9時くらいにはじめ、約17時間かかってxxGB超のファイルをweb上からダウンロードしました。かかった時間としてはこれまでの最長…かも…疲れた。とはいえ、別に手作業したわけではありませぬ。 …

PHP:エクセルファイルをPHPで読んだりしてみる

前説:PHP:HTMLタグを頼りに見出しを読みだす - PageTAKA's blog PHPとMySQLをつなぐより、Excelの方が視認しやすいかも PHPとDB(この場合MySQLを想定)をつなぐよりも、PHPとExcelを連携した方が、データの様子がわかりやすい、というか視認しやすい、と…

PHP:HTMLタグを頼りに見出しを読みだす

あらすじ:PHPを使ってHTML文書のh1タグを抜き出すのに、simple_html_dom.php を使う Wordpress(WP)を使っています。よそ様のサイト更新状況をRSS経由で再利用したいと思っているのですが、最近RSS配信しているサイトが減少傾向みたいです(妄想?)…。…

HTML5タグ:フレームはiframeを除き使わない

今朝方、とあるサイトに新しいリンク先が目についたので、フラフラと徘徊させていただきました。 HTML4.0.1 Transitional 以下が、その新しいサイトの基本構成である懐かしいフレームセットのHTML記述です(適宜省略・置換してありますが)。 <html> <head> (略) </head> <frameset> <FRAME src="R.html"> </frame></frameset></html>

CSS3:ブロックレベルのオブジェクトを中央に揃える

CSSを使う際、CSS2とCSS3で少し違うこともあります。今回は、CSS3のお話し(だろう)と思います。 CSS2で中央揃え 画像をセンタリング(中央揃え)するCSS2つ | web sign* XHTML/CSS~ブロック要素をセンタリングする~ CSS3で中央揃え display:flex; justif…

プルダウンリスト / ドロップダウンリスト

「プルダウンリスト」または「ドロップダウンリスト」という機能が本日のコミュニティの勉強会で話題になりました。ホームページでメニュー表示するとき使う機能です。親要素(≒親メニュー)にカーソルを合わせると子要素(≒コメニュー)が垂れ下がって表示…

WP Web Scraper:他サイト情報を解析・とりこみしてくれるプラグイン(WP用)は、twitterがターゲットでもOKみたい

前説:WP Web Scraper:他サイト情報を解析・とりこみしてくれるプラグイン(WP用) - PageTAKA's blog もうひとつ前の前説:PHP:HTMLを解析・分析する - PageTAKA's blog WP Web Scraper をtwitter対象に使ってみた 下のソースはTAKAのユーザ名です。 ht…

WP Web Scraper:他サイト情報を解析・とりこみしてくれるプラグイン(WP用)

自分でPHPを書こうかと思っていたScrapingのスクリプト…。WordPressなら、すでにプラグイン(plugin、機能追加アプリ)があるのではないかと探してみました。 WP Web Scraper Minimum requirements & dependencies - WP Web Scraper 「WP Web Scraper」という…