Nucleus(JP)フォーラム :: トピックを表示 - NP_Analyze（※アクセス解析プラグイン）

前のトピックを表示 :: 次のトピックを表示

投稿者

メッセージ

jun
モデレーター

登録日: 2004.02.07
記事: 346

日時: 2005.12.14 (水) 03:38 記事の件名: NP_Analyze（※アクセス解析プラグイン）

セキュリティの脆弱性を指摘されたので先日緊急にセキュリティを強化いたしましたが、再び対応不足との指摘を受けました。これ以上対応できる状況にないので、このプラグインをご使用の方は即座に使用を中止してください。ご迷惑をおかけしますが、よろしくお願い申し上げます。（2006-09-22）

　多機能かつインストールが容易なアクセス解析プラグインです。最終的には「NP_Counter」「NP_SearchedPhrase」「NP_Log」「NP_View」を統合するようなものができたらいいなと考えています。
　プラグインを作成するにあたり検索エンジン関係の処理については「NP_SearchedPhrase」を参考にさせていただきました。この場をお借りして御礼申し上げます。

●解説ページ（※スクリーンショット付きのページもあります）

NP_Analyze 概要
http://nucleus.mz-style.com/item/814
NP_Analyze 1.本日のアクセス解析・本日のアクセスログ
http://nucleus.mz-style.com/item/807
NP_Analyze 2.月別のアクセス解析・月別のアクセスログ
http://nucleus.mz-style.com/item/810
NP_Analyze 3.除外ホスト設定・CSVディレクトリ名変更
http://nucleus.mz-style.com/item/811
NP_Analyze 4.データベースの状況・CSVファイルの状況
http://nucleus.mz-style.com/item/812
NP_Analyze 5.リファー元のカスタマイズ（※バージョン0.32から必要ないかと思われます）
http://nucleus.mz-style.com/item/813
NP_Analyze 6.棒線グラフ表示機能
http://nucleus.mz-style.com/item/824
NP_Analyze 7.ページ別集計結果表示機能
http://nucleus.mz-style.com/item/826
NP_Analyze 8.スキンへの記述（※外部公開機能）
http://nucleus.mz-style.com/item/828

また、下記ページでは「NP_Analyze」関連の話題について取り扱っています。あわせてご覧下さい。
http://nucleus.mz-style.com/tag/9

●インストール手順等

１．「/media/」ディレクトリのパーミッションが「777」になっていることをFTPで確認。
２．ダウンロード後、解凍した全てのファイル・ディレクトリを「/nucleus/plugins/」にアップ。文字コードは無関係。
３．Nucleus管理画面からインストール。
４．プラグインオプションを設定。
※バージョン0.4からはスキンへの記述なしでアクセス解析を開始する仕様になったので、極端な話し、インストールするだけでＯＫです。なお、バージョン0.331以前の場合は、アクセス解析したいページのスキンに<%Analyze%>の記述が必要です。

●プラグインオプション（※バージョン0.12より日本語化済み）

1. Do you count at loggedin?　…　ログイン時にカウントしますか？（※デフォルトは「いいえ」）
2. Do you delete tables on uninstall? …　アンインストール時にテーブルを削除しますか？（※デフォルトは「いいえ」）
3. Do you send E-mail daily report? …　毎日メールでアクセス解析レポートを送りますか？（※デフォルトは「いいえ」）
4. Count start date. (*ex. 2005-12-10 )　…　アクセス解析の開始日。累積の訪問者数（Visit）とページビュー(Hit)を修正した場合、カウント開始日を変更してください。
5. Admin area limit. (* 1-30 ) …　「アクセス解析」画面で各解析結果を表示する件数。デフォルトは「5」。より多く解析結果が見たかったら「10」とか「20」にしてください。上限は「30」です。
6. Range of hit page level. (*ex. 1/5/9/99)　…　各訪問者の閲覧ページ数の分布（※デフォルトは「1/5/9/99」→「1ページ」「2～5ページ」「6～10ページ」「11～100ページ」「100ページ～」の五段階で集計）。
7. Do you show NP_Analyze copyright?　…　NP_Analyzeへのリンクを表示しますか？（※デフォルトは「はい」。強制ではありませんが…）
8. QuickMenu?　…　「QuickMenu」に登録しますか？（※デフォルトは「はい」）
9. Permission of browsing analysis. MemberID. (*ex. 2/3/8 )　…　アクセス解析画面の閲覧を許可するメンバーIDを記入してください（例. 2/3/8）　※複数の場合は「/」で区切る。バージョン0.14より。
10. Do you browse monthly log file?　…　月別ログファイルを閲覧しますか？（※デフォルトは「いいえ」）。バージョン0.2より。
11. Do you count at RSS-XML?　…　ＲＳＳへのアクセスをカウントしますか？（※デフォルトは「はい」）。バージョン0.2より。
12. A directory name to store CSV file.　…　CSVファイルを保存するディレクトリ名（※デフォルトは「analyze」）。バージョン0.3より。
13. Do you display daily time distinction?　…　本日の時間別アクセス状況を表示しますか？（※デフォルトは「はい」）。バージョン0.31より。
14. The number of the letters of page title.　…　ページタイトルの表示文字数（※デフォルトは「18」）。バージョン0.31より。
15. Do you display end URL of a Blog page?　…　Blogページの末尾URLを表示しますか？（※デフォルトは「はい」）。「いいえ」にするとスッキリした表示となります。バージョン0.32より。
16. Setting the upper limit at each monthly results.　…　各月別集計の上限データ数（※デフォルトは「200」。空白の場合は上限なし）。各月別集計データはここで指定されたデータ数を上限として、翌月以降に引き継がれます。この処理は毎月末に自動的に行なわれます。バージョン0.33より。
17. Line graph of Daily time distinction. (*ex. 1.5)　…　時間別アクセス状況の棒線グラフの表示倍率（※デフォルトは1。空白の場合、表示されず）。このオプション値を設定することにより、時間別アクセス状況の棒線グラフが表示されます。数字を増やす（例 8）と棒線が延び、数字を減らす（例 0.5）と棒線が短くなります。1時間あたりのページビューが100前後の場合「5」を入れればいいと思います。バージョン0.41より。
18. The number to handle in processing at a time. (*ex. 5000)　…　集計処理等において一度に処理する件数（※デォルとは5000）。SQL文を実行する際、レコードを一気に何個ずつ挿入するかを指定します。サーバ環境にもよりますが5000～20000の範囲で指定するのが妥当かと思われます。よく分からない場合は5000のままにしておいてください。バージョン0.43より。
19. Time Offset. (*ex. 5)　…　サーバ時刻との時差がある場合、5時間だったら「5」を、マイナス6.5時間だったら「-6.5」を入力してください。時差がない場合は空白のままでＯＫです。バージョン0.52より。
20. Do you send E-mail monthly report?　…　月一度メールでアクセス解析レポートを送りますか？（※デフォルトは「いいえ」）。バージョン0.53より。
21. Default Domain Search.　…　検索対象ドメインの指定。ホストの集計結果画面にて表示されます。「/」で区切る。日本語版のデフォルトは「.com/.jp/.co.jp/.go.jp/.ac.jp」。バージョン0.53より。
22. Counter option. <%Analyze(count,all)%>　…　カウンター表示オプション<%Analyze(count,all)%>の書式設定。スキンに<%Analyze(count,all)%>と記述すると、総アクセス数、今日のアクセス数、昨日のアクセス数をまとめて表示（＝サーバへの負荷が低減）。「/」で区切る。日本語版のデフォルトは「総アクセス数:/　今日:/　昨日:」。バージョン0.53より。

●使い方１（※アクセス解析）

１．バージョン0.4よりインストールするだけでアクセス解析が始まります。（※バージョン0.331以前についてはアクセス解析したいページのスキンに<%Analyze%>と記述してください）。なお、バージョン0.4以降、スキンに<%Analyze%>と記述すると、NP_Analyzeへのリンクが表示されます。

２．アクセス解析画面で閲覧。「QuickMenu」の「アクセス解析」をクリックすれば、アクセス解析画面が開きます。一日目はシンプルな表示ですが、日付が変わるとたくさんの解析結果が出現します。

３．アクセスログを見たかったら[Access Log]を、表示件数を変更したかったら[Options for NP_Analyze]をクリックしてください。

４．アクセス解析の見方は直感的に分かると思いますが、使い方の解説については少しずつ充実させてきます。ちなみにロボット等からのアクセスは全体の集計結果から除かれており、ロボット等独自で訪問者数(Hit)とページビュー(PV）を集計しています。

５．各テーブルについては「データベースの状況」ページにおいて閲覧したり、過去のデータを削除したりすることができます。「phpMyAdmin」や「NP_Database」を使うことで、その幅がさらに広がるものと思われます。

●使い方２（※アクセス解析とアクセスログの連携）

１．バージョン0.14より、アクセス解析とアクセスログの連携が一体化されました。アクセス解析画面の各集計結果に、？マークが表示されるようになり、それをクリックをすることで、さらに詳しい情報を得ることが可能になりました。

２．？マークをクリックすると、月別のアクセスログが、条件を絞り込んだ上で表示されます。月別のアクセスログにおいても、引き続き、？マークによる追跡や、ソート、検索を行なうことが可能です。

３．本日のアクセスログとの切替もワンクリックで可能です。

４．月別のアクセスログについては、「/media/analyze/」ディレクトリにある月別アクセスログ（※「2005-12.csv」など）を、その都度「plugin_analyze_temp」テーブルに読みます。アクセスログの数が多い場合、MySQLにかかる負荷が高くなり不都合が起こるかもしれませんが、おそらく100,000レコードぐらいまでなら問題ないと思われます。（自信なし）→バージョン0.15で負担が少なくなるような仕様を変えました。
　バージョン0.2から、月別のアクセスログを閲覧するか否かを、プラグインオプションで指定できるようになりました。（※デフォルトは「閲覧しない」）

●使い方３（※外部公開機能）

　バージョン0.5からの新機能です。スキンに<%Analyze(hit,50)%>等と記述することにより、月別の集計結果を外部に公開することが可能となります。対応しているのは以下の集計データです。

1. 人気ページ
2. ページ別の検索語
3. 移動パターン（※アイテムページのみ）
4. リファー元

スキンへの記述方法などの詳しい使い方については下記ページを御覧下さい。

NP_Analyze 8.スキンへの記述（※外部公開機能）
http://nucleus.mz-style.com/item/828

●使い方４（※カウンター表示）

　スキンに以下のように表示します。一般的には訪問者数(Hit)を使うと思います。

[１．訪問者数(Hit)]
　・合計 … <%Analyze(count)%>
　・今日 … <%Analyze(count, today)%>
　・昨日 … <%Analyze(count, yesterday)%>
　・７日間 … <%Analyze(count, 7)%>
　・30日間 … <%Analyze(count, 30)%>
　・90日間 … <%Analyze(count, 90)%>
　・合計、今日、昨日 … <%Analyze(count,all)%> （※バージョン0.53より）

[２．ページビュー(PV)]
　・合計 … <%Analyze(count, total2)%>
　・今日 … <%Analyze(count, today2)%>
　・昨日 … <%Analyze(count, yesterday2)%>
　・７日間 … <%Analyze(count, 7, 2)%>
　・30日間 … <%Analyze(count, 30, 2)%>
　・90日間 … <%Analyze(count, 90, 2)%>

●使い方５（※ページ別集計結果表示機能）

　バージョン0.44からの新機能です。アクセスログや各集計結果からだけなく、テンプレートに<%Analyze%>と記述することで、管理画面以外からもダイレクトに表示させることができます。
　ページごとに「Hit数」「PV数」「検索語」「次のページ」「前のページ」を一覧表示させるので、アクセス解析がさらに面白くなると思います。より詳しくは下記ページを御覧下さい。

NP_Analyze 7.ページ別集計結果表示機能
http://nucleus.mz-style.com/item/826

【重要】
　カウンター表示についての注意点です。
　アクセスログファイルが肥大化し、かつ、一時的にアクセスの集中が生じた場合など、サイトの表示が物凄く重くなります（※場合によってはMySQLが「Connect Error」状態になりサイトが表示されなくなる）。
　このような場合は、カウンター表示をやめて、アクセス解析機能のみを使えば状況が改善される可能性があります（あるいは<%if (loggedin)%>を使って管理者だけが閲覧できるようにするとか、特定のページでのみ表示するとか）。なお、カウンター表示をやめても効果がない場合は、アクセス数がサーバの処理能力を超えている可能性が高いと思われます。
　サーバ側でMySQLへの同時接続数の上限が決められているので、利用しているレンタルサーバによって異なってきますが、サイト表示に支障をきたす可能性のある目安を書いておきます。

　・一日のページビューが20,000を超え、かつ、
　・一時間あたりのページビューが2,000を超えた場合

●注意点等

・過去のログファイルについては「/media/」ディレクトリ内にcsvファイルとして保存されますが、その前提として、１．「/media/」ディレクトリのパーミッションが「777」になっていること、２．「/media/」ディレクトリ内に新しく作成される「analyze/」ディレクトリの所有者が「apache/」になっていないこと、の２点が挙げられます。FTPで確認をお願いします。要するに「/media/」ディレクトリに、所有者が自分＆パーミッション「777」の「analyze/」ディレクトリが作成されていればＯＫです。バージョン0.14以降をインストールする場合、この確認作業は必須です。
・検索エンジンとロボットについては主なものを網羅したつもりですが、まだまだ漏れがあると思います。アクセスログを眺めていて、未定義のものが見つかったら教えていただけると助かります。
・ロボットの定義は「plugin_analyze_ng」テーブルで管理しています。スパムロボットなどを独自に追加したい場合はデータベース管理画面からお願いします。
・アイテムページやカテゴリーページなどへのリンクは正確ですが、ブログページへのリンクについては曖昧さが残ります。リンク先にカーソルを持って行くと、「ブログタイトル /」とか「ブログタイトル /blog/2?page=2」、「ブログタイトル /item/xml-rss2.php」など表示されると思いますが、このブログタイトルの後のものが正確なアドレスとなります。
・毎日のアクセス解析のメールリポートで「lev.1」「lev.2」等とあるのは、各訪問者の閲覧ページ数の分布に対応しているものです。デフォルトは、「lev.1」→「1ページ」、「lev.2」→「2～5ページ」、「lev.3」→「6～10ページ」、「lev.4」→「11～100ページ」、「lev.5」→「100ページ～」です。各レベルはプラグインオプションの「6. Range of hit page level. 」で変更することができます。
・バージョン0.11よりアクセスログ画面においてキーワードによる絞込抽出に対応しました。主に外部からのリファー元やホストを絞込抽出するためのものなので、アイテム名やブログ名等からは絞込抽出できません。アイテムページやブログページ等からは、idが90のアイテムページならば「i?90?」、idが2のブログページならば「b?2?」で、絞込抽出してください。キーワードの間に空白を入れることでand検索が可能です。
　なお、バージョン0.13よりワンクリックで絞込抽出できるようになりました。
・MagicalURLなどでサイト構造が通常と違う場合、「リファー元」の取得がうまくできない可能性があります。その場合、「NP_Analyze.php」の「// Referer」以下をカスタマイズすれば、ある程度は対応可能です。カスタマイズ例については下記ページを御覧下さい。→バージョン0.32で問題が解消されたと思います
・容量の大きい月次ログファイルを読み込もうとすると以下のようなエラーが出る可能性があります。その際はオプション設定の「月別ログファイルを閲覧しますか？」を「いいえ」にしてください。

Code:

Fatal error: Allowed memory size of 41943040 bytes exhausted (tried to allocate 16429870 bytes) in /virtual/mzstyle/public_html/nucleus/libs/globalfunctions.php on line 389

　バージョン0.3より正式版に移行したので、今後バージョンアップする頻度は少なくなると思います。ベータ版をインストールして、バグ等のフィードバックをしてくださった方々に御礼申し上げます。

【追記１】　ロボット抽出のバグ等を修正したり、累積の訪問者数（Visit）とページビュー(Hit)を修正可能にしたり、アクセスログ画面でキーワードによる絞込抽出やソートできるようにした上で、バージョン0.11にアップしました。重要な修正が含まれているのでバージョンアップを強くお勧めします。（2005-12-14）

【追記２】　日本語化した上で、サブカテゴリーに対応し、バージョン0.12にアップしました。なお、バージョン0.11以前からアップデートする場合、再インストールしないとプラグインオプションは日本語化されません。（2005-12-14）

【追記３】　テーブル集計処理時の重大なバグを修正し、また、アクセスログをより使いやすくした上でバージョン0.13にアップしました。また、アクセス解析トップページの集計期間を過去一週間分から今月分に変更しました。以前のバージョンをインストールしている方は必ずバージョンアップをお願いします。（2005-12-15）

【追記４】　月別アクセスログを閲覧できるようにした上で、バージョン0.14にアップしました。重要な変更がなされているので、バージョンアップされる方は「/media/analyze/」ディレクトリをFTPソフトで開き、「200512.csv」というファイルの名前を「2005-12.csv」に変更してください。ファイルが作成されていない場合は特にする作業はありません。（2005-12-16）

【追記５】　月別アクセスログの呼び出し方法を変更した上で、バージョン0.15にアップしました。バージョン0.14に比べてMySQLにかかる負担が大幅に軽減されていると思います。（2005-12-16）

【追記６】　バージョン0.15の致命的なバグを修正した上で、バージョン0.16にアップしました。とても欝だ…（2005-12-17）

【追記７】　大幅に構成等を見直した上で、バージョン0.2にアップしました。バージョンアップする場合は、必ずテーブルを含めアンインストールした上で、再インストールしてください。（2006-01-03）

【追記８】　バグの修正などを行なった上で、バージョン0.21にアップしました。（2006-01-03）

【追記９】　大幅に機能をアップし、「NP_Analyze」正式版とした上で、バージョン0.3にアップしました。オプション設定の追加項目があるので、バージョンアップする場合は、必ず再インストールし直してください。（2006-01-07）

【追記１０】　各種ロボット等（NG）データ格納時のバグを修正したり、様々な細かい改良を加えた上で、バージョン0.31にアップしました。オプション設定の追加項目があるので、バージョンアップする場合は、必ず再インストールし直してください。（2006-01-10）

【追記１１】　リファー元の取得方法について全面的に書き換えたり、細かい改良を加えた上で、バージョン0.32にアップしました。オプション設定の追加項目があるので、バージョンアップする場合、再インストールすることをお勧めします。（2006-01-12）

【追記１２】　オプション設定で各月別集計データの翌月以降に引き継ぐデータの上限を指定できるようにしたり、各月別集計を呼び出しやすくしたり、新バージョンのチェックリンクを作ったり、その他細かい諸改良を加えた上で、バージョン0.33にアップしました。なお、ソースを全面的に見直したので、もしかしたら読込み速度が早くなったかもしれません。オプション設定に重要な追加項目があるので、バージョンアップする場合、再インストールすることを強くお勧めします。（2006-01-15）

【追記１３】　コメント投稿時のバグ修正や検索エンジン対策等を施した上で、バージョン0.331にアップしました。（2006-01-15）

【追記１４】　大幅な改良を加えた上で、バージョン0.4にアップしました。至るところでサーバへの負担軽減がはかられているので、バージョンアップすることをお勧めします。また、各種機能アップもはかっています。（2006-01-27）

【追記１５】　グラフ機能を追加し、日をまたぐ際の集計処理のバグを修正した上で、バージョン0.41にアップしました。結構大きなバグなのでバージョンアップをお勧めします。なお、一部グラフ機能については、バージョンアップの際にアンインストールをした上でインストールしないと動きません。（2006-01-28）

【追記１６】　重大なバグを修正した上で、バージョン0.411にアップしました。（2006-01-29）

【追記１７】　インターフェイスの統一や、バグの修正などを行った上で、バージョン0.42にアップしました。（2006-01-30）

【追記１８】　SQL文実行の最適化を行なったり、月別のアクセス状況において棒グラフの追加等をした上で、バージョン0.43にアップしました。オプション設定に重要な項目を追加したので、アップデートする際は一度アンインストールしてからインストールしてください。（2006-02-01）

【追記１９】　ページ別集計結果表示機能を追加した上で、バージョン0.44にアップしました。（2006-02-02）

【追記２０】　スキンへの記述（※外部公開機能）を追加した上で、バージョン0.5にアップしました。（2006-02-04）

【追記２１】　スキンへの記述（※外部公開機能）を機能強化した上で、バージョン0.51にアップしました。（2006-02-05）

【追記２２】　ページ別集計結果表示機能を機能強化したり、プラグインオプションでサーバ時差に対応したり、バグを何点か修正した上で、バージョン0.52にアップしました。（2006-03-08）

【追記２３】　「NP_MultiTags」に対応したり、ブログ・カテゴリー別に集計結果を表示したり(※ただし対象はアイテムページのみ）、何点かバグを修正した上で、バージョン0.53にアップしました。ただ、「月一度メールでアクセス解析レポートを送る」オプションについては動作を確認できていないので自信ないです。（2006-08-12）

【追記２４】　過去の集計データへのダイレクトリンクフォームをつけたり、バグを何点か修正した上でバージョン0.531にアップしました。（2006-08-13）

【追記２５】　「NP_MultiTags」関係のバグを何点か修正した上でバージョン0.532にアップしました。（2006-08-21）

【追記２６】　セキュリティを強化した上でバージョン0.5331にアップしました。（2006-09-02）

最終編集者 jun [ 2006.09.22 (金) 18:32 ], 編集回数 43 回