カテゴリー
WordPress

[Synology] WordPress/robots.txtの設定が不良で新版Google Search Consoleで”ブロックされている”と表示される件 – ID1474

本編 >

[Synology] WordPress/robots.txtの設定が不良で新版Google Search Consoleで”ブロックされている”と表示される件 – ID1474
スポンサーリンク

by Google Ads ID:8603

robots.txtの問題

自前のSynology NASにWordPressを立ち上げている場合で、SEO pluginにrobots.txtを設定しているにもかかわらず、Google Search Consoleでrobots.txtでブロックされている、と警告が出ていた。

この問題は、約半年の間冷やしたり、温めたりして、問題解決を素人なりに模索していました。

当サイトの場合、以下のアドレスを表示させるとrobots.txtの内容が確認できるらしい事がわかったので、以下のアドレスをChromeで表示してみました。

結果は、正にブロックされていることが分かりました。「Disallow: /」がそれです。ルート以下が許可されていませんでした。

https://harikiri.diskstation.me/robots.txt

User-agent: *
Disallow: /

ですが、当サイトでは、もう一つ下の階層”myblog”にblogを設置しているので、Chromeで以下のアドレスを表示してみたが、ファイルが無いと吐かれました。

注意

この記事を書いている時期は、サプディレクトの「myblog」以下にサイトを構築していました。2020/04現在では、Redirectionプラグインで、このサブディレクトは、必要なくなりました。
https://harikiri.diskstation.me/ でOKです。

https://harikiri.diskstation.me/myblog/robots.txt -> “ファイルがない、とのメッセージ”

以上の結果は、All in One SEOで設定した内容が、なぜか何処にも正しい設定内容で、且つ、正しいフォルダ位置に反映されていないという事です。

自前でrobots.txtを用意

仕方がないので、robots.txtを自前で用意して、今は分からない何処かのフォルダーに設置するこにしました。

アクセス権が正しい「robots.txt」雛形ファイルを作る

自前で保管する場合、心配になるのがアクセス権の設定です。この問題は、WordPress用のPluginであるYoast SEOを使用しましたた。robots.txtを記述して保管する機能があります。

その後、Yoast SEOは役割を終えましたので停止させました。

robots.txtを配置する

作成したrobots.txtは、ルート以下「/」と、サブディレクトリ以下「/myblog/」に作成した同じrobots.txtファイルを配置しました。後から不要な一方は削除する予定。

Googleにクロールさせる

色々ググってみると、旧版のGoogle Search Consoleなるものがあって(新版Google Search Consoleの左メニューの一番下に「以前のバージョンに戻す」があり、これが旧版)、そこには、左メニューに「クロール」-> robots.txtテスターなるものがあります。

これを使用して、以下、robots.txtの内容をGoogleに知らせることができます。更に、新版からインデックスできるように設定することができました。

インデックスの試行錯誤は、以下の試行錯誤を行いました。

robots.txtの解決

編集

以上のように、当サイトには2つのフォルダにrobots.txtが存在する状態で、以下の旧版Google Search Consoleを使用して問題解決を進めた。

旧版Google Search Consoleのrobotsテスターでテストする場合,実サイトには修正したrobots.txtを配置しているのに,再読み込みをしてくれない。よって,robotsテスターを実行しても、以前の内容のままなのでエラーになる。

そこで,旧版Google Search Console -> クロール -> robots.txt -> “robots.txtの内容が表示される”。この内容を直に編集する。横にあるリンク”公開済みのrobots.txtを表示する”で実サイトのrobots.txtの内容を表示できるので、この内容をコピぺしてもいい。

送信

その後、送信ボタンを押すと、ダイアログが表示される。以下の”3. Googleに更新リクエスト”について送信ボタンを押す。

1. 更新されたコードのダウンロード

2. アップロードされたバージョンを確認

3. Googleに更新をリクエスト

ダイアログのでダイアログを消し、その下のテスト・ボタン(Googlebotを選択した状態)を押す -> テスト・ボタンは”許可済み”の表示となる。

URL検査

新版から”URL 検査”を実行すると,これまでは,15秒程度で”robots.txtがブロックしている”とのエラーが出ていたものが,今回の操作のあとは,検査の実行後に、その結果が返ってくるまでの時間が、明らかに伸びてインデックス処理をしている感触があった。その結果、以下のように、半年間進展がなかった懸案が、以下、表示されたように進展をみることができた。

新版Google Search Console -> URL検査 -> サイトのアドレスを入れて、実行

URLはGoogleに登録できますが、問題があります・・・”やっと登録できた。うれしい^^”

登録の可否 : URLはインデックスに登録できます・・・”やったぞ,やっとだ.やってやった”

その後、「インデックス登録をリクエスト」を実行した。しばらくすると、上記の表示は以下のように変化した。

URLはGoogleに登録されています。・・・”あはぁ”

カバレッジ: インデックスは登録されましたが、サイトマップに送信していません”・・・”もうすこしだ”

以上で,Robots.txt問題は,とりあえず次のステップへと進む.

to be continue.

スポンサーリンク
Synology DS918+ by AMAZON – ID14279
スポンサーリンク
  • ABS使用可 造形サイズ175×175×175mm オープンフィラメント可 オートキャリブレーション機能付き レーザー刻印機能拡張可 金属系PLA拡張可 3FJSPXJP00G - ダビンチ Jr.Pro X+ XYZプリンティングジャパン by AMAZON ID21509
  • XYZプリンティング3Dプリンター|ダヴィンチ1.0 pro|オートキャリブレーション機能付|オープンフィラメント可|ABS対応|造形サイズ20×20×20cm|レーザー刻印機能拡張可|積層ピッチ0.02mm~|高性能|3F1AWXJP00F - ダビンチ 1.0 Pro - XYZプリンティングジャパン by AMAZON ID21511
  • 3Dプリンター ダヴィンチ Jr. 1.0(造形サイズ15×15×15cm) - 環境に優しい土に返るPLAフィラメント - ダビンチ Jr. 1.0 XYZプリンティングジャパン by AMAZON ID21513

編集履歴

2020/04/24 文言整備

スポンサーリンク
  • by Amazon ID19245
  • by Amazon ID13339
  • by Amazon ID13211
  • by Amaozn ID13196

ここまで

< 本編はここまで。

Update ID21920

AstraZeneca, company
気になる企業 – AstraZeneca; アストラゼネカ 最も進んでいる新型コロナウイルス感染症ワクチン – P3試験再会 – ID19390 [2020/09/18]

目次1 AstraZeneca1.1 COVID-19関連1.1.1 開発ワクチン1.1.2 治療薬 AstraZeneca COVID-19関連 開発ワクチン 新型コロナウイルス感染症(COVID-19)に対するワクチ […]

KNOWLEDGE
[用語] 角膜上皮幹細胞疲弊症 – ID23088 [2020/09/18]

結膜と角膜の境界にある角膜輪部(黒目の最も外側)には、角膜上皮幹細胞が存在している。先天的または、後天的に失われて角膜再生が低下し透明性が悪くなり視力を低下させる。 ジャパン・ティッシュ・エンジニアリング(J-TEC)は […]

AAV, BIOLOGICS, education, gene-therapy
[Bio-Edu] Plasmid – バイオロジクスには欠かせないトラディショナルな遺伝子組換え技術、そして rAAVを作るまで! – ID12915 [2020/08/05]※

目次1 はじめに2 まずは、遺伝子組換え技術2.1 大腸菌とPlasmid2.2 制限酵素2.3 DNAリガーゼ (ligase)3 大腸菌にタンパク質を作らせる4 Competent Cell4.1 製品4.1.1 X […]

BIOLOGICS, mAb
[抗体/情報] 年々増える抗体医薬 – Antibody Societyでは抗体医薬がリストされている – ID15492 [2020/05/08]

目次1 Antibody Societyサイトの紹介2 編集履歴 Antibody Societyサイトの紹介 抗体医薬の承認数は増加するばかりです。バイオ紙ミラー以外の新薬に関する承認済みやレビュー中のリストは、「An […]

Synology, WordPress
[WordPress] 自宅NASに設置のWordPressのプラグイン更新を出先から行う場合に、毎回出てくるパスワード入力を省略する設定 – ID89

出先から自宅NASのWordPressのプラグインを更新する 自宅サーバーに構築したWordPressのプラグイン更新には,デフォルトでパスワードを求めて来ます。以下のようにwp-config.phpを編集すれば、パスワ […]

analysis, BIOLOGICS
[Bio-Edu] 進化するPCR – droplet digital PCRまで – 原理を解説する ID19081 [2020/07/16]

PCR Polymerase chained reaction デジタルPCRとは。そして更に、ドロップレットPCRの原理は、シンプルで美しい。 ~20,000ウェルの微細なナノウェルにDNA分子をランダムに分配する 0 […]

スポンサーリンク

by Google Ads ID:19417(C)

最新記事(WordPress, ID:14681)

plugin, Synology, WordPress
[WordPress] 「AMP」まとめ – ID22520 [2020/09/13]

AMPの記事まとめ AMPページに対応すべく奮闘しています。当サイトで記事にしたAMP関連と情報リンクをまとめました。 AMP: a well-lit path to optimizing for Google’s pa […]

mail, plugin, Synology, WordPress
[WordPress] Synology (新)NASに立ち上げたWordPressから外へメールを飛ばす – WP Mail SMTP by WPFormsプラグインとGMail APIの設定 – ID22422 [2020/09/13]

目次1 はじめに2 準備3 プラグインのインストール4 API プロジェクトの作成4.1 OAuthクライアント IDの作成 はじめに レンタルサーバーでWordPressの運用と違い、Synology NASにWord […]

plugin, Synology, Theme, WordPress
[WordPress] このサイトの表示に関係する使用している「テーマ」と「プラグイン」のリスト – ID22353 [2020/09/11]※

目次1 はじめに2 システム構成3 プラグイン・リスト はじめに 現在、見られているこのサイトの表示に関わるWordPressテーマ、およびプラグインのリストを公開します。これからWordPressでサイトの構築をされる […]

plugin, Synology, WordPress
[WordPress] 「AMP」プラグイン と広告プラグイン: 「Advance Ads Pro」- 高速化と広告表示の両立を図る – ID22304-UM [2020/09/9]

ナレッジベース 不要な他のPluginを削除して、AMPから再検証する作業を全てのページに施しました。その後、AMPページとしてGoogle Adsの表示が不可になっていました。<br>AMP Pluginを […]

plugin, WordPress
[WordPress] blogに載せる写真のメタデータは、EWWW Image Optimizerで取り除く – ID321 [2020/08/20]※

EWWW Image Optimizerプラグイン WordPressのblogで載せる写真は、そのままのサイズでアップしてはいけません。メタデータはそのまま残っているためです。メタデータのGeotabには、位置情報が記 […]

IT, Synology, WordPress
[Synology] RT2600acのVPN Plus Serverの導入 – 個人でも高いセキュッリティが得られる高速WiFiルーター – ID37

目次1 出先からRT2600acにアクセスするには1.1 VPN経由1.2 VPNのインストール(VPN Server側)1.3 L2TPの設定 (VPN Server側)1.4 iPhoneの設定 出先からRT2600 […]

Page: 1 2 22
スポンサーリンク

by Google Ads ID:19417(C)

その他記事(ALL-RANDOM, ID:16786)

acepodia, company
気になる企業 – Acepodia – ID6990

HER2抗原陽性の固形がんの治療にNK細胞-Antibody (Antibody Cell-Conjugation:ACC technology)を使用した臨床試験の開始がFDAにより承認された(2020/01/09) […]

HEALTH
[Kw] ヒドロキシクロロキン – FDAはCOVID-19感染予防の緊急使用を撤回 – ID17717 [2020/05/16]

FDAは、抗マラリヤ薬で知られる「ヒドロキシクロロキン」のCOVID-19感染予防に対する緊急使用を許可していましたが、効果が無いこと、及び心臓への副作用も強いことから、緊急使用を撤回しました。ヒドロキシクロロキンについ […]

BIOLOGICS, mRNA, vaccine
[Vc] 核酸ワクチンとは DNAワクチンとmRNAワクチン – ベクターワクチンとの違い – ID15040 [2020/09/10]※

目次1 核酸ワクチン2 核酸には、DNAとmRNA2.1 DNAワクチンとRNAワクチンのメリット/デメリット2.1.1 DNAワクチン2.1.2 RNAワクチン3 関連記事4 参考文献 核酸ワクチン 核酸ワクチンとは、 […]

BIOLOGICS, education
[Bio-Edu] 腫瘍溶解性ウイルスによる治療薬の開発 (タカラバイオ) – ID3358

C-REVは単純ヘルペスウイルス1型(HSV-1)を弱毒化した腫瘍溶解性ウイルス。天然型に比べ神経毒性が減弱化されている。癌細胞に感染すると特異的にその癌細胞で増殖し破壊する。これは、再生医療等製品に分類されている。 C […]

LIFE, town
[Trip] 大阪においでの際は、水上バスはいかが – ID2621

水上バス水上バス 大阪城周辺を走って、川に入るコース。 大阪の京阪電鉄・天満橋駅の川の駅、水上バスのツアーがあります。この辺りの道でよく見かけるこの水上バス。どこから発着するのか疑問でしたが、灯台下暗し、見つけました。 […]

BIOLOGICS, education
[Bio-Edu] (1) 血液中の蛋白質 – ID6520

血液 血球 : 赤血球 血漿 : 遠心分離して血球を除いた上清画分 血清 : 血液を凝固させて凝固画分を取り除いた上清画分 蛋白質 濃度 説明 Albumin 35-55 mg/mL 血中浸透圧調節、低分子キャリア γ […]

Page: 1 2 135
スポンサーリンク

by Google Ads ID:19417(C)
スポンサーリンク

- 以下のツールに敬意を示します -
Support to AMP (Accelerated Mobile Pages) by official AMP plugin for WordPress, and compatible powered by
Post viewing : Flex Posts - Widget and Gutenberg Block

スポンサーリンク

by Google Ads ID:19430 (D)