無料ブログなどからサイトのURL・タイトル一覧を取得・出力

2014/11/27

無料ブログなどのサービスでサイトを公開している場合に、
いざサイトの引っ越しとなった時に、
まず必要になるのがサイトのコンテンツリストです。
そんなコンテンツのリストを巡回して取得してくれるツールを紹介します。

無料ブログなどからサイトのURL・タイトル一覧を取得・出力

こうした巡回ツールはいろいろあるとは思いますが、
個人的には直感的で出力機能があって、便利だったのでご紹介します。

Screaming Frog SEO Spider　というツールです。
インストール手順などはのちに記載します。

まずは使ってみる流れをご紹介します。

Screaming Frog SEO Spiderを起動すると、
初回起動時にはライセンス同意ダイアログが表示されます。

[Accept]をクリックして同意します。

初回起動ライセンス同意

Screaming Frog SEO Spiderが起動したら、
「Enter url tospider」部分に巡回させたいサイトのURLを入力します。
※こうしたツールは基本的に自分のサイトに対して行うようにしましょう。

入力が完了したら[Start]をクリックします。

巡回URLの入力と実行

すぐにサイトの巡回が開始され、URLの情報が取得されます。

巡回開始とプログレスバー

巡回が完了すると一覧にURLの一覧が表示されます。

結果が表示されている状態で[Export]をクリックします。

巡回結果のエクスポート

ファイルの保存ダイアログが表示されますので、保存します。

保存ダイアログ

Excel形式で保存するとExcelで利用ができます。

保存されたExcel

なお、保存形式はExcelとCSVから選択できます。

保存形式

このようにして非常に簡単に無料ブログなどの既存コンテンツの一覧を、
ExcelやCSVで取得することができます。

Screaming Frog SEO Spiderのインストール手順は特に迷うことはないはずです。

インストール

Screaming Frog SEO Spiderのサイトにアクセスします。

Screaming Frog SEO Spider Tool & Crawler Software | Screaming Frog

「Download Now for Free」からOSにあったバージョンを選択します。
ここではWindowsとします。

Screaming Frog SEO Spiderサイト

すぐに保存ダイアログが開きますのでファイルを保存します。

Screaming Frog SEO Spiderインストーラ

保存された実行ファイルを起動し、インストールを開始します。

インストール先の選択を行います。
問題なければ[Next]をクリックします。

インストール先の選択

プログラムメニューの作成についても問題がなければ[Install]をクリックします。

プログラムメニューの作成

インストールが開始されプログレス表示されます。
インストールが完了したら[Close]をクリックします。

インストールプログレス

スタートメニューから[Screaming Frog SEO Spider]を選択すれば起動されます。

スタートメニュー

特に迷うことはないとは思いますが私は軽くて便利だと思います。

ただ、無料版では巡回結果をそのまま保存することができなかったり、
500URLまでに制限があったりと一定の制約はあります。

The Screaming Frog SEO Spider Is Free For Up To 500 URLs

The standard ‘Lite’ version of the tool is completely free, however this version is limited to crawling a maximum of 500 URI and it does not give you full access to the configuration options of the spider, saving of crawls or the custom source code feature. You can crawl 500 URLs from as many websites as you like as many times as you like though!

For just £99 per annum you can purchase an individual licence which removes restrictions on the 500 URI maximum crawl and opens up the spider’s configuration options and custom source code search feature . Alternatively hit the ‘buy a licence’ button in the spider to buy a licence after downloading and testing the software.

とは言え、十分に利用できるツールだと思います。

無料ブログなどで500URLを超えることもあるとは思いますが、
そうした場合には、その他の巡回ツールを利用するか、
有償版にアップグレードされるといいと思います。