CrawlRay Studio
CrawlRay Studioは、テクニカルSEOクローラーです。リダイレクト、canonical設定、robots.txtのルール、デッドリンクを解析し、インデックス可能性を診断します。
仕様および機能
🚀 高速多重クロール
数分間で数千ページを解析。サーバーに過度な負荷をかけないよう、クロール速度制限を調整できます。
🔗 インデックス整合性の検証
robots.txtの記述、meta-robots タグ、canonical 指定、hreflangの言語関連性が正しいか確認します。
📝 内部リンク関係図
リンク切れ(404エラー)、リダイレクトループ、どこからもリンクされていない孤立ページを特定します。
📂 メタデータと見出し(H1-H3)監査
ページのタイトル(title)やメタディスクリプションが適切に入力されているか、見出しの階層構造に間違いがないかチェックします。
🛠️ エラーの重要度分類
クロール結果を「Errors」「Warnings」「Notices」に自動で振り分け、修正タスクの優先度決定を支援します。
⚖️ SQLiteによるローカル保存
結果はローカルにSQLite形式で保存されるため、再度クローラーを動かさなくても過去の履歴を瞬時に確認できます。
スナップショット比較による変化の特定
サイトの改版やアップデートによって、これまで正常だったSEO設定が崩れてしまうことがあります。CrawlRayは過去のクロールデータと比較し、新たに追加されたエラーや、修正が完了した箇所をすばやく検出します。
- 新規エラー検出(今回の改修によって発生した404やリダイレクト切れを赤字で警告)
- 修正確認レポート(前回指摘したSEO問題がエンジニアの手によって正しく修正されたかを検証)
- 属性の履歴ログ(タイトルタグの変更履歴、canonicalパスの変化、robots.txt ルールの推移)
🤖 ローカルAIによるSEO改善アドバイス
オプションのローカルAIを活用することで、検出された専門的なエラー内容を「エンジニア向けの修正指示書」に分かりやすく書き直したり、Nginx用のリダイレクト設定コードを自動生成できます。
💡 AI Suggestions Example:
"Found 42 pages with thin content. These URLs belong to /blog/archives/ and should be marked as noindex via robots meta-tags or consolidated into redirect canonical points to avoid diluting crawling budgets."
このようなSEO専門家に最適です
SEO Experts
SEOコンサルタント:月額費用やクロールページ数制限を気にせず、顧客サイトの大規模なテクニカル診断を行いたい場合。
Agencies
マーケティング代理店:監査データや過去のサイト履歴をすべて自社のPC内に安全にアーカイブ保存しておきたい場合。
Web Developers
フロントエンド開発者:新しいコードを本番サーバーへ反映する前に、リダイレクトやメタタグの設定が正しいかをローカル環境から検証したい場合。
Site Owners
ECサイトの運営者:サイト全体のリンク構造を監視し、大事な商品詳細ページが技術的なエラーでインデックスから消えないように保護したい場合。
CrawlRay Studio FAQ
一度にクロールできるページ数に制限はありますか?
制限はありません。SQLiteは数十万ページ規模のURLデータも非常に高速に検索可能です。制限はお使いのパソコンのディスク空き容量のみです。
JavaScriptによって読み込まれるコンテンツは解析できますか?
CrawlRayは超高速な静的HTML解析に特化しています。JavaScriptの実行エンジンについては、今後のアップデートで選択可能なオプションとして追加予定です。
クローラーの User-Agent を変更できますか?
はい。設定画面から自由に User-Agent(例: Googlebot など)を書き換え、カスタムヘッダーやクッキーを設定できます。
どのような形式でデータをエクスポートできますか?
クローリングした全ページの情報や、フィルタリングしたエラーリストを CSV、Excel(XLSX)、JSON 形式で保存できます。
リダイレクトの追跡はどのように行われますか?
最初のURLから最終目的地のページ(ステータス200)に到達するまでのすべての過程を記録し、途中でループや長すぎるリダイレクトチェーンがある場合は警告を出します。
コアとなるデータの制御権を自らの手に留めたいプロフェッショナルのためのデスクトップソフトウェア
WebSoftLeaderは、ネットワークセキュリティ、テクニカルSEO診断、B2Bリード情報抽出、ローカルAI開発支援のためのデスクトップアプリケーションを開発しています。私たちの独立系ソフトウェアスタジオは、「ローカルファースト(local-first)」のデータ理念を徹底して追求しています。開発中のソースコードや、セキュリティ監査のログ、見込み客の名簿といった最重要データを外部サーバーへアップロードさせるオンラインの SaaS ツールとは異なり、WebSoftLeaderはお客様自身のパソコン内にのみデータを保管します。私たちは、より深く見通すことのできるツールを提供し、安全アナリスト、SEOアドバイザー、営業チーム、熟練プログラマーがクラウドの月額費用や機密流出のリスクから解放され、安心して専門的な解析やデータ収集を進められるようサポートします。
なぜプロフェッショナルな業務においてデスクトップアプリが今なお不可欠なのか
昨今のIT業界では、あらゆる作業をクラウドへ移行する動きが盛んですが、これは重大なセキュリティ上の懸念と、パフォーマンス面の低下を引き起こします。サーバーの脆弱性を診断したり、巨大なウェブサイトをクロールしたり、企業の営業リストを抽出するタスクにおいて、クラウド上のサーバーを利用するということは、SSHの秘密鍵や、ソースコードの依存マップ、顧客情報を第三者の外部データベースへ渡すことを意味します。これは物理的な攻撃面を広げてしまい、機密情報が外部漏洩するリスクを高めます。また、インターネットの回線状況や、API制限、クラウド事業者の通信遅延によって作業がたびたび妨げられるデメリットもあります。
WebSoftLeaderは、あなたのワークステーションにすべての主導権を取り戻します。macOS、Windows、Linuxに完全対応したネイティブアプリとして提供することで、パソコン本来のハードウェア性能を引き出します。クロール結果はローカルの SQLite データベースへミリ秒単位で高速保存され、HTMLの解析はプロセッサの最高速度で実行されます。また、Keychainやローカルの SSH-agent を利用して安全にサーバーに接続でき、ローカルのGPUやCPUを使って大言語モデル(GGUF形式)を100%オフラインで稼働させることができます。このため、情報漏洩の心配がないだけでなく、通信状況に左右されることなく、いつでもデータにアクセスして検証を進めることができます。
WebSoftLeader ソフトウェアの4つの大黒柱
私たちの全アプリケーション — PatchRay Security、CrawlRay、LeadRay、DeepCode Studio — は、同じ高水準の開発アーキテクチャと設計思想に基づいて構築されています:
- ローカルファースト(Local-First): プロジェクトファイル、SEOレポート、抽出データ、接続認証データはすべてお使いのPC内に暗号化または標準的なファイル(SQLite、CSV)で保存されます。あなたがすべてのデータの所有者となります。
- プロセスの完全可視化: 裏で動作するタスクを一切隠しません。AIモデルのロード進行状況、コンソールコマンドのログ、CPU/RAMの使用率などは、常に画面上にリアルタイムで表示されます。
- 緩やかにつながるモジュール設計: 各アプリのクローラーコア、SSH監査モジュール、AIインターフェースはそれぞれ独立しています。コマンドラインから単体スクリプトとして実行でき、ローカルデータベースへの書き込みも容易です。
- 人間主導のAIアシスタント: 私たちはAIによるCVEの解読や設定コード生成の利便性を認めていますが、開発者の手動承認なしにAIがファイルを直接書き換えたり、ターミナルでスクリプトを走らせることは禁止すべきだと考えています。
プロ品質の優れたインディーズソフトウェア
WebSoftLeaderのアプリケーション画面は、専門家が長時間にわたり監査やコード生成作業を行うことを考慮して、目の疲れを和らげる色調と整理された階層ルールで設計されています。プログラムには厳密なセキュリティ設定が施されており、利用状況などのテレメトリ情報が外部へ漏洩するのを完全に防ぎます。製品カタログをご覧いただき、開発ロードマップで最新の進捗をご確認ください。お問い合わせや機能カスタマイズのご相談は Telegram のアーキテクト窓口までご連絡ください。