SPAサイトがインデックスされない
実際のブラウザでJavaScriptを実行し、完成後のHTMLをそのまま返すツールです。ReactやVueなどで作られ、検索エンジンやSNSのクローラーがJavaScriptを実行できずコンテンツを認識できないサイトのために使います。
オンラインで実行
アカウントでログインし、当社のサーバー上で実行します。無料ツールはブラウザ内で動作しますが、これは上記の料金がKIT残高から差し引かれます。
症状: 作ったのに検索に出てこない
ReactやVue、AngularなどJavaScriptで画面を組み立てるサイトは、訪問者には正しく表示されても、検索エンジンやSNSのクローラーには空のHTMLしか見えないことがあります。Googleは条件付きでJavaScriptを実行しますが順番待ちの列に入り反映まで時間がかかり、他の多くのクローラーはそもそも実行しません。
レスポンスの中身
URLを送信するとtask_idが返り、実際のブラウザがそのページを開いてJavaScriptを実行します。訪問者が見るのと同じ内容の、完成済みHTMLが結果として返ります。1URLあたりのタイムアウトは30秒、1回の実行で最大25URLまでまとめて処理できます。
クローラーへの出し分けと注意点
自社サーバー側でアクセス元がクローラーかどうかを判定し、クローラーには生成済みのHTMLを、通常の訪問者にはこれまで通りのサイトを返す運用が一般的です。Googleが「動的レンダリング」として文書化している方法で、クローキングとは異なります。守るべき原則は一つで、クローラーに見せる内容は訪問者に見せる内容と同じにすることです。
料金の目安
料金は1回$0.040に加えて、処理したURL1件につき$0.001です。15ページを週1回生成し直しても、月あたり$0.35程度です。月額料金や最低利用料はなく、必要な分だけの支払いです。
サーバーサイドレンダリングとの違い
Next.jsなどですでにサーバー側でHTMLを組み立てているサイトには、この機能は基本的に不要です。向いているのは、ブラウザ側だけで画面を組み立てているサイトや、構成を作り替える余裕が今はないサイトです。
活用例
納品後に指摘された「検索に出ない」
合同会社みどりデザインは、Reactで制作したコーポレートサイトを納品した1か月後、下層ページが1件もインデックスされていないと指摘を受けました。作り直す代わりにクローラー向けの事前生成HTMLに切り替え、コードを変えずにインデックスされるようになりました。
LINEで共有した時のリンクプレビュー
JavaScriptで作られた商品カタログをLINEで共有すると、画像もタイトルも出ない空白のプレビューになっていました。事前生成したHTMLにOGPのタグを含めることで、共有時に商品名と写真が表示されるようになりました。
毎週入れ替わる賃貸物件情報
ある不動産サイトでは、物件情報がJavaScriptで週単位で入れ替わります。新しい物件が公開されるたびにHTMLを生成し直すことで、掲載直後の物件も住所や価格を含んだ状態で検索エンジンに届きます。
作り替えまでのつなぎとして
Angularで作られた通販サイトを引き継いだ担当者は、サーバー側でHTMLを組み立てる構成への移行を計画しつつ、当面は売れ筋30ページだけHTMLを事前生成しています。移行の完了を待たずに、検索からの流入を保っています。
よくある質問
これはクローキングになりませんか?Googleのペナルティが心配です。
クローキングは、クローラーに見せる内容を訪問者に見せる内容と変えることです。この機能は同じ内容を先に生成して返すだけなので、クローキングには当たりません。Googleは「動的レンダリング」という名前でこの方法自体を文書に記載しています。ただし、クローラーに見せる内容を訪問者と違うものにした場合はガイドライン違反になります。
Next.jsでサーバーサイドレンダリングを使っています。それでも必要ですか?
多くの場合は不要です。サーバー側ですでに完成したHTMLを返しているサイトには、この機能が解決する問題自体がありません。向いているのは、ブラウザ側だけで画面を組み立てているサイトです。
生成したHTMLはどのくらいの頻度で作り直せばよいですか?
ページの更新頻度によります。会社概要のような固定的なページは数週間そのままでも問題ありませんが、価格や在庫が変わるページは毎日、または内容を更新するたびの作り直しをおすすめします。
料金はいくらで、どう支払いますか?
1回$0.040に、処理したURL1件につき$0.001が加わります。料金は米ドル建てで、PayPalで直接お支払いいただけます。月額料金や会員登録は必要ありません。
送信したURLや生成したHTMLはどう扱われますか?
生成したHTMLは実行結果としてお客様のものです。保存場所や配信方法はお客様が決めることができ、内容を弊社側で再利用したり分析したりすることはありません。
日本語のサポートはありますか?
申し訳ありませんが、日本語でのサポートは行っておりません。サポートは英語またはスペイン語で、担当者が直接対応します。ツール自体は日本語で問題なくご利用いただけます。
一度に何ページまで処理できますか?
1回の実行で最大25URLまでまとめて指定できます。それ以上のページ数がある場合は、優先度の高いページから複数回に分けて実行してください。
開発者向け — APIアクセス
このページの機能はすべてAPIからも利用できます。自社システムに組み込みたいチーム向けのセクションです。それ以外の方は上のツールをそのままお使いください。
エンドポイント
Bearerトークンで認証し、POST1回でタスクをキューに登録します。結果はWebhookまたは署名付きリンクで受け取れます。
お使いのスタックから呼び出す
curl -X POST https://api.kit.forhosting.com/web/prerender \
-H "Authorization: Bearer $KIT_KEY" \
-H "Content-Type: application/json" \
-d '{"url":"https://ejemplo.com"}'const res = await fetch("https://api.kit.forhosting.com/web/prerender", {
method: "POST",
headers: {
"Authorization": `Bearer ${process.env.KIT_KEY}`,
"Content-Type": "application/json"
},
body: JSON.stringify({
"url": "https://ejemplo.com"
})
});
const { task_id } = await res.json();import os, requests
res = requests.post(
"https://api.kit.forhosting.com/web/prerender",
headers={"Authorization": f"Bearer {os.environ['KIT_KEY']}"},
json={
"url": "https://ejemplo.com"
},
)
task_id = res.json()["task_id"]<?php
$res = file_get_contents("https://api.kit.forhosting.com/web/prerender", false, stream_context_create([
"http" => [
"method" => "POST",
"header" => "Authorization: Bearer " . getenv("KIT_KEY") . "\r\nContent-Type: application/json",
"content" => '{"url":"https://ejemplo.com"}',
],
]));
$task = json_decode($res, true);body := bytes.NewBufferString(`{"url":"https://ejemplo.com"}`)
req, _ := http.NewRequest("POST", "https://api.kit.forhosting.com/web/prerender", body)
req.Header.Set("Authorization", "Bearer "+os.Getenv("KIT_KEY"))
req.Header.Set("Content-Type", "application/json")
res, _ := http.DefaultClient.Do(req)リクエスト例
{
"url": "https://ejemplo.com"
}レスポンス例
{
"task_id": "tsk_a1b2c3d4e5f6a1b2c3d4e5f6",
"type": "web.prerender",
"status": "queued",
"_links": {
"result": "/tasks/tsk_…/result"
}
}非同期APIです。task_idは即時に返ります。ポーリングは1秒あたり1リクエストまでです。
料金
単価はすべて公開しています。トークン換算や独自クレジットはありません。失敗したタスクは課金されません。
制限
timeout_sec | 30 |
max_crawl_pages | 25 |
エラー
| HTTP | コード | 意味 |
|---|---|---|
401 | unauthorized | APIキーが無効か、指定されていません。Authorizationヘッダーを確認してください。 |
402 | insufficient_balance | 残高が不足しています。チャージ後に再度お試しください。 |
404 | unknown_type | 指定されたタスクタイプは存在しません。タイプ名を確認してください。 |
429 | rate_limited | リクエストが多すぎます。しばらく待ってから再度お試しください。 |
422 | task_failed | タスクの処理に失敗しました。このタスクは課金されません。 |