WEB ページの取り込み

ナレッジの「WEB」では、ウェブサイトのページを取り込み、チャットボットの回答に使えるようにします。取り込んだページは「取り込んだページ」の一覧に表示されます。

この画面の操作ができるのは、オーナーと編集者です。閲覧者ができるのは、一覧を見ることと、一覧の CSV ダウンロードです(メンバーのロールとできること)。

URL の登録方法#

右上の「URLを追加」から、登録の種類を選びます。どちらも登録するとすぐに取り込み(更新の実行中なら、その更新のあとに続けて取り込み)、その後は自動更新の設定に従って取り込み直します。

メニュー説明
単一URLを追加…入力したURLのページだけを取り込みます。
起点URLを追加…入力したURLから、サイト内のページをたどって取り込みます。除外パターンも指定できます。

起点からたどる範囲#

起点からたどるのは、起点と同じオリジン(https / http、ドメイン、ポートが同じ)で、起点のパスと同じか、その下にあるページです。サブドメインは含みません。

  • 例:https://example.com/ を起点にした場合 … https://example.com のサイト内のページを取り込みます。
  • 例:https://example.com/blog/ を起点にした場合 … https://example.com/blog と、その下のページ(https://example.com/blog/…)を取り込みます。

追加時の警告・エラー#

URL を入力すると、入力欄の下に次のような警告・エラーが出ることがあります。

種類内容追加
入力の誤りURL や除外パターンの形式・長さが正しくないできない
登録済み同じ URL が同じ種類(単一URL・起点)ですでに登録されているできない
登録数の上限単一URL・起点の登録数が上限に達しているできない
プランの上限プランのページ上限に達している単一URL はできない。起点はできるが、新しいページは取り込まれない
お知らせ別の種類で登録済み、起点からすでに取り込まれている、ほかの起点の範囲に含まれるできる

取り込まれたURLの種類#

一覧の「取り込み方」列には、そのページがどの登録によって取り込まれているかが表示されます。1 つのページに複数表示されることがあります。

種類説明登録者
単一URL単一URLとして登録したページユーザー
起点起点URLとして登録したページユーザー
クロール起点からリンクをたどって見つかったページシステム

各行の設定メニュー(⋯)#

一覧の各行の右端にある「⋯」を押すと、その行の設定メニューが開きます。更新中は、取り込みと再クロールはできません。

メニュー表示される行動作
取り込み / 再取り込み単一URL・クロールの行(配信がオフ、リダイレクト、重複の行を除く)このページだけを取り込みます。まだ内容を取り込んでいないページでは「取り込み」、取り込み済みのページでは「再取り込み」と表示されます。
起点のみ取り込み / 起点のみ再取り込み起点の行起点のページだけを取り込みます。リンクはたどりません。
再クロール起点の行この起点から、サイト内のページをたどり直します。
クロールの設定…起点の行「取り込む範囲」と「この起点の状態」(最終更新など)を確認し、「除外パターン」を編集します。
削除…起点・単一URLの行登録を削除します。起点と単一URLの両方で登録されている行では「削除(起点)…」「削除(単一URL)…」に分かれます。クロールだけの行は削除できません(取り込みたくない場合は、配信をオフにするか、除外パターンを使います)。

除外パターン#

起点ごとに、取り込まないページを URL の文字列で指定します。その文字列を含むページは取り込まず、その先のリンクもたどりません。起点の URL 自体に当たる文字列は指定できません。

除外パターンを変えると、すでに取り込んだページが削除されることがあります。保存する前に、削除されるページの件数が表示されます。

登録の削除#

登録を削除すると、その登録だけで取り込まれていたページも削除されます。ほかの登録からも取り込まれているページは残ります。削除する前に、削除されるページが表示されます。

URLの状態#

一覧の「状態」列には、そのページを最後に取得したときの結果が表示されます。回答に使うかどうかは「配信」で決まり、状態とは別です。「取得日時」列は、最後に取得できた日時です。配信をオフからオンにするには、プランのページ上限に空きが必要です。

状態意味配信が可能か対応
リダイレクトこのページは別の URL へ転送されます。不可転送先のページが範囲内なら、転送先が取り込まれます。必要なら転送先の URL を登録してください。
重複同じ内容のページがほかにあります。不可対応は不要です。同じ内容のもう一方のページ(元のページ)の内容が回答に使われます。
アクセス権限なしサイトがアクセスを拒否しました(HTTP 401 / 403)。可ログインが必要なページや、アクセス制限のあるページは取り込めません。サイト側の設定をご確認ください。
ページなしページが見つかりませんでした(429 を除く 4xx。404 など)。可URL が変わっていないかご確認ください。次回の更新でも再度取得を試みます。
上限超過プランのページ上限を超えています。プランを下げたときに上限を超えた分のページにも付きます。不可ほかのページの配信をオフにして空きを作るか、プランの変更をご検討ください。
取り込み中取り込みを実行中です。可完了までお待ちください。
更新失敗(旧版を配信中)最新の取得に失敗しました(サーバーエラー、応答なし、429 など)。可一時的なエラーのことが多いため、次回の更新をお待ちいただくか、「再取り込み」をお試しください。
取得失敗取得に失敗し、まだ内容を取り込めていません。可時間をおいて「取り込み」をお試しください。
正常最後の取得に成功しました。可対応は不要です。
未取得まだ取得していないか、まだ内容を取り込んでいません。可次回の更新、または「取り込み」で取り込まれます。

上限#

一覧の右上に、配信中のページ数と、ご契約のプランで取り込めるページ数(上限)が表示されます。配信がオフのページは数えません。

配信中が上限に達すると、新しく見つかったページは「上限超過」になり、新しいページを単一URLとして追加することもできません。ほかのページの配信をオフにして空きを作ってください。起点URLは追加できますが、新しく見つかったページは取り込まれません。

このほか、登録できる起点・単一URLの数、URL の長さ、除外パターンの数と長さにも上限があります。

今すぐ更新#

一覧の右上の「今すぐ更新」を押すと、登録したすべての起点と単一URLを、その場で取り込み直します。起点からは、リンクをたどり直します。起点も単一URLも登録されていないときは押せません。更新では、ページを次のように扱います。

ページ扱い
新しく見つかったページ取り込みます。プランの上限を超える分は「上限超過」になります
内容が変わったページ取り込み直します
起点からたどれなくなったページ一覧から削除します。単一URLとして登録したページと、ほかの起点からたどれるページは残ります。更新が途中で失敗したときは削除しません
なくなったページ(404 など)一覧に残り、状態が「ページなし」になります。回答には使いません
配信がオフのページ取得し、リンクもたどります。回答には使いません

自動更新#

一覧の右上の「自動更新」で選んだ頻度で、今すぐ更新と同じ更新を自動で行います。頻度はチャットボットごとに 1 つです。ご契約のプランで使えない頻度は、選べない状態で表示されます。

頻度対応プラン
自動更新しないすべてのプラン
毎月すべてのプラン
毎週スタンダード以上
毎日プレミアム

配信#

「配信」のスイッチで、そのページを回答に使うかどうかを切り替えます。配信がオフの行には、設定メニュー(⋯)の「取り込み」「再取り込み」は表示されません。

配信ボットが回答に利用するか
オン利用する
オフ利用しない

一覧の CSV ダウンロード#

一覧の右上の「CSVでダウンロード」を押すと、取り込んだページの一覧を CSV ファイルで保存できます。オーナー・編集者・閲覧者のいずれも使えます。絞り込みに関係なく、配信がオフのページも含むすべてのページが対象です。

カラムは次の順です。値が無い項目は空欄になり、日時は日本時間です。「配信」は、ページごとの配信スイッチの状態です。表計算ソフトで数式として実行されないよう、「=」「+」「-」「@」で始まるセルには、先頭に「'」を付けています。

カラム内容
URLページの URL
タイトルページに設定されたタイトル
大見出しページの最初の大見出し
ソーシャルメディア向けタイトルソーシャルメディアでの共有用に設定されたタイトル
取り込み方単一URL・起点・クロール
取得日時最後に取得できた日時
状態最後に取得したときの結果
配信オン / オフ