Apache Kafka データ入力構成フィールド
Apache Kafka のデータ入力構成フォームのフィールドについて説明します。
基本構成
| フィールド | 説明 |
|---|---|
| 名前 | 新しいデータ入力の名前。このフィールドは必須です。 |
| 説明 | データ入力の説明。 |
| 実行日 | 特定の MID サーバー または MID サーバー クラスターを使用するかどうかを選択するオプション。このフィールドは必須です。 |
| MID |
([実行日 (Execute on)] フィールドが [特定の MID サーバー] に設定されている場合のみ) Apache Kafka に基づくログデータのプル先の MID サーバー。注: このフィールドは必須です。
|
| MID サーバークラスター | ( [実行日] が [特定のクラスター] に設定されている場合のみ MID サーバー 。) ログデータのプル先の MID サーバー クラスター。このフィールドは必須です。データ入力はクラスター内の単一の MID サーバー で実行され、その MID サーバー が失敗するまで継続します。次に、構成された順序に従って、クラスター内の次に利用可能な MID サーバーにすべてのデータ入力タスクが移動されます。 注: MID サーバークラスターの詳細については、「MID サーバークラスターの設定」を参照してください。
|
| サービスインスタンス | ログデータのバインド先のサービスインスタンス。 注: このフィールドは必須です。関連するサービスインスタンスが存在しない場合は、 作成 サービスインスタンス CI を追加します。新しいサービスインスタンスのステータスを [運用] に設定します。 |
次のフィールドには、読み取り専用の情報が表示されます。
| フィールド | 説明 |
|---|---|
| ステータス | データ入力のステータス。 |
| トランスポート (Transport) | ログデータのストリーミングに使用されるプロトコル。 このデータ入力は Apache Kafka を使用してログデータをインスタンスにストリーミングします。 |
| ソースの数 | このデータ入力によって作成されたログソースの数。 |
| 無効になった時刻 (Disabled since) | データ入力が停止または失敗した時刻。 |
| 前回のログ時刻 (Last log time) | データ入力で前回のログがストリーミングされた時刻。 |
| エラーメッセージ | ストリーミングエラー。 このフィールドは、自動的に入力されます。このフィールドは、ストリーミングエラーが発生した場合にのみ表示されます。 |
| フィールド | 説明 | 例 |
|---|---|---|
| 送信元 | データ読み取りの開始日時。この日時より古いデータは読み取られません。 注:
この値を過去の日付に設定すると、システムで大量のデータを読み取ることが必要になり、輻輳が生じる可能性があります。 このフィールドは必須です。 |
Now -1 week |
| フィールド | 説明 | 例 |
|---|---|---|
| Kafka ノード名 | 「<ホスト>:<ポート>,<ホスト>:<ポート>」形式のカンマ区切りリスト。すべての Apache Kafka クラスターサーバーをリストに含める必要はありません。 | 123.4.5.6:9092,123.3.4.5:9093 |
| トピック | データ入力による登録が必要なトピックのカンマ区切りリスト。 このフィールドは必須です。 |
FirstTopic,SecondTopic,ThirdTopic |
| Kafka 認証情報 | Apache Kafka 認証情報への参照。 検索アイコン (
|
なし |
| グループ ID | Apache Kafka コンシューマーグループの名前。 | logs |
詳細構成
| フィールド | 説明 | デフォルト値 |
|---|---|---|
| タイムアウト | トピックでデータが利用できない場合にポーリングで待機する時間 (ミリ秒)。 | 500 |
| ノードディスカバリータイムアウト | ノード検出がタイムアウトするまでの時間 (ミリ秒)。 | 30 |
| デフォルトのタイムゾーン (Default time zone) | ログにタイムゾーン情報が含まれていない場合のデフォルトのタイムゾーン。 | GMT |
| サブサンプルドロップ率 (Sub sample drop ratio) | このイベント数に達すると、イベントが 1 つ破棄されます。この設定は、フェッチするイベントの数を減らすために使用されます。 | -1 |
| サブサンプル受信率 (Sub sample receive ratio) | このイベント数に達すると、1 つを除いてすべてのイベントが破棄されます。この設定は、受信するイベントの数を減らすために使用されます。 | -1 |
| 最大長 (バイト) (Max length in bytes) | イベントの最大長 (バイト)。 | 32766 |
| 文字エンコード | このデータ入力の文字エンコーディング。 | UTF-8 |
| キューが満杯の場合は削除 | MID サーバーに負荷がかかっている場合にログを破棄するオプション。 | False |