本文共 3714 字，大约阅读时间需要 12 分钟。

Flume���������������������������������

Flume���������������������������������������������������������������������������������������������������������������������������Flume������������������������������������

1. Flume������������

������������������������������������������Flume������source������controller������������sink������������������������������������������������������Avro������������������������������HTTP���������������NetCat���������HTTP������������������������������GET���������������������������������POST������������������������������Flume���������������������������������������������������channel���������������sink���������������������������������������������������������������������������������������HDFS���

2. Flume���������������������������

Flume������������source���channel���sink���������������������������������������������������������������������������������������������

• Source������������������������������������������������������������������������������������������HTTP���������������������������������

• Channel���������������������������������������������������������������������������������������Flume������������������������������

  • ���������������MemoryChannel���������������������������������������������������������������������������������
  • ���������������FileChannel������������������������������������������������������������������������������
  • Spillable Memory Channel������������������������������������������������������������������������������������������������������������

• Sink������������������������������������������������������������������������������Flume������_file roll_���Logger���HDFS���Avro������������������������������������������������������������

• Interceptor���������������������������������������������������������������������������������������

  • ������������������������������������������������������
  • ������������������������������������������������������
  • ������������������������������������������������������
  • ������������������������������������������������������������������

• Selector������������������������������������������������������������������������������������������������

  • ������������������CopySelector���������������������������������������
  • ������������������MultipleSelector���������������������������������������������������������������������

• Processor���������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

3. Flume������������������

������������������������������������������������1������������������������������������������������������������������������������������������������������������HDFS���������������������������������������������������������������������������Flume���������������������������������������������

4. Flume���������������

Flume���������������������������������������������������������������

• ������������������������������source���������������channel������������������������������������������
• ���������������������������������������������������������������������������������������������������������

5. Flume���������������

Flume������������������������������������������������������������������channel������������������������������������TCP/IP���������������������������������������������������������������������������������������������channel���������������������������������������������������������������������������������

������������������������������Flume������������������������������������������������������������������������������������������������������������������������������������������������Flume���������������������������������������������������������������������������