专利名称:基于Kafka的原始流量存储装置专利类型:发明专利
发明人:陈月冬,张言,吴飞
申请号:CN201811041766.9
申请日:20180907
公开号:CN109379401A
公开日:
20190222
专利内容由知识产权出版社提供
摘要:本发明公开了一种基于Kafka的原始流量存储装置,包括:帧接收模块:接收外部系统的流量包;帧解析模块:解析流量包并获取五元组信息,将五元组信息作为kafka message的key值,发往kafka集;原始流量落地模块:采用spark streaming模块将kafka集收到的数据批量存储到大数据存储组件。本发明在大于10gbps的网络流量下吞吐能力强,支持离线处理,支持模糊查询,查询速度快。用户能够实时地将流量包存储到大数据存储组件中,在此基础上实现实时的上层业务。
申请人:南京中新赛克科技有限责任公司
地址:210000 江苏省南京市雨花台区郁金香路17号
国籍:CN
代理机构:南京苏高专利商标事务所(普通合伙)
代理人:饶欣
kafka为什么那么快更多信息请下载全文后查看
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论