分享自己的观点...
itt0918
[AbutionGraph] 知识图谱+Flink:大规模实时动态图谱平台的实现
AbutionGraph万亿数量毫秒级出入度基数统计算法-1.5K内存存储十亿统计数据
图数据库AbutionGraph的毫秒级大数据去重方案
itt0918
2022-04-18 11:34:03
兼容性问题说明我们在做多种大数据平台混合搭建的时候,首先件事是考虑兼容性,比如软件在迭代过程中增加与过时一些功能是家常便饭的事,绝大多数情况下并不会考虑别家的软件底层采用什么版本的框架,比如Jetty、jackson、configuration、guava等等,这些框架是开发大数据系统的必备工具...
itt0918
2022-04-18 11:33:04
AbutionGraph是北京图特摩斯科技研发的一款物联网级的大数据通用图数据库,使知识图谱技术不仅仅局限与关联关系存储的场景,我们可以把其应用到金融风控、车联网、智慧城市(传感器采集监控)等等要求高时效性,快速得出数据明细报表的场景,这是既往图数据库无法涉及的时序数据库领域,对于多技术参与的项目(...
itt0918
2022-04-18 11:31:39
AbutionGraph是众多国产数据库中新兴的一员,且是一款GraphHOLAP的实时知识图谱数据仓库,将在本文中介绍Abution如何结合Flink(无缝对接Flink-1.12.1)构建增强的流批一体实时数仓。Abution结合Flink和Spark的差异AbutionGraph初实现了...
itt0918
2022-04-18 11:30:45
技术概览AbutionGraph是北京图特摩斯科技自研的时序动态知识图数据仓库与分析系统。AbutionDB是底层数据的承载,存储包括:动静结合的图谱数据、时间序列数据、KV表格数据、地理空间数据、事件数据、文本数据。AbutionGRS是以图谱为核心构建的下一代数据认知中台,是数据的开发层...
itt0918
2022-04-18 11:30:03
一、背景介绍新冠肺炎是一种具有长达24天潜伏期的新型突发性传染疾病,这种特性给疫情防控带来了巨大的挑战,随着感染规模的不断扩增,简单的人为治理已不太奏效,使用“大数据”技术手段来辅助人为治理社会有助于快速准确的定位问题关键,帮助决策者及时作出下一步规划。个人感受:这一个月来每天都会在各大站点查看感...
itt0918
2022-04-18 11:29:19
图数据仓库AbutionGraph的万亿数据出入度去重基数实时统计算法,毫秒级响应,不到1K内存,可存储数亿个统计数据。什么是基数?基数是指集合中不同值的数量。例如,在{4,3,6,2,2,6,4,3,6,2,2,3}的集合中,基数为4,不同的基数值为4、3、6、2。再如,与A相关的联系{A->...
itt0918
2022-04-18 11:28:46
在篇幅之前,我们先结合技术的变迁(传统数据库->时序数据库/图谱数据库->时序知识图谱数据库)来了解一下领导的需求进阶:阶段一、数据库时效性不高在传统数据库领域,保持数据时效性需要每天需要对大量历史数据进行重复计算。实时性报表查询需要数据库同时满足单次百万千万级的数据查询,毫秒级查询延迟...
itt0918
2022-04-18 11:28:11
图数据库、知识图谱与图计算1)知识图谱知识图谱(KG)更多只是一种数据管理的方法,或者概念性的词汇,知识图谱可以组织多个来源的数据,捕获给定领域或任务(例如人,地点或事件)中感兴趣的实体信息,并在它们之间建立联系。如今,KG已广泛用于从搜索引擎和聊天机器人到产品推荐器和自治系统的任何事物。在数据科学...
点击加载更多
分享好友
分享这个小栈给你的朋友们,一起进步吧。
订阅须知
• 所有用户可根据关注领域订阅专区或所有专区
• 付费订阅:虚拟交易,一经交易不退款;若特殊情况,可3日内客服咨询
• 专区发布评论属默认订阅所评论专区(除付费小栈外)
技术专家
查看更多- itt0918专家
- 热门小栈
- 新小栈
- 更多