失眠网,内容丰富有趣,生活中的好帮手!
失眠网 > BDTC | 大数据云服务论坛:揭示大数据与云计算之间的秘密

BDTC | 大数据云服务论坛:揭示大数据与云计算之间的秘密

时间:2022-12-15 12:34:51

相关推荐

BDTC  | 大数据云服务论坛:揭示大数据与云计算之间的秘密

【CSDN现场报道】12月7日-9日,由全球最大中文IT社区CSDN承办的“中国大数据技术大会”(BigData Technology Conference ,简称BDTC )在北京新云南皇冠假日酒店隆重举行。本次大会以“大数据与智能为主题,聚焦最纯粹的技术干货分享,和最接地气的深度行业案例实践,汇聚国内外顶尖技术专家,共论最新的大数据技术实践与发展趋势。

在大会次日举办的的大数据云服务论坛上,论坛主席国防科技大学计算机学院李东升教授携众多大数据云计算方面的专家大咖,给到场的观众带来了一场技术的盛宴。

内存计算:挑战,现状,经验

华中科技大学长江学者特聘教授金海首先登场,发表了题为《内存计算:挑战,现状,经验》的演讲,金海表示,大数据处理的挑战实质是由信息化设施的处理能力与数据处理的问题规模之间的矛盾引起的。大数据规模不断增长,使现有计算系统因内存容量有限、I/O压力大而面临着数据处理时效性低的挑战。新型非易失性存储器件的出现和成本的不断走低,客观上为高时效内存计算模式提供了机遇。金海描述了内存计算的由来,深入分析了内存计算在工业界和学术界的发展现状和未来趋势,并分析了基于DRAM的内存计算模式面临的挑战,即易失性、存储密度低,耗能高。也提出了可以代替DRAM存储的新型非易失存储技术的发展。金海介绍了基于DRAM的大数据内存计算研究进展、基于混合介质的大数据内存计算系统的核心系统软件技术以及基于数据生命周期的内存计算大数据处理系统的研究进展。最后,金海总结了内存计算的发展阶段,表示内存计算将从探索阶段向实用阶段发展,未来的内存计算发展的趋势将会是“存算一体”,忆阻器将是未来发展的一个关键技术。

阿里云大规模结构化云存储HBase架构特性解析

阿里云高级技术专家、架构师曹龙第二个演讲,在题为《阿里云大规模结构化云存储HBase架构特性解析》的演讲中,曹龙介绍了非常流行的,在物联网、互联网众多的场景下有广泛的应用的Hbase分布式数据库,并重点阐述了阿里云大数据的三大组件,云上HBase的基础架构、云HBase架构设计理念,成本规划、账号体系、安全机制、冷热分离机制、HBase的SQL、内存优化等方面的相关内容。曹龙还介绍了阿里云HBase的业务实战场景和真实案例并表示,基于共享存储将是今后HBase发展方向,从计算存储本地化到完全计算存储分离将是未来研究的方向。

大数据时代存储系统若干变化的思考

清华大学计算机系教授 博士生导师舒继武第三个演讲,他讲述了《大数据时代存储系统若干变化的思考》,舒继武表示,大数据时代,数据存储的规模和处理需求越来越高,现有的存储系统亟需新的变革以提供更高的性能和更好的可扩展性。舒继武表示,首先,新型的开放通道SSD,为提高大数据的存储和处理效率带来了机遇,如何设计对开放通道SSD更加友好的文件系统和键值存储系统,以应对大数据存储与处理的性能提高。其次,面向大数据的内存存储与计算已成为越来越广泛的应用需求,如何设计基于大数据处理的内存文件系统、内存数据库以及建立新型的内存编程模型,以应对内存存储与计算效率的提高。最后,随着非易失性存储在分布式存储系统中的应用和部署,如何结合非易失性存储的新特性来提供可扩展性更好的分布式系统服务和更加轻量的IO管理,以应对大数据场景中存储系统效率的提高。

云端数据仓库HashData

HashData 联合创始人兼CEO简丽荣以《云端数据仓库HashData》为主题进行了演讲,简丽荣在演讲中讨论了云原生数据仓库HashData的设计与实现。简丽荣表示,HashData是一个完全托管、高性能的PB级数据仓库服务。在分析接口上,HashData 100%兼容开源数据库PostgreSQL和Greenplum Database,同时在系统架构上实现云原生,简丽荣表示,HashData就有以下优势:(1)计算存储分离;(2)对象存储作为数据持久层;(3)独立元数据服务:支持在线升级和扩容;(4)一致性Hash的数据分布策略:实现秒级扩容。另外,简丽荣分享了在打造HashData过程中碰到的技术问题以及汲取的经验教训。

保险行业云计算平台的技术挑战与实践

云途腾公司T2Cloud 首席架构师蓝希最后一个登场,他带来的演讲是《保险行业云计算平台的技术挑战与实践》,蓝希表示,云计算平台是保险科技的基础支撑,是保险云化的引擎。随着保险行业上云速度的加快,在保险云之上的业务创新也随之提速。蓝希分享了保险行业云计算平台构建的技术挑战与实践:基于开放云基础设施技术,以OpenStack、容器等技术作为保险云平台的技术支撑,对MariaDB、MQ的优化,对保险行业的传统架构进行兼容与创新,并结合主流开源中间件及大数据基础设施技术,为保险的业务云化提供大规模高并发、高扩展、开发运维一体化以及安全稳定的保险云服务平台。

更多精彩内容,请关注直播专题中国大数据技术大会(BDTC),新浪微博@CSDN,观看大会图文直播,请扫描二维码关注CSDN资讯微信公众号。

如果觉得《BDTC | 大数据云服务论坛:揭示大数据与云计算之间的秘密》对你有帮助,请点赞、收藏,并留下你的观点哦!

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。