下秒数据受邀参加CSDN"现代数据栈峰会",活动圆满结束
近几年,随着云计算技术的成熟,一个围绕在云数据仓库周围的数据工具生态正在蓬勃的发展,它们被叫做现代数据技术栈。相对于传统的数据平台,使用它们可以让数据具备更好的可操作性,从而降低数据从产生到被企业中数据工作者可以使用的时间,实现信息同步,辅助企业管理者更科学决策。
围绕现代数据栈有一堆的新技术,包括湖仓一体、ELT、数据管道、Dataops、反向ETL、Metric
Store、Data engineering等等。伴随国内公有云市场的高速发展以及各SaaS系统之间的开放对接,信息数据的爆增等企业现状,数据有效整合,数据集成,使数据价值得以充分展现,促进企业数字化转型毋庸置疑成为行业共识。
7月12日本周二,由CSDN主办的云原生系列在线峰会 ——
”现代数据栈峰会“成功举办,行业专家与线上行业同仁们一起探讨现代数据栈最新技术和最佳实践,帮助大家多角度、全方位了解现代技术栈。下秒科技联合创始人李元佳有幸受邀请担任出品人,下秒数据CEO蔡致暖受邀参会,与快用云科联合创始人阎志涛、白鲸开源联合创始人代立冬、Kyligence合伙人兼副总裁李栋就“现代数据栈”主题进行深度演讲。
”受存储成本及计算能力的限制,传统数据架构在处理数据时主要是分段进行“,下秒数据联合创始人李元佳在开场分享中表示,”而云所具有的存储成本及高计算性能的优势为数据架构的发展提供新的可能性,现代数据栈(Modern Data Stack,MDS)的生态正在形成“,这是现代数字化阶段使然的。
1 云原生的数据管道
下秒数据CEO蔡致暖针对数据管道1.0至3.0的迭代过程及技术特点发表了详细的演讲。
蔡致暖表示,”数据管道解决的是如何自动化地把不同来源的数据传递给组织中的人、系统、应用程序,并将数据转化为业务价值。“
”最终,组织像用水和用电一样用数据。” 蔡致暖认为。
2 Data Modeling in Modern Data Stack
快用云科联合创始人阎志涛表示企业使用数据进行驱动也是不可逆转的趋势,并针对数据建模及其在现代数据栈中的应用做了深入分享,包括Dbt、Dataform、Datameer、QuickTable。
3 现代数据栈之DataOps
DataOps是一种协作式数据管理的实践,致力于改善组织中数据管理者与使用者之间数据流的沟通,集成和自动化。关于这方面白鲸开源联合创始人代立冬有深刻的理解,“
云原生分布式大数据工作流调度系统DolphinScheduler所具备的高可靠性、简单易用、高拓展性、云原生能力等优势,正是其受欢迎的原因。”并从DataOps的任务编排、数据集成能力以及其与开源的关系三个方面进行深入剖析、分享实际案例。
4 从数据湖到指标中台,提升数据分析ROI
Kyligence合伙人兼副总裁李栋为我们分享了中台发展的趋势及数据分析ROI的三大困境:
- 指标口径不一——数据量很大,但缺少信任;
- “浑浊”的数据湖——宽表爆炸,数据存储和ETL任务冗余;
- IT成本&时效性——IT成本随数据量和用户量增长而迅速增长。
最后我们可以了解到,随着云技术的加速发展,市场在面临挑战与机遇的同时,各位演讲嘉宾仍然对未来充满期待。
关于「下秒数据」
「下秒数据」正围绕API打造的低代码能力扩展更丰富更实用的业务应用场景,通过智能数据管道做数据整合、分析建模后再反哺数据结果到对应的SaaS或其他应用中来验证实现更多应用场景。
下秒数据通过提供预集成的模块,预置连接器以及预置模型,用户只需要一个api就能轻松打通异构,自动生成业务数据分析结果。无需费力处理数据源,思考数据指标维度,通过预置的业务指标模型就能一键生成。比如,Nexadata会和用友、腾讯广告、旺店通等应用的数据集成好,通过API进行所需数据的对接。在客户所需数据得以集成到数据仓库后,Nexadata会帮助进行数据建模。在具体落地上,Nexadata会针对每个平台打造专门的连接器用以对接数据,并在对接好数据之后,再通过各个行业的特点,进行场景化建模(如客户在腾讯、头条、快手等不同平台投放广告后,系统会屏蔽不同平台的差异,自动整理诸如PV、UV等指标形成统一的ROI模型),辅助客户业务。
「下秒数据」创始团队都是数据领域的老兵,都有在华为从事大数据解决方案或数据库研发的经验。公司CEO蔡致暖是中山大学计算机硕士,具备13年软件、大数据和机器学习领域工作经验,曾任广州数说故事数据平台业务部负责人和相关合资公司CTO。联合创始人李元佳,是早稻田大学通信系统硕士,拥有17年数据库产品研发工作经验,是云徙科技联合创始人,曾任华为高斯DB产品负责人。
「下秒数据」目前已经在零售、电力、通信等行业实现十余个标杆客户落地,具体包括广州酒家、陶陶居、中国移动、湘潭电网等。
本文作者可以追加内容哦 !