Bright 技术 人生

其他

数据开发支持工具

容器<u>技术</u>是解决此问题的一个很好的方式。容器可以提供必要的环境隔离,使得团队成员可以自由的在自己的环境中进行操作,无需担心对他人造成影响。如何实现呢?其实我们只需要一个运行了sshd的容器即可。通过暴露
2022年11月21日
其他

数据仓库建模自动化

这一层是其他数据应用构建时的最基础的数据来源,如果我们不能快速的完成,则将直接影响上层数据应用的开发。有了建模工具的支持,这一问题就不再是问题了。在我们的实践中,得益于DWD建模原则的建立和建模工具的
2022年11月7日
其他

数据应用开发语言和环境

API的灵活性sql是独立于计算引擎存在的,如果以后希望替换计算引擎,可以更容易实现(比如,Presto是查询性能更好的一个OLAP引擎,将来可以考虑替换底层计算引擎为为Presto)2.1
2022年10月31日
其他

数据平台数据管理实践

,全称是full,即全量表,对于增量表则增加后缀_h,全称是history,即保存历史的增量表。对于全量表,需要有一个分区字段,该字段名为dt,值为整型存储的日期(如
2022年10月16日
其他

数据平台数据接入实践

机如何选择?频率如何确定?数据接入不能对业务系统的稳定性产生影响,如何实现?数据入库后,如何在数据仓库中进行存储和管理?如何保证多张入库表的数据一致性?如何和业务系统开发团队分工协作?下面将结合我们在
2022年10月9日
其他

非关系型数据接入实践

。本文将就非关系型数据库接入数据平台分享一些我们实践中的一些故事和经验。1
2022年9月18日
其他

Oracle数据迁移实用入门

分钟在一个大型企业中做数据工作,难免要跟各种不同种类的数据库打交道。Oracle,凭借其优异的性能,曾经是很多大型企业标配商业数据库,自然也是我们要重点应对的一种数据库。Oracle
2022年7月23日