站内有做大数据方向的朋友吗

本人目前是做大数据开发工作,平台开发也做,业务的flink代码也写,数仓的内容也做过,但是对大数据目前的发展方向还是比较迷茫,请问站内伙伴们有大数据方向的朋友吗,大数据的这个未来的职业规划应该往哪个方向啊,比较疑惑

3 Likes

我是在搞大数据运维,然而感觉就是sqlboy :joy:,菜的要死,也不知道要咋发展,只知道先看黑马课程,你起码已经接触了很多项目已经挺不错的了 :tieba_009:

1 Like

大数据 x
CURD √

8 Likes

我之前做数据中台和源码二开,但是感觉数据中台这个无法直接转化企业效益,而且阿里也在搞去中台化,这个就很迷茫。数仓也做过,flink啊什么的业务代码也写过。很喜欢改源码,做大数据组件二开的工作,但是目前这种的公司还比较少。sql又不想写 ,甚至不会写sql:joy:主打一个迷茫,发现这种方向都不喜欢,源码开发的工作还比较少
慢慢来吧,大数据运维也可以,是调优,调参吗

1 Like

巧了,我今年也做大数据运维了。天天卸数,装数的

1 Like

我大学学的大数据,但是我现在变成后端了。同样对大数据感到迷茫。

可能以后hadoop之类的在非巨型公司会慢慢被 Doris ClickHouse TiDB之类的取代吧

1 Like

数据中台是把其他系统的数据获取过来,经过计算或处理保存在另一个数据库,然后数据就从这个数据库获取吗,比如说报表之类的

1 Like

现在基本上类似MinIO,S3这些都可以替代hadoop了,doris,ck这些都可以,感觉东西实在太多了

1 Like

数据中台分很多方面,包括数据治理平台,存储备份平台,数据处理平台等。您说的这个也是数据中台中的一种功能啦,做数据同步然后etl,入库。数据中台的板块还是蛮多的

1 Like

我还挺好奇大数据是做啥的,学习要求高吗

大数据,我想到比较灵活的就是,针对不同用户,帮他们屎里掏金?前端、业务逻辑向,后端我不管 :crazy_face:

迷茫啊,感觉数开和后端一样

所以还是 业务 重要呀。
只写程序是不行的。

没,就是打杂, 搞点数据采集维护啥的,反正就是背锅,啥玩意都莫名其妙要我看,但又不告诉这玩意做啥用的。。无语的很

类似数仓,数开这种都是大数据,处理大数据量吧,有的冷数据进行冷备份啊,有的数据放热分区啊,进行数仓建模,让业务人员更快速使用数据,或者开发数据平台,大数组件,做实时数据分析,离线数据分析,数据治理,数据质量等等,这些都属于大数

哈哈哈哈,是的,有的那数据乱的简直了

明白了,那在请教您一个问题,使用比较多的是哪个方面

是啊,没业务,没法直接转换价值,普通搞技术的,还是会慢慢淘汰的,哎

数据的搬运工,数据挖掘,数据分析(挖掘数据的潜在能力),AI,机器学习,深度学习(数据统计,数据量化,数据间的关系)