百度360必应搜狗淘宝本站头条
linux文件压缩linux用户组查看linux磁盘mysql安装linuxlinux多线程
当前位置：网站首页 > 优雅编程 > 正文

大数据开发工程师面试主要面试内容

sinye56 2024-10-08 17:02 4 浏览 0 评论

大数据近年来，发展如火如荼，很多人都选择学习大数据专业或者转行大数据，大数据里又包含很多就业岗位，那么，我们在面试大数据开发工程师时，需要面试哪些内容呢。一起来看看！

首先，不同岗位、不同公司、不同面试官问的内容是不一样的。

大数据开发包括Hadoop(ETL，Mapreduce)，Spark(SparkSql和SparkStreaming)，Python等，这是偏向技术。另外大数据开发看是否偏向数仓开发和数据分析，因为这样问的问题又会不一样。不同的面试官和公司用到的技术栈也不一样，问的问题也会有很大差别的。我们就根据常见问题的一起来看看。

一、自我介绍

一般上来就是自我介绍，谈下工作经历和项目经验，面试官会根据你的项目经验对你进行技术面试。在自我介绍时，一定要抓住核心说，不要太啰嗦，尽量放大自己的价值，让面试官感受到你对工作的热情，以及以后对公司贡献的能力。

二、知识技能方面

（一）、数仓开发

1，Java是必问的，不过问的不深，把Javase部分吃透，足以应付Java部分的面试。2，Hadoop生态，Yarn、Zookeeper、HDFS这些底层原理要懂，面试经常被问。3，Mapreduce的shuffle过程这个也是面试被常问的。4，Hbase和HIve，搞大数据这些不懂真的说不过去。5，Mysql、Oracle和Postgres数据库操作要回，Sql要会写。6，linux操作系统，这个简单得命令必须要懂，会写shell脚本更好了。7，Kettle或Sqoop这种数据处理工具至少要会一个。8，数据仓库建模、数据模型的问题。

（二）、技术方面

1，SparkSql和SparkStreaming，底层原理、内核、提交任务的过程等等，尽量深入内幕，这个经常会跟MapReduce作比较的。当然也要了解Storm和Flink，Flink这个建议要学会，以后用处会越来越广。2，Redis、Kafka、ElasticSearch这些都得懂原理，深入了解，会使用，会操作，会调优。3，impala和kylin这些尽量也要了解会用4，Python这个要是有能力，有精力，建议也要往深处学习，我目前正在自学中。5，集群的问题，包括一些简单的运维知识。6，大数据数据倾斜的问题，包括Spark JVM内存调优问题等等。

最后可能还会问你最近几年的职业规划等，面试的话大体是围绕以上内容进行的，以上内容仅供参考，一些技术要求等可以详情参考公司招人的要求，并展开做一些面试的准备。

相关推荐

Linux基础知识之修改root用户密码

现象：Linux修改密码出现：Authenticationtokenmanipulationerror。故障解决办法：进入单用户，执行pwconv，再执行passwdroot。...

Linux如何修改远程访问端口

对于Linux服务器而言，其默认的远程访问端口为22。但是，出于安全方面的考虑，一般都会修改该端口。下面我来简答介绍一下如何修改Linux服务器默认的远程访问端口。对于默认端口而言，其相关的配置位于/...

如何批量更改文件的权限

如果你发觉一个目录结构下的大量文件权限(读、写、可执行)很乱时,可以执行以下两个命令批量修正：批量修改文件夹的权限chmod755-Rdir_name批量修改文件的权限finddir_nam...

CentOS「linux」学习笔记10:修改文件和目录权限

?linux基础操作：主要介绍了修改文件和目录的权限及chown和chgrp高级用法6.chmod修改权限1：字母方式[修改文件或目录的权限]u代表所属者，g代表所属组，o代表其他组的用户，a代表所有...

Linux下更改串口的权限

问题描述我在Ubuntu中使用ArduinoIDE，并且遇到串口问题。它过去一直有效，但由于可能不必要的原因，我觉得有必要将一些文件的所有权从root所有权更改为我的用户所有权。...

Linux chown命令:修改文件和目录的所有者和所属组

chown命令，可以认为是"changeowner"的缩写，主要用于修改文件（或目录）的所有者，除此之外，这个命令也可以修改文件（或目录）的所属组。当只需要修改所有者时，可使用...

chmod修改文件夹及子目录权限的方法

chmod修改文件夹及子目录权限的方法打开终端进入你需要修改的目录然后执行下面这条命令chmod777*-R全部子目录及文件权限改为777查看linux文件的权限：ls-l文件名称查看li...

Android 修改隐藏设置项权限

在Android系统中，修改某些隐藏设置项或权限通常涉及到系统级别的操作，尤其是针对非标准的、未在常规用户界面显示的高级选项。这些隐藏设置往往与隐私保护、安全相关的特殊功能有关，或者涉及开发者选项、权...

完蛋了!我不小心把Linux所有的文件权限修改了!在线等修复!

最近一个客户在群里说他一不小心把某台业务服务器的根目录权限给改了，本来想修改当前目录，结果执行成了根目录。...

linux改变安全性设置-改变所属关系

CentOS7.3学习笔记总结（五十八）-改变安全性设置-改变所属关系在以前的文章里，我介绍过linux文件权限，感兴趣的朋友可以关注我，阅读一下这篇文章。这里我们不在做过的介绍，注重介绍改变文件或者...

Python基础到实战一飞冲天(一)--linux基础(七)修改权限chmod

#07_Python基础到实战一飞冲天（一）--linux基础（七）--修改权限chmod-root-groupadd-groupdel-chgrp-username-passwd...

linux更改用户权限为root权限方法大全

背景在使用linux系统时，经常会遇到需要修改用户权限为root权限。通过修改用户所属群组groupid为root，此操作只能使普通用户实现享有部分root权限，普通用户仍不能像root用户一样享有超...

怎么用ip命令在linux中添加路由表项?

在Linux中添加路由表项，可以使用ip命令的route子命令。添加路由表项的基本语法如下：sudoiprouteadd<network>via<gateway>这...

Linux配置网络

1、网卡名配置相关文件回到顶部网卡名命名规则文件：/etc/udev/rules.d/70-persistent-net.rules#PCIdevice0x8086:0x100f(e1000)...

Linux系列---网络配置文件

1.网卡配置文件在/etc/sysconfig/network-scripts/下:[root@oldboynetwork-scripts]#ls/etc/sysconfig/network-s...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表