'데이터 엔지니어' 분야로 도전하고 싶습니다. 조언좀 부탁드립니다

Question

안녕하세요 저는 수도권 4년제 비전공자이며, 현재 국비교육으로 웹개발&#43;빅데이터를 배우고 있습니다.학교에서 부전공으로 ICT전공을 이수해서 아주 모르는 비전공자는 아닙니다만, 정말 기초만 알고 있습니다. 현재 학원에서 웹개발(java, jsp, spring, db)를 마쳤고, python, R을 이용하여 데이터분석을 배우고 있습니다.하둡과 리눅스도 배우긴 하는데,, 환경설정과 아주 기초적인부분만 배운다고 하네요. 사실 데이터분석으로의 취업이 가장 이상적이긴 하지만, 비전공 국비출신에 대학원 진학 생각이 없는 저에게는 조금 힘든 분야가 아닐까 생각됩니다.. 그리고 통계적인 부분도 많이 버겁기도 하고요..그래서 이후 Okky에서 양파님이 쓰신 데이터엔지니어에 대한 칼럼을 읽고, 데이터엔지니어분야로 먼저 도전해보는 것은 어떨까 생각해보았습니다. 그래서 이것저것 알아보고 데이터엔지니어에 대한 채용공고도 많이 알아보고 있습니다. 개발을 배우긴 했지만 웹 개발 위주이고, 사실 서버쪽은 접한 적이 거의 없습니다. 데이터엔지니어가 하는 일은 대략 채용공고로 살펴봤습니다만, 데이터엔지니어로 취업하기 위해서는 구체적으로 어떤 공부가 필요한지 궁금합니다. 또한 어느정도의 능력을 요구하는지도 알고싶습니다. 혹시 데이터엔지니어 직무에 대해 아시는 분은 많은 도움 부탁드립니다..!

니플 · Accepted Answer

적어도 한국에서는대학원을 가서 석사 이상이 되야데이터 분석가로 취업이 됩니다. 외국은 잘모르겠습니다. 능력도 학사만큼 대학원에서 졸업시 낸 논문으로평가하여 면접본다고 들었습니다. 논문이 한개 두개가 아닙니다.빅데이터 관련 논문 여러개를 해야면접에 유리합니다.

demian · Answer

그래서 엔지니어 분야로 도전하려고 합니다! 혹시 데이터엔지니어 분야는 어떤지 아시나요??

니플 · Answer

엔지니어 분야라뇨?데이터 사이언티스트로 취업하려는 것 맞으시죠? 그럼 같은 분야입니다. 이 직업이 신생 직업이라하는 일도 회사마다 천차만별이라회사마다 어떻게 일을 하는 지 알아야 합니다. 간단히 아시는 것이 좋죠

한경닷컴IT교육센터 · Answer

막막한 상태에서 아주 좋은 방법은 www.saramin.co.kr / www.jobkorea.co.kr 에서 &#34;데이터 엔지니어&#34; 로 검색하신다음에 모집부분을 스크랩하셔서 비교하시다보면 뭘 많이 필요로 하는지 보이실꺼고.. 그 다음은 본인이 하시다 보면 보일껍니다.

shaffron · Answer

작은 회사에서는 데이터 분석가가 raw 데이터 수집부터 가공, 분석까지 전부 하는 경우가 많구요.큰 회사에서는 수집, 가공 전문인력 / 분석 인력으로 나누어져 있습니다.이런 경우 데이터 엔지니어와 데이터 분석가로 나누어도 되겠지요.큰회사의 데이터 엔지니어를 말씀하시는거면 하둡을 필수적으로 아셔야합니다.하둡이 자바 기반이기에 하둡부터 배우자고 달려들지말고 자바의 기초를 다진 후에 하둡 클러스터 설정과생태계를 꾸리는 방법을 배우시는걸 추천합니다.또한 운영체제(특히 리눅스) 활용능력도 어느정도 있어야 하고 네트워크에 대한 지식도 있어야겠죠.하둡공부하실 때 가~~~능하다면 클라우드 보다는 물리서버 노드로 구성하시는걸 추천드립니다. 단순 공부면 클라우드도 충분합니다! 성능까지 생각한다면 물리서버를 고려하시라는 말씀이구요 ㅋㅋ

demian · Answer

답변 감사합니다! 그렇다면 리눅스를 먼저 공부한뒤 하둡을 배워야 하겠군요.. 공부할게 많네요ㅜ 리눅스는 우분투를 배워도 괜찮나요?

니플 · Answer

하둡도 하둡만 아는 것이 아니라하둡 에코시스템을 알아야합니다 스파크 R 스칼라는하둡에서 쓰는 언어죠 데이터 사이언티스트도직종이 몆가지로 나뉨니다그거 먼저 알아보세요ㅎㅎ

demian · Answer

국비 끝나는대로 취업하려고 했는데 배워야할게 너무나 많네요ㅜㅜ 감사합니다!일단 리눅스부터 공부해보려고 책 샀습니다!

니플 · Answer

대학원을 추천드립니다

demian · Answer

전혀 생각이없는건 아니지만, 우선 이 길이 맞는 길인지 먼저 부딪혀보고 싶어서요, 현업에서의 일도 경험해보고 싶고요~ 그리고 나서 내 일이다 싶을때 도전해볼까 합니다~

가을비 · Answer

전 백엔드 개발 3년하다가 데이터엔지니어로 전향한지 1년 되었습니다.결론적으로 데이터 사이언티스트는 석사가 필수이구요.데이터 엔지니어는 학사도 충분히 가능하고 석사 메리트가 있을지는 모르겠네요.물론 저희팀에 석사분들도 많지만 데이터 엔지니어 관련 석사 이신분은 없는 것 같습니다.제 생각에 데이터 엔지니어는 다양한 오픈소스를 경험하고 활용하는 실무 경험이 중요한데 학교에서 하는 걸로는 어렵지 않을까 생각됩니다.기본적으로 사용하는 건 하둡,하이브,스파크,엘라스틱서치,hbase,카프카,로그스태시,플럼,우지,스쿱등이네요;;

더미 · Answer

dba 하고 싶다는 거 아닌가요?신입은 잘 안 뽑을텐데..

전재형 · Answer

관련된 협회와 같은 사무실을 이용한적 있었는데.관련 업체들이 구인을 공고로 내지 않고. 똘똘한 사람을 알음알음 소개받아서구인한다고 하네요

demian · Answer

#가을비그렇다면 신입이 데이터엔지니어로 입사하기위해서는 말씀하신 기술들을 얼마나 알고 있어야 하나요? 신입에게 어느정도의 수준을 기대하는지 알 수 있을까요? 말씀하신 기술들이 어떤 것이고 어떤 기능을 하는지 정도만 이해하고 있어도 괜찮을까요?

kadensungbincho · Answer

안녕하세요, 시간이 많이 흘렀으나 제가 '데이터 엔지니어' 관련 블로그를 시작하여 연관이 깊어 남겨둡니다.식품연구원에서 '데이터 엔지니어'로의 직무전환 이야기를 담았습니다.- https://kadensungbincho.tistory.com/8

코코락크 · Answer

데이터 엔지니어 : 하둡, 스파크, 카프카, SQL DML 작성능력, ETL 프로젝트 진행 경험 데이터 사이언티스트 : ML, R, 모델 설계, BI

'데이터 엔지니어' 분야로 도전하고 싶습니다. 조언좀 부탁드립니다

16개의 답변

Q&A 목록