삼성SDS 30

[삼성SDS Brightics] 개인분석미션 3-10. 최종화 수정 : 중소기업 채용 트렌드, Brightics로 예측하기 (feat. ARIMA💙)

안녕하세요~! Brightics 서포터즈 2기 정해웅입니다 💙 ​ 안돌아올 줄 알았는데,, 생각보다 빨리 돌아왔죠?ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅎ헤헷 ​ 제가 분석했던 최종화 모델링 과정에서 문제가 있었고 감사하게도 저희 멘토님께서 캐치하고 알려주셔서 이를 바로 잡기 위해 왔습니다. ​ 사실 저도 ARIMA라는 시계열 모형을 쓰면서 데이터셋 자체가 시계열로 보았을 때는 크기가 매우 작은 편에 속하여 모델링 과정에서 애를 먹었었는데요. ​ 또한, 기존 데이터셋은 2020년 12월까지의 데이터만을 포함하고 있었고 현재 시점에서의 자료를 추가하기 위해 제가 2021년 9월과 10월 데이터를 추가했었죠? 이러다 보니 시계열 모형에서는 2018년 9월 2018년 10월 ... 2020년 12월 2021년 9월 2021년 ..

삼성SDS Brightics 2021.11.07

[삼성SDS Brightics] 개인분석미션 3-9. 최종화 : 중소기업 채용 트렌드, Brightics로 예측하기 (Brightics Studio만 있으면 끄떡없지~💙)

​ 안녕하세요~~! Brightics 서포터즈 2기 정해웅입니다💙 ​ 지옥의 중간고사 기간이 끝이 나고,, 벌써 Brightics 서포터즈의 활동을 마무리할 시간이 왔네요,,,,, ㅠㅠㅠㅠㅠㅠ ​ 블로그 이웃들이라면 제가 정말 오랜 기간동안 열심히 포스팅한 것을 알텐데,, 이제 끝난다고 생각하니 이웃님들도 아쉽지 않나요? (그렇다고 대답해) ​ 아직은 마지막 게시물이 아니고!! 시험기간동안 못올린 것 폭풍으로 올릴 예정이니 기대하세요 후훗 지난 포스팅에서는 Brightics Studio의 가장 많이 쓰이는 기능 중 하나인 [Query Executor]을 활용하여 데이터를 여러 방면으로 쪼개는 작업을 진행했습니다. ​ 오늘은 프로젝트의 마무리인 모델링을 정말 하려고 합니다,,, 모델링까지 오는데 정말 오래..

삼성SDS Brightics 2021.10.26

[삼성SDS Brightics] 개인분석미션 3-8. 모델링 : 중소기업에서는 어느 산업군의 지원자를 가장 많이 뽑을까요❓❔

안녕하세요~! Brightics 서포터즈 2기 정해웅입니다. ​ 여름이 지나고 겨울(?)이 찾아왔네요,, 어쩌면 대한민국 이제 사계절이 아닌 삼계절일지도..?😱 지난 포스팅까지 해서 데이터 전처리에 대해 어느 정도 마쳤습니다. 그래도 전처리는 끝날때까지 끝난게 아니죠,,, 크크 ㅠㅠ ​ 이번 포스팅부터 본격적으로 모델링을 통한 [중소기업의 채용 트렌드 예측] 을 해보려고 합니다. 1. 데이터 전처리 .. 끝난줄 알았죠..? 이번엔 진짜 모델링 전 마지막 전처리를 해보려고 합니다. 하핫... ​ 지난 포스팅에서 [Bind Row Column] 함수를 이용하여 2021년 10월 test data set을 만드는 것 까지 수행했습니다. 이제 이 테이블에서 제가 모델링에 사용하고자 하는 column을 고르고, ..

삼성SDS Brightics 2021.10.18

[삼성SDS Brightics] 개인분석미션 3-6. 데이터 전처리 : 범주형 변수 처리(One Hot Encoder VS Label Encoder 숨막히는 혈투)

안녕하세요~~~! Brightics 서포터즈 2기 정해웅입니다💙 ​ 저번 시간에 데이터 전처리 중 가장 기본이라고 할 수 있는 결측치 처리에 대해 진행했습니다. 결측치 처리를 통해 빈 데이터를 잘 메꿨다면 그 다음 스텝은 뭐가 될까요? ​ 이상치 탐지, 범주형 변수 처리, 연속형 변수 처리, 분포에 맞는 column 생성 등 다양한 전처리 기법이 생각나는데요. 저는 그 중에서도 결측치 처리에 이어 데이터 분석의 필수 과정이라고 할 수 있는 "범주형 변수 처리" 에 대한 포스팅을 이어가려고 합니다. ​ 분석 프로젝트에 있어 기본이 될 수 있는 과정들을 천천히 따라가는 것도 추후에 제 블로그를 보며 분석을 진행할 사람들에게 의의가 있을 것 같아서 진행해보려고 합니다. 1. 범주형 변수 파악 먼저, 범주형 변..

삼성SDS Brightics 2021.10.05

[삼성SDS] 데이터 분석 자격증 ProDS Associate(입문) 부문 합격기 💙🎉

​ 안녕하세요 ~! Brightics 서포터즈 2기 정해웅입니다💙 ​ 지난 9월 25일에 삼성SDS와 멀티캠퍼스가 공동으로 주관하는 Data Scientist(DS) 데이터 분석 자격증인 ProDS ProDS 시험을 보고 왔습니다. ​ 시험 준비하며 느낀 점들과 꿀팁!! 등을 알려드리려고 합격 소식을 듣자마자 부리나케 달려왔습니다 😀 ​ 결론부터 말하자면!! 저는 100점 만점에 92점을 맞아 70점 기준 합격선을 나름 거뜬히 넘었습니다.. ㅎㅎ ​ 코린이 + 통린이라서 시험 보기 전까지 걱정을 많이 했는데요,, 결과는 좋게 나와서 너무 기뻤습니다 ㅎㅎ 시험 준비부터 후기까지 한 번 천천히 살펴볼까요~~? ​ 그 전에 ProDS 자격증에 대한 자세한 설명이 궁금하시다면 아래 블로그에 자세한 설명이 나와있..

삼성SDS Brightics 2021.10.01

[삼성SDS Brightics] 개인분석미션 3-5. 데이터 전처리 : 결측치 처리

​ 안녕하세요~ Brightics 서포터즈 2기 정해웅입니다!!😀 ​ 저번 포스팅에서 원본 데이터를 활용하여 EDA를 진행했습니다. 기본 데이터만 활용해도 굉장히 많은 인사이트를 얻어낼 수 있었는데요. 제가 처음에 세웠던 가설인 "디지털 전환과 중소기업의 채용 트렌드 사이에는 상관성이 있다."를 뒷받침해주는 많은 결과들을 얻었습니다. ​ 이제 본격적으로 데이터를 전처리하는 과정에 들어가려고 합니다. 데이터 전처리는 결측치 처리부터 시작해서 이상치 처리, 분석에 필요한 추가적인 column 생성 등 다양한 과정을 통틀어서 일컫는 과정입니다. 그 중 가장 먼저, 그리고 필수적으로 행해져야하는 결측치 처리에 관해 정리해보고자 합니다. ​ 현재 연구단에서 결측치 처리 관련 논문을 작성 중이라서 다른 전처리 과정..

삼성SDS Brightics 2021.09.28

[삼성SDS Brightics] 개인분석미션 3-4. EDA (명절 지나가는 속도가 6G,,)

안녕하세요~~ Brightics 서포터즈 2기 정해웅입니다💙 ​ Brightics 사무국의 배려로 추석동안 푹~~ 쉬고 다시 돌아왔습니다,, 현생이 적응이 안되네요 😅 ​ 마치,, 출처:https://blog.daum.net/dkgus0660/17 워얼화아수우모옥금퇼.. 토요일이네용..!!! 퇼 같은 토욜일이 되지않길 ^.^ㅋㅋㅋㅋㅋㅋ blog.daum.net 이 짤이 생각나는 작고 소중한 명절이였습니다,, 잘가라,, 보내줄게 지난 포스팅에서 load한 데이터를 기반으로 EDA를 진행했었는데요. 사실 이번 개인 분석 프로젝트에서 저는 모델링이나 모델 평가보다는 데이터 자체에 대한 분석에 더 무게를 두었기에 원본 데이터를 가지고 인사이트를 한 번 더 찾아보려고 합니다.. ㅎㅎㅎ 벌써 막 아이디어들이 떠올라..

삼성SDS Brightics 2021.09.23

[삼성SDS Brightics] 팀미션 2-5. 구해줘! 분석 Youtube 업로드 ⚠⚠ 다들 빨리 달려가 유튜브로💨

​ 안녕하세요~! Brightics 서포터즈 2기 정해웅입니다 💙 ​ 저희 팀의 2번째 분석 영상이 유튜브에 올라왔다는,, 속보⚠아닌 속보를 가져왔습니다 ㅎㅎㅎ ​ https://youtu.be/7Z5wSFZ8pf4 저번 영상이 Brightics를 소개해주는 영상이라면 이번 영상은 초보자도 Brightics Studio를 활용하여 캐글/데이콘 등의 대회에 나갈 수 있다는 취지에서 만든 분석 영상인데요. 영상 보시면 아시겠지만, 우리 팀의 똑똑이들이 다 나와서 차근차근 설명해줍니다. 제 분량의 맨 앞 맨 뒤 약 2초..? ㅋ ㅋㅋㅋㅋㅋㅋㅋ ​ 이번 영상도 정말 재밌고, 초보자도 쉽게 따라올 수 있으니 Brightics로 분류 문제를 풀어보고 싶으신 분은 보고 따라하시면 좋을 것 같습니다 😀 ​ 삼성 SDS..

삼성SDS Brightics 2021.09.14

[삼성SDS Brightics] 개인분석미션 3-3. 데이터 Load : 부제 수작업 (과연 21년에 중소기업이 가장 많이 뽑는 직무는 무엇일까요~?)

​ 안녕하세요~! Brightics 서포터즈 2기 정해웅입니다 😀 지난 주까지 데이터 수집하는 과정을 거쳤습니다. ​ 이번 포스팅은 수집한 데이터를 Brightics Studio로 Load하고 전반적인 분포를 확인하는 시간을 가지려고 합니다 ㅎㅎ ​ 아시다시피 Brightics Studio는 데이터 Load 에서 가장 빛이 난다고 할 수도 있을 정도로 강력한 분석 성능을 보여주는데요. 제 개인 분석 미션에서는 어떻게 활약하고 있는지 살펴보러 가시죠~! 1. i-ONE JOB 데이터 추가 수집 지난 주 i-ONE JOB이라는 홈페이지에서 데이터를 추가적으로 확보하는 과정을 봤습니다. 개인분석미션의 메인 데이터가 중소기업에서 낸 데이터이고 그 데이터도 i-ONE JOB이라는 플랫폼의 데이터를 기반으로 수집한..

삼성SDS Brightics 2021.09.14

[삼성SDS Brightics] 개인분석미션 3-2. 데이터 수집 : 중소기업의 채용 현 주소는?

안녕하세요~~! Brightics 서포터즈 2기 정해웅입니다. ​ 벌써 여름이 다 지나가고 (내 방학 돌려줘,,,,,,,,,,,,,,,) 밤에는 선선한 바람이 부네요 🌤 ​ 지난 포스팅에서 10주 간의 개인분석프로젝트의 큰 틀을 짰다면 이번 포스팅에서는 '중소기업 채용' 관련 추가 데이터를 수집하는 시간을 갖도록 하겠습니다! ​ 따라와 보실까요?! ㅎㅎㅎ 1. 공공데이터포털 : 중소기업 전문 알자리 플랫폼(i-ONE JOB) 채용공고 통계현황 가장 먼저 제가 관심을 가졌고, 메인으로 생각한 데이터에 대해 소개해드리려고 합니다. 제목은 인데요. 제목 왤캐 어려워..? ​ 쉽게 설명드리자면 중소기업 전문 일자리 플랫폼 -> IBK 기업은행이 운영하는 i-ONE JOB 에 올라오는 채용공고의 통계 현황입니다...

삼성SDS Brightics 2021.09.05
반응형