본문 바로가기

분류 전체보기202

[python, pandas] Data scientist라면 알아야 할 기본 기능 1. Introduction Pandas module은 data scientist들이 가장 많이 사용하고 있는 모듈중 하나일 것입니다. 혹은 R 프로그래밍을 하셨던 분이라면, 유사하게 데이터를 다룰수 있도록 하는 모듈이 이 pandas일 것입니다. 주로 pandas는 pd로 줄여서 분석을 합니다. 이번 포스팅은 pandas에서 기본중에 기본기능에 대해서 이야기해보려고 합니다. 2. 기능들 실습에 사용되는 데이터는 다음에서 다운받으시면 됩니다. https://archive.ics.uci.edu/ml/datasets/iris UCI Machine Learning Repository: Iris Data Set Data Set Characteristics: Multivariate Number of Instanc.. 2023. 2. 15.
[C8,Ubuntu] Ubuntu 업그레이드 중에 에러 발생시 해결 이번에 서버에 우분투 버전을 업그레이드하기 위해서 업그레이드 실행 후에 퇴근을 한 상태였습니다. 다음날 와서 보니 업그레이드하다가 중간에 멈췄는지 다음과 같은 에러가 떳습니다. Oh no! Something has gone wrong. (C8!!) A problem has occurred and the system can't recover. Please contact a system administrator. 회사 내부여서 부팅 디스크 만드는 것도 귀찮고 어떻게 될것 같아서 찾아 보니 GUN Grub을 이용하면 해결이 가능할것 같더라구요. bios 준비가 마치면 shift만 주구장창 누르면 된다길래 해봤는데, 실패!! 또 더 찾아 보니 ESC 주구장창 누르면 된다길래 해봤는데.. Command line으.. 2023. 2. 14.
[jupyterlab] 404 Get 에러 발생 대처 최근 오랜만에 사무용 컴퓨터에 설치해놓은 jupyter-lab을 실행시키는데, 뭔가 내부적으로 꼬였는지 404 Get 이라는 스크립트와 함께 jupyter-lab이 실행이 안되었습니다. 구글에 찾아보니 다시 설치하는게 답이다 라는 말밖에 없더군요. 다시 설치를 해도 안되어서 이것 저것 만져보다가 해결이 되어서 포스팅을 합니다. 404 Get error대처 방법에 대해서 간단하게 설명하도록 하겠습니다. 이 문제의 해결에는 한가지 조건이 들어갑니다. config 파일 내부를 변경했을 경우 입니다. 처음 구글링의 해법인 다시 설치를 진행하였는데, 또다시 404 Get이 뜨면서 작동이 안되었습니다. 혹시나 하는 마음에 config파일은 다시 설치 전 후 그대로더군요. config파일의 경우 --generate-.. 2023. 2. 2.
[cv2] 색감을 보는 방법 (RGB, BGR, HSV, LAB) 이미지 분석을 하다보면 흔하게 볼 수 있는 색감 관련 개념은 GRAY 혹은 RGB를 많이 사용해보셨을겁니다. 저도 이미지분석을 공부중이라 분석에 적용할 때에는 잘 알고있는, GRAY 혹은 RGB를 이용한 분석을 주로 하였습니다. 그런데 GRAY, RGB 만 이용해서 분석을 하면서 표현적 한계에 부딪치는 경우가 있었습니다. 예를들어 cv2.inRange를 이용하여 색감들을 고를 경우 같은 색감일지라도 RGB로는 표현이 불가능 할 때가 있습니다. 아래의 코드를 이용하여 보라색 계열을 일부가져 왔습니다. image_color = np.array([ [255, 72, 255], [204, 0, 204], [153, 0, 153], [102, 0, 102], [51, 0, 51], [51, 0, 102], [10.. 2023. 1. 19.
[딥러닝] 모델 결과가 매번 다르게 나오는 경우 최근 딥러닝 모델을 개발하고 모델확인을 하면서 문제를 직면한 부분중 하나가 바로 모델 결과가 매번 다르게 나오는 경우입니다. 모델을 열심히 시간 돌려가면서 제작을 하더라도 확인할 때, 아래와 같이 결과가 안나오거나, 이상하게 예측이 되는 때가 있었습니다. 모델 내부나 pytorch의 random 문제가 이일을 발생시키는 줄 알고 다양한 방법을 시도 해보았으나, 해결이 되지 않았습니다. torch.manual_seed(1234) torch.backends.cudnn.deterministic = True torch.backends.cudnn.benchmark = False np.random.seed(1234) 그러다 겨우 찾아낸 문제가 바로 데이터셋 제작할 때, train에 썻던 이미지 변환방법이 문제였습니.. 2022. 12. 15.
[경영마인드메모] 교수가 창업을 하기 위해서는.. 대학원생때 주변 교수님들이 창업을 하는 분들이 많으셨습니다. 간접적으로 옆에서 보면서 회사 돌아가는 상황이 참별로다.. 라는 생각을 많이 했습니다. 뭐 훈수질이 가장 쉬운거라고들 하지만요..ㅎㅎㅎ 그때 깨닫고 있었던 부분들을 정리해서 써놓는 것도 괜찮다고 생각해서 포스팅을 시작하였습니다. 결국 때가 되면 창업을 하고싶거든요.. 이야기 내용은 조금 픽션을 섞었습니다. 그대로 내용을 공유하면 안될 것 같아서요 ㅎㅎ 1. 가족 같은 회사는 만들지 말기 대학원생때 친척을 불러와서 교수로 찔러 넣어주고, 같이 공동 창업을 했는데 나중에는 다른 가족들이 와서 이 자리 저 자리 차지하는 것을 보았습니다. 나중에 회사 돈을 아낀다고 직원들 지원을 하나 둘씩 끊는 것은 둘째치고, 자기 자신들의 지원은 아낌 없이 하는 것.. 2022. 12. 5.

티스토리툴바