들어가며 나는 내가 원하는 때에만 채식을 한다. 플렉시테리언이라고 주장할 수도 있겠지만 아직 채식 위주의 식사를 한다기엔 부족한 점이 많다. 밖에서 음식을 먹을 때는 육류나 생선을 피하기 어렵고 그 맛을 잘 알기에 찾아 먹기도 한다. 대신 혼자 밥을 먹어야할 때는 채식을 하려고 신경을 쓴다. 일주일에 한 두번 정도는 버섯 샐러드, CJ 플랜테이블, 풀무원 지구식단 라인 제품 등으로 채식 식단을 하고 있다. “비건 한 명이 제대로 된 비건 식단을 하는 것보다 완전하지 않은 비건들이 가끔 비건 식단을 챙겨먹는 것이 훨씬 현실적이고 그 문화가 널리 퍼지는 데에도 도움이 된다”고 한다. 옛날에는 막연하게 비건은 어렵고 접근성도 높다고 생각했는데, 이 의견을 들은 후로부터는 작게라도 실천하자는 생각이 들었다. 다..

상황 및 문제점 구글 드라이브에 올라온 대용량 파일을 직접 다운로드 후 서버에 업로드 하려니 너무 오래 걸리고, 중간에 끊기는 문제가 발생함 해결방법 터미널에서 아래 wget 명령어를 사용하여 직접 다운로드를 받을 수 있습니다. wget --load-cookies ~/cookies.txt "https://docs.google.com/uc?export=download&confirm=$(wget --quiet --save-cookies ~/cookies.txt --keep-session-cookies --no-check-certificate 'https://docs.google.com/uc?export=download&id={FILEID}' -O- | sed -rn 's/.*confirm=([0-9A-Za-..

최근 새로운 자연어 처리라는 새로운 태스크를 접하게 되었습니다. 자연어 처리 과제 중에서도 텍스트에 내포된 감성에 대해 분석하는 과제인 "감성 분석(Sentiment Analysis)"과 "ABSA(Aspect-Based Sentiment Analysis)"에 대해 알아보았고, 간단하게 개념을 정리하기 위해 포스트로 남깁니다. 감성분석 ABSA에 대해 이해하기 위해서는 감성 분석에 대해 먼저 알아야겠습니다. 감성 분석이란, "텍스트에서 감정을 파악하는 자연어 처리(NLP, Natural Language Processing) 과제"입니다. 여기서 얘기하는 "텍스트"는 사람의 의견이 담긴 소비자 리뷰, 설문조사 응답, 채팅 등이 될 수 있습니다. 그 의견이 긍정적인지 부정적인지 혹은 중립적인지를 판단하는 것..

지난 경주 기행 1편에 이어 2편 포스트이다. 2박3일동안 경주에 있으면서 (1편에서 소개했던 곳들을 제외하고) 좋았던 곳들을 남겨보고자 한다. [동궁과 월지] 압도적인 야경뷰 1위 https://naver.me/5Gy5Jmjg 동궁과 월지 : 네이버 방문자리뷰 4,013 · 블로그리뷰 9,984 m.place.naver.com 어렸을 때는 ‘안압지’라고 배웠으나 현재는 ‘동궁과 월지’라고 불린다. 신라 멸망 이후 기러기와 오리가 있는 연못이라는 의미로 ‘안압지’라고 불리다가, 유물 발굴 결과 신라시대 때 '월지'라고 불렸다는 것이 확인되어 ‘동궁과 월지’라는 명칭으로 변경되었다고 한다. 입장료는 성인 기준 3,000원인데 값을 더 받더라도 기꺼이 지불하고 방문할만큼 분위기 좋고 아름다운 곳이다. 육칠..

나는 팟캐스트 여둘톡의 애청자다. 지난 여름에 여둘톡에서 경주 여행을 소개한 후로 작가님들의 발자취를 따라가겠다고 생각해왔다. 그리고 지난 주말,, 3개월간 묵혀온 소망을 실천했다! 코레일 파업이 겹쳐지는 바람에 여행 자체를 취소하는 것까지 생각했는데, 숙소 체크인 전날이라고 환불을 한푼도 받을 수 없다길래 일정을 유지하기로 정했다. 급하게 오후반차를 신청하고 버스를 타고 경주에 내려갔고, 이튿날 계획했던 여둘톡에서 소개한 전시회와 식당에 방문했다. [Hullo, AGAIN 로즈 와일리 전시] Hullo는 헬로의 영국식 표현이라고 한다. 이전에 서울, 부산에서 전시를 한 적이 있었고, 마지막으로 경주에서 전시를 하게 되어 Hullo, AGAIN이라고 하는 제목이 붙었다고 한다. 도슨트 시작 시간보다 조금..

들어가며 데이터 탐색을 하다보면 다양하게 골치아픈 상황들을 마주하게 됩니다. 컬럼의 대부분이 비어있다거나, 분명 동일한 값인데 대문자 버전과 소문자 버전이 있다거나, 값의 정의가 시점에 따라 다르거나.. 등등 전처리가 필요한 경우는 신기할 정도로 많이 존재합니다. 그 중 하나가 바로 범주형 변수가 가진 카테고리가 너무 많은 경우입니다. 카테고리가 너무 많은 경우, 타겟과의 연관성을 파악하기도 번거롭고 시각화를 하더라도 한 눈에 들어오질 않습니다. 그 상태로 원핫인코딩을 진행한다면 카테고리마다 변수가 생겨 데이터가 sparse해지고, 트리 계열 모델을 학습한다면 학습 시간이 길어지면서 과적합되는 상황도 발생할 수 있을 것입니다. 위와 같은 단점을 해결하기 위해서는 해당 변수 내 카테고리 개수를 줄여야하는데..

들어가며 분석 과제를 하던 도중 범주형 변수를 숫자로 인코딩하기 위해 LabelEncoder가 필요하겠다 싶었습니다. 사용법을 확인하기 위해 사이킷런 공식문서를 살펴봤는데.. LabelEncoder는 타겟 변수 y를 하기 위해 사용하라고 써있더군요. label이 붙는 범주형 변수면 으레 사용 가능하다고 생각했었는데, 제가 오해를 하고 있었습니다. 공식문서를 다시금 잘 살펴보자는 교훈을 얻었네요. 이번 포스트는 LabelEncoder 와 OrdinalEncoder를 각각 소개하고 비교하고자 합니다. 두 인코더 모두 범주형 변수를 숫자로 인코딩하기 위해 쓰이는데요, LabelEncoder는 위에서 언급한 바와 같이 범주형 타겟 변수를, OrdinalEncoder는 범주형 입력 변수를 대상으로 합니다. 각각의..

들어가며 오랜만에 파이썬을 사용하다가 유용해보이는 기능을 발견하여 공유하고자 합니다. 바로 pandas의 style 기능입니다. 데이터 분석을 하면 데이터프레임에 찍힌 숫자나 문자와 같은 값들을 보면서 무엇이 제일 크고 작은지, 관심있게 보려는 값이 어디있는지 찾아야하는 일이 생기죠. 이때 내가 원하는 값들이 쉽게 눈에 띄지 않은 경험을 한 번쯤은 해보셨을 것 같습니다. 행, 열이 많아지면 주의 깊게 봐야하는 값이 어디에 있는지 더욱 찾기 어려워지기도 하죠. 이런 일들을 해결하기 위해 데꾸, 데이터프레임 꾸미기를 활용할 수 있습니다. 판다스의 공식 문서를 보며 유용할 것 같은 일부 함수들을 가져와 소개 드립니다. 비어있는 값, nan 강조하기 import numpy as np import pandas a..

최선을 다하면 죽는다 https://www.yes24.com/Product/Goods/119311211 최선을 다하면 죽는다 - 예스24우리 시대의 여성들에게 새로운 화두와 용기를 전해주는 팟캐스트 [여자 둘이 토크하고 있습니다]를 진행하며 똑부러지게 일하고 말하는 ‘멋언니’로 각광받는 황선우 작가, 그리고 『우아하www.yes24.com 팬심이 이끈 간만의 에세이 독서즐겨듣는 팟캐스트 여둘톡에서 소개한 책이어서 읽었다. 여둘톡 진행자이신 황선우 작가님 그리고 현업을 하시면서 글도 쓰고 계신 김혼비 작가님이 편지를 주고 받은 내용을 엮은 책이다. 두 작가님이 편지를 통해 그동안 본인에게 있었던 일들 혹은 과거의 추억들, 그를 통해 느낀 점들을 서로 공유하고 공감하는 이야기들이다. 말하듯 쓰여진 편지라는 ..

들어가며 IT 업계에 종사하다보면 다이어그램, 시스템 설계도나 워크플로우와 같은 것들을 그릴 일들이 발생합니다. 보편적으로 피피티를 사용하는 편이긴 하지만, 최근 좋은 툴을 알게되어 소개하고자 합니다. 바로 Excalidraw 입니다. 엑스칼리드로우는 다이어그램을 손그림 느낌이 나면서도 깔끔하게 그려주는 툴입니다. 웹으로도 사용이 가능하고, Obsidian(옵시디언)과 같은 노트 애플리케이션 내에서 확장 프로그램으로서 설치하여 사용할 수도 있습니다. 다만 웹으로는 한 개의 캔퍼스만 사용할 수 있고, 한글 폰트가 예쁘게 나오지 않아서 본 포스트에서는 옵시디안을 이용해 사용하는 방법을 소개하겠습니다! 옵시디언 설치 옵시디언 다운로드 홈페이지에서 환경에 맞는 설치 파일을 다운로드 합니다. 이후 첫 화면에서 언..