[Python pandas] 데이터프레임(dataframe)에서 중복 데이터 확인하기

라이브러리 및 데이터 불러오기 # 라이브러리 import pandas as pd # 데이터 mock_data = pd.read_csv('MOCK_DATA.csv') # 데이터에 중복 데이터 하나 더 추가하기(여기서는 id 값이 중복되는 것으로 투입) mock_data.loc[1001] = [1000,'558-13-3915', 'Hong Gildong', 'Stainson','astainsonrr@t-online.de','Female', '168.198.40.197', 'Jinxiang', 'China', 'Mercury', 'Villager'] # 1001번에 추가시켜줬으니 tail로 확인 mock_data.tail(5) id ssn first_name last_name email gender ip_ad..

• format_list_bulleted DATA
• · 2019. 10. 6.
• textsms

[Python pandas] 데이터프레임(dataframe)에서 특정 칼럼을 제외한 칼럼만 선택하기

라이브러리 및 데이터 불러오기 # 라이브러리 import pandas as pd # 데이터 mock_data = pd.read_csv('MOCK_DATA.csv') mock_data.head(3) id ssn first_name last_name email gender ip_address city country car_make car_model 0 1 352-83-7834 Josselyn Commuzzo jcommuzzo0@shop-pro.jp Female NaN Aībak Afghanistan GMC Yukon XL 2500 1 2 129-55-2802 Aksel Cubbin acubbin1@rakuten.co.jp Male NaN Gaya Nigeria Cadillac CTS 2 3 421-78-00..

• format_list_bulleted DATA
• · 2019. 10. 6.
• textsms

[Python pandas] 데이터프레임(dataframe)에서 데이터타입(dtype)에 부합하는 칼럼만 가져오기

라이브러리 및 데이터 불러오기 # 라이브러리 import pandas as pd # 데이터 mock_data = pd.read_csv('MOCK_DATA.csv') mock_data.head(5) id ssn first_name last_name email gender ip_address city country car_make car_model 0 1 352-83-7834 Josselyn Commuzzo jcommuzzo0@shop-pro.jp Female NaN Aībak Afghanistan GMC Yukon XL 2500 1 2 129-55-2802 Aksel Cubbin acubbin1@rakuten.co.jp Male NaN Gaya Nigeria Cadillac CTS 2 3 421-78-00..

• format_list_bulleted DATA
• · 2019. 10. 6.
• textsms

파이썬 돌리다가 nProtect 때문에 엿먹음

점심시간에 사무실에서 카드사 결제를 하려다가 nProtect 때문에 빅엿을 먹었습니다. 음슴체로 써볼게요 발단은 주피터 노트북(Jupyter Notebook)으로 파이썬 데이터 모델링을 돌리고 있었는데 대략 3시간 예상에 2시간 정도 소요되고 있던 시점이었음. 그러던 도중 점심시간이 되어서 파이썬은 계속 돌아가고 익스플로러로 카드 사 홈페이지에 들어가서 대금 결제를 하려고 하는데 갑자기 저렇게 알림이 뜨면서 Python을 차단했다는 알림이 뜬 것임. nProtect 가 저렇게 알림이 뜨는거야 한두번도 아니니 그냥 허가 눌러주고, 카드 대금 결제를 정상적으로 마침. 그런 다음 다시 주피터 노트북으로 들어가려고 하는데 아래와 같은 화면과 마주하게 됨..ㄷㄷㄷ 커넥션 페일... ㅋㅋㅋ 멘붕에 빠져 다시 개별 ..

• format_list_bulleted DEV
• · 2019. 6. 19.
• textsms

Python 데이터 분석 #2 : CSV 데이터 불러오기

불러온 데이터 프레임을 기반으로 기본적인 편집해보기 1. 개요 안녕하세요. 이번 시간에는 CSV에서 불러온 데이터 프레임을 기본적으로 편집하는 방법에 대해 다룹니다. 데이터 프레임의 자료를 확인하고, 필요에 따라 JOIN으로 병합하거나 DROP 하는 방법에 대해 적혀 있습니다. 자세한 내용은 코드를 확인하세요. 출력물 한글 폰트 설정 >> 차트 등의 LABEL에서 한글이 깨지지 않게 됨.데이터프레임의 자료형태(str,boolean,int...) 확인CSV 불러오면서 날짜 인식시키기다수의 데이터프레임을 단순히 Append 형식으로 병합데이터프레임) JOIN으로 병합데이터프레임에서 특정 column 제거(drop) 시키기데이터프레임에서 특정 row를 index 값 기준으로 제거(drop) 시키기데이터프레임에..

• format_list_bulleted DATA
• · 2019. 1. 3.
• textsms

Python 데이터 분석 #1 : CSV 데이터 불러오기

Pandas 를 활용하여 CSV 데이터를 불러오는 방법을 알아봅니다 1. 개요 오랜만의 글입니다. 저도 배우는 입장이고, 자주 쓰는 기본적인 코드들을 관리를 해야 겠다는 생각이 들었거든요.(문과대 출신의 애로 사항) 여튼 그래서 작은 것부터 시작해서 자주 쓰는 코드들, 제가 실제로 썼던 코드들을 정리해서 업데이트 해보려고 합니다. 코드는 아래의 형태로 볼 수 있고 Github Gist에 업로드 된 것이라 사용 및 확인하기도 편리합니다. 앞으로 잘 해 보겠습니다. 2. 코드

• format_list_bulleted DATA
• · 2018. 12. 26.
• textsms

MS-SQL의 DB를 csv로 추출하는 방법

이번 편에는 MS-SQL의 DB를 csv로 추출하는 방법을 알아봅니다. 사실 명령어를 쓰면 더 빠를 수도 있겠지만 여기서는 MS-SQL의 클라이언트를 사용하여 추출하는 방법을 알아보겠습니다. 우선 Microsoft SQL Server Management Studio (SSMS) 클라이언트를 다운 받겠습니다. 대부분 있겠지만 혹시 모르니 여기에다가 링크를 달겠습니다. https://docs.microsoft.com/ko-kr/sql/ssms/download-sql-server-management-studio-ssms?view=sql-server-2017 다운받아 실행 한 뒤에 DB에 접속하면 아래 이미지처럼 좌측에 DB 관련 트리가 뜹니다. 여기서 추출하기를 원하는 DB를 선택한 뒤(테이블에선 메뉴가 활성..

• format_list_bulleted DATA
• · 2018. 8. 18.
• textsms

파이썬(주피터 노트북) 주석처리할 때 방법

파이썬은 JAVA랑은 주석처리 하는 방법이 다릅니다. 하지만 크게 어렵진 않아요. 파이썬에서 # ㅇㅇㅇ 하는 것은 해당 줄만 주석처리가 됩니다. 큰 따옴표 3개 """ 로 문구를 감싸면 """ 내부에 있는 코드는 전부 주석처리할 수 있습니다. 요약하면 아래와 같습니다. # 문구 // 해당 줄만 주석처리 됩니다. """ // 큰 따옴표 3개로 위 아래를 감싸면 여러 줄을 주석처리 할 우 있습니다. 주석 처리 """

• format_list_bulleted DATA
• · 2018. 8. 13.
• textsms