본문 바로가기

반응형

분류 전체보기

(41)
[아파트 실거래가 정보 크롤링] 스크래피(scrapy) 이용해서 크롤링방법 설계 아래의 이전 프로젝트 시작 포스트 글을 참고해주세요. 첫번째 프로젝트 - 아파트 실거래가 트리맵 사이트 만들기 첫 시작 프로젝트글을 올리고 난 후 그동안 스크래피에서 실거래가 정보를 가져오고 적절하게 데이터를 처리한 후 트리맵에 맞는 json 파일을 만들기까지의 과정을 세팅하였습니다. 그러면 이번 포스트에서는 그 과정들 즉, 공공 데이터를 스크래피를 통해 가져오고 판다스로 데이터를 처리한 후 마지막 json 으로 데이터를 뽑는 과정들을 정리 해보겠습니다. 먼저 아래의 이미지는 전체 전국의 아파트 실거래가에서 평당가를 뽑고 데이터를 트리맵으로 옮긴후 표시를 한 결과 입니다. 아직은 finviz 처럼 한눈에 알아보기가 쉽지 않습니다만 앞으로 계속 알아보기 쉽게 바꿀 예정입니다. 어떻게 무슨 정보를 표시해 줄..
led 등 손쉽게 혼자 교체하기 - 태광 led 모듈 led 등 손쉽게 혼자 교체하기 살다보면 언제나 변수가 나타나기 마련입니다. 나에게 언제나 빛을 밝혀줄 led가 고장났을 때 바로 생각지도 못한 변수를 맞이했구나 라는걸 실감하게 되는거죠. 특히나 led가 고장난걸 경험한적이 없을 때 그 실감은 더 크게 느껴집니다. 저도 바로 몇일전 까지만해도 엄청났거든요. 저같은 경우는 욕실에 led등이 고장났을 때 기본적인 생활자체가 불편해지니 그 심적인 고통은 컸습니다. 만약 여기서 설치기사분을 불렀을 때에는 led 기계 + 출장비 까지 적지않은 지출이 나갈것이 뻔해보였습니다. 따라서 인터넷 검색을 계속 해보았습니다. 과연 led가 고장났을 땐 어쩔 수없이 지출이 돼야만 하는지, 또 가격은 얼마나 깨지는지 말이지요. 그러다가, 인터넷 쇼핑몰에 led를 쉽게 교체할 ..
e보금자리론 진행상태별 필수 체크 도움 목록 e보금자리론 진행상태별 필수 체크 도움 목록 보금자리론을 신청한 후 필요서류까지 다 제출하고 이제 심사결과만 기달리고 있는 상황입니다. 그래서 현재는 잔금날 전까지 무사히 잘 심사가 끝나길 바라고 있는 상황인데요, 혹시나 이번에 새로 보금자리론을 신청할 계획이 있으신 분들을 위해 진행상황별 소소한팁을 정리할려고 합니다. 핸드폰으로 신청 가능 보통 e보금자리론을 신청할 때 인터넷으로 신청하는 것만 생각하시는 분들이 많습니다. 하지만 모바일 어플로도 충분히 그리고 편리하게 신청할 수 있는데요, "스마트주택금융" 이라는 어플을 이용하면 언제 어디서든 편리하게 신청이 가능합니다. 저같은 경우도 처음 신청할 때 회사에서 점심시간에 모바일로 꼼꼼히 체크하면서 신청을 하였습니다. 추후에 심사를할 때 서류제출을 해야하..
pandas groupby 파이썬 데이터 그룹핑 예제 본 포스트는 외국 사이트의 내용을 한국어로 재정리한 글입니다. 이번 포스트에서 다룰 내용은 아래와 같습니다. pandas의 groupby를 진짜 세계데이터에서 사용하는 법 단계별로 split-apply-combine 하는법 다시 split-apply-combine 을 decompose 하는법 pandas groupby를 이용해서 속해있는 데이터에따라 다른 카데고리에 위치시키는 방법 들어가기에 앞서서 # 소수 셋째자리 밑으로는 과학적 표기법으로 표시 설정 pd.set_option("display.precision", 3) # 데이터를 표시해주는 프레임 라인 안보이게 설정 pd.set_option("display.expand_frame_repr", False) # row의 표시를 25줄로 설정 pd.set_..
아파트 보금자리론 대출가능 금액 계산 feat.부동산 시장이 불장일 때 최근 부동산 시장이 너무 가파르게 오르고 있습니다. 실수요 시장에서는 너도나도 다 올리는 분위기이기 때문에 상황에따라 결정을 조금이라도 늦게 하면 매매하고 싶은 아파트를 놓치는 경우가 많습니다. 이러한 상황에서 보금자리론 대출금액을 계산하는 방법을 알아보겠습니다. 일반적인 대출가능 금액 계산 방법 위의 한국주택금융공사 대출가능금액계산 페이지 에서 확인할 수 있듯이 kb시세를 기준으로 대출가능금액을 계산하게 됩니다. kb 시세는 kb메물시세 사이트에서 현재 아파트의 시세를 조회할 수 있으며 상위값과 하위값의 중간인 일반평균가를 기준으로 계산하게 됩니다. 단, 현재 사려는 아파트 매매가보다 kb시세가 높을 경우 입니다. 여기서 저는 오로지 kb시세기준으로 70%를 계산하는 줄 알았지만 만약 아파트 매매가가 ..
첫번째 프로젝트 - 아파트 실거래가 트리맵 사이트 만들기 프로젝트를 시작 하기전 블로그를 시작한 이유 근로소득 이외에 자동으로 알아서 돈이 모이는 파이프라인을 세팅하기위해 가장 먼저 한것은 블로그를 새로 만들어 시작을 했다는 것입니다. 사실 블로그를 함으로써 얻는것은 자기만의 컨텐츠를 올리면서 거기에 따른 부수적인 광고소득이 있을 것입니다. 하지만 그것 이외에 제가 얻고자 하는 효과는 파이프라인 세팅하는 중간중간의 과정들을 기록하면서 얻어지는 원동력이랄까요? 마치 금연하기전 먼저 선언을 하면 어쩔수없이 해야되는 일련의 나만의 약속하는 공간이 생기는 것과도 같은효과가 있습니다. 그러면서 검색을 통해 이 블로그의 유입수가 늘어나고 내가 앞으로 만들어갈 서비스에 파도타기처럼 이끌어 낼 수도 있으며 광고로 돈이 입금되면 더할나위없이 큰 원동력이 될 것 같습니다. 이제..
파이썬 SQLite Database 기본 사용법 정리 파이썬 SQLite Database 기본 사용법 정리 SQLite 를 사용함으로써 얻는 이점 SQLite 는 큰 데이터베이스에서 요구하는 또다른 분리된 서버가 필요하지 않습니다. SQLite 는 설치와 administration 을 요구하지 않습니다. 즉, 바로 쉽게 사용하기 좋습니다. 오로지 하나의 데이터베이스 파일이 필요합니다, 그리고 모든 정보는 오로지 이 하나의 파일에서 오게됩니다. 즉 여러 파일들로 쪼개진 여타 다른 데이터베이스보다 편리합니다. 미리 설치된 파이썬 기본 라이브러리이므로 또다른 설치가 필요하지 않습니다. SQLite는 ANSI-C로 작성되었기때문에, 속도가 빠릅니다. 또한 파이썬에서 api가 사용하기 쉽도록 되어있습니다. SQLite는 UNIX 시스템과 윈도우에서 잘 작동됩니다. ..
파이썬 datetime 모듈로 날짜 관련형식 정복하기 본 포스트는 www.dataquest.io/blog/python-datetime-tutorial/ 의 글을 참조로 다시 재정리하였습니다. 공공 데이터를 참조하기 위해서는 날짜 과련 모듈을 알고 있어야합니다. 따라서 이번엔 datetime에 관하여 알아보도록 하겠습니다. 파이썬 datetime class들 먼저 예제 코드를 살펴보기 전에 5개의 중요한 클래스를 살펴보겠습니다. datetime - 시간과 날짜를 동시에 구성할 수 있습니다.(month, day, year, hour, second, microsecond) date - 시간과는 별개로 날짜를 구성할 수 있습니다.(month, day, year) time - 날짜와는 별개로 시간을 구설할 수 있습니다.(hour, minute, second, mic..

반응형