1. Python/오픈 API 활용기

      가장 쉬운 아파트 실거래가 조회하고, 데이터 수집하는 방법은?!

      아파트 실거래가는 국토교통부에서 제공하고 있다. 제공처가 국토교통부이기 때문에, 해당 사이트에서 실거래가를 확인할 수 있지만 웬지 모르게 불편하다. 그리고, 국토교통부에서는 아파트 실거래가를 포함한 여러가지 부동산 거래 데이터를 무료로 수집하고 활용할 수 있도록 제공하고 있다. 가장 쉬운 아파트 실거래가 조회하는 방법과 데이터를 수집하는 방법에 대해서 차례대로 알아보도록 하겠다. 1. 네이버 부동산에서 실거래가 조회하기필자는 '네이버 부동산'에서 실거래가를 조회하는 것을 추천한다. 쉽고 편리하기 때문이다. 별도로 네이버 부동산 앱도 있어, 스마트폰에서도 사용하기 좋다.네이버 부동산에 접속하고, 상단의 검색창을 이용해서 원하는 아파트를 검색한다. 아래와 같이 검색된 화면에 실거래가가 바로 표시된다. 추가로..

       2020.09.02
    2. Python/파이썬 경마 분석

      파이썬 웹크롤링, 경마 경기결과 데이터 수집하는 방법은?!

      경마 경기 결과는 렛츠런 파크 싸이트에 공개된다. 이 데이터를 수집하는 방법은 여러가지가 있지만, 개인적으로 파이썬을 이용하는 것을 추천한다. 파이썬을 이용하면 웹크롤링을 통해 원하는 데이터를 쉽게 수집할 수 있다.필자가 파이썬을 이용해서 제일 처음 했던 것이 경마 경기결과를 수집하는 것이었다. 예전에 포스팅도 했지만, 그동안 알게 된 내용들을 바탕으로 코드를 수정해보았다.오늘은 파이썬 웹크롤링, 경마 경기결과 데이터를 수집하는 방법에 대해서 알아보도록 하겠다. 코드를 알아보기 전에 수집 프로세스에 대해 알아보도록 하겠다. 1. 수집 데이터는 MySQL에 저장한다.MySQL은 무료로 사용할 수 있는 DBMS이다. 무료 DBMS는 여러가지가 있지만, MySQL은 서버에 올려서 사용할 수도 있기 때문에 유용..

       2020.07.05
    3. Python/파이썬 배우기

      파이썬 데이터 분석 도서 추천, 금융 데이터를 위한 파이썬!

      파이썬으로 데이터 분석하는 사람이 늘고 있습니다. 빅데이터 분석을 얘기할 때 R과 파이썬을 많이 얘기합니다. 필자는 R보다 파이썬을 선호합니다. 문법이 직관적이고, 활용할 수 있는 패키지가 많기 때문입니다. 데이터 분석 결과를 이용하여 웹페이지 개발, 서비스를 만들기에도 파이썬이 훨씬 용이합니다. 이렇게 생각하던 중에, 기회가 돼서 '금융 데이터를 위한 파이썬'이라는 책을 출간하게 됐습니다. 데이터 수집, 분석, 활용을 누구나 많은 데이터가 공개돼 있고, '파이썬'이라는 오픈소스 프로그래밍 언어를 통해 누구나 쉽게 데이터를 수집, 분석, 활용할 수 있습니다. 파이썬은 문법이 쉽고 이미 개발된 많은 패키지들이 있기 때문에, 적은 노력으로 원하는 성과를 달성할 수 있습니다. 프로그래밍의 장점 중 하나는 코드..

       2020.06.23
    4. Python/파이썬 배우기

      의외로 모르는 파이썬 기초 총정리!

      파이썬은 프로그래밍 언어 중 배우기 쉬운 언어로 꼽힌다. 쉬운 문법과 다양한 패키지들은 프로그래밍의 진입 장벽을 많이 낮춰준다. 물론 여기에는 구글과 수많은 고수(?)들의 도움도 있다. 이런 파이썬의 매력에 반해 꾸분히 파이썬 관련 포스팅을 해 왔다. 필자의 경험을 바탕으로 파이썬을 처음 시작하는 사람들에게 도움이 될만한 글들을 모아봤다. 얼추 모아보니 파이썬 기초와 관련된 내용들은 대부분 포함하고 있는 것 같다. 1. 무엇을 배우고 하고 싶은지 정해보자.목적없는 공부는 재미 없다. 혹자는 시험이나 학점을 위해 공부할 수도 있다. 하지만, 파이썬은 활용범위가 정말 넓다. 쉬운 목표라도 하나를 정하고 시작하면 좋을 듯 하다. ( 참조: 파이썬 활용, 파이썬 프로젝트로 할 수 있는 일들을 알아보자! ) 2...

       2020.05.27
    5. Python/오픈 API 활용기

      파이썬 퀀트투자, 알고리즘 개발부터 백테스트까지 zipline

      퀀트투자에 대한 사람들의 관심이 높아졌다. 과거에는 기업이나 기관에서만 분석을 할 수 있었지만, 지금은 개인도 충분히 할 수 있다. 금융 데이터가 많이 공개되고, 분석할 수 있는 툴도 무료로 사용할 수 있는 게 많기 때문이다. 특히, 파이썬은 문법이 어렵지 않고, 관련 패키지도 많아 쉽게 접근할 수 있다. 오늘은 파이썬 퀀트투자, 알고리즘 개발부터 백테스트까지 zipline을 이용하는 방법에 대해서 알아보도록 하겠다. zipline을 설치하기 위해서는 파이썬 가상환경을 이용해야 한다. 아직 많은 사람들이 이용하지는 않기 때문인지, 파이썬 3.5까지 지원하기 때문이다. 그리고 다른 모듈들과 충돌 가능성이 높기 때문에, 가상환경에 설치할 것을 권장하고 있다. 데이터 분석과 관련된 다른 모듈들도 필요하기 때문..

       2020.05.01
    6. Python/파이썬 배우기

      파이썬 판다스 주가 이동평균선 쉽게 계산하는 방법은?

      이동평균선을 구하는 방법은 어려지 않으나, 막상 하려고 하면 굉장히 귀찮다. 특히 그룹별로 한다고 생각하면 함수를 만들어서 적용하면 좋을 것 같지만, 선뜻 하고 싶지 않다. 이런 기능을 제공해주면 얼마나 좋을까 하고 생각하는 순간. 판다스 데이터 프레임에서 이동평균선을 쉽게 구할 수 있다는 사실을 알게 되었다. 오늘은 파이썬 판다스 이동평균선을 쉽게 계산하는 방법에 대해서 알아보도록 하겠다. 1. rolling이라는 함수를 이용하면 이동평균선을 쉽게 구할 수 있다.rolling은 이동평균선처럼 정해진 구간을 이동하면서 요약값을 구할 때 유용한 함수이다. 테스트를 위해서 삼성전자 주가 데이터를 가져와봤다. financialReader패키지를 이용하면, 주식과 관련된 많은 정보를 손쉽게 얻을 수 있다. fi..

       2020.04.29
    7. Python/오픈 API 활용기

      파이썬 실시간 주가, 주식시세 데이터 수집하는 방법은?

      실시간 주가 및 주식시세 데이터를 제공하는 사이트가 있다. 바로 한국거래소이다. 한국거래소에서는 XML포맷으로 실시간 주가 및 기업 재무제표를 제공하고 있다. 별도의 API KEY를 발급받을 필요도 없다. 하지만, 많은 사람들이 사용하지는 않는 듯 하다. 약간의 결함도 있기 때문이다. 오늘은 파이썬 실시간 주가, 주식시세 데이터 수집하는 방법에 대해서 알아보도록 하겠다. 1. 한국거래소에서 제공하는 데이터는?한국 거래소에서 제공하는 데이터의 종류는 4가지다. '실시간시세, 공시정보, 재무종합, 텍스트'가 있다. 텍스트는 자세한 설명이 없어 어떤 데이터인지 알기가 어렵다. 하지만, 실시간시세와 재무정보를 제공하는 것만으로도 충분히 가치가 있는 듯 하다. 한국거래소에서 제공하는 데이터의 자세한 내용은 아래 ..

       2020.04.28
    8. Python/오픈 API 활용기

      파이썬 기업 재무제표 데이터, 쉽게 수집하는 방법은?

      파이썬으로 데이터를 수집하는 방법은 여러가지가 있다. 파일을 다운 받을 수도 있고, 웹크롤링을 할 수도 있다. 하지만, API로 제공되는 데이터를 수집하는 것이 가장 편리하다. 데이터 레이아웃이 정해져 있고, 웹크롤링을 할 때처럼 IP차단 등의 부담도 없기 때문이다. 기업 재무제표 데이터를 API로 수집할 수 있는 방법은 그 동안 없었다. 하지만, 이를 OPEN API로 공개했다. 오늘은 기업 재무제표 데이터를 파이썬에서 수집하는 방법에 대해서 알아보도록 하겠다. API를 이용해서 말이다. API로 데이터를 수집하는 방법은?사실 웹크롤링과 오픈API로 데이터를 수집하는 방법은 동일하다. 다만, 웹크롤링 하는 것은 웹페이지를 파싱하고, 원하는 부분을 추출해야 하기 때문에 더 번거럽고 힘들다. 오픈API로 ..

       2020.04.17
    9. Python/오픈 API 활용기

      로또 규칙, 로또 당첨그래프로 알아보는 방법은?

      로또는 대표적인 랜덤 확률 게임입니다. 하지만 당첨에 영향을 주는 어떤 요인이 있다고 생각하고, 로또의 규칙을 찾아보려는 시도가 많이 있습니다. 필자도 로또를 분석하여 당첨확률을 높일 수 있다는 얘기를 믿지는 않습니다. 하지만 우연한 기회로 로또에 관심을 갖게 될 기회가 생겼습니다. 로또 규칙, 로또 당첨그래프에 대해 알아보겠습니다. HTML 삽입 미리보기할 수 없는 소스 1. 로또 당첨 그래프 로또를 분석할 때 가장 먼저 접근하는 방식은 어떤 번호들이 당첨되었는지 확인해보는 것입니다. 이를 보기좋게 시각적으로 표현하는 방법이 있는데요. 로또 당첨그래프를 그려보는 것입니다. 로또 당첨그래프는 1번부터 45번까지 당첨된 숫자를 x축에 놓고, 당첨된 경우만 색깔을 칠하면 됩니다. 파이썬을 이용해서 아래와 같..

       2020.04.03
    10. Python/파이썬 배우기

      빅데이터 분석 전문가 자격증 ADSP, 어떤 자격증인가?

      ADSP는 빅데이터 분석 자격증 중에서 가장 많이 알려진 것입니다. 자격증이 특정 분야의 능력을 100% 증명이 준다고 보기는 어렵습니다. 하지만 관련 경험이나 지식이 동일한 사람이라면 아무래도 자격증이 있는 사람에게 더 손이 갑니다. 아무래도 없는 사람보다는 관심과 기초지식 유무는 높다고 판단할 수 있지 않을까 슾습니다. 빅데이터 분석 전문가 자격증인 ADSP를 알아보았습니다. HTML 삽입 미리보기할 수 없는 소스 제가 처음 사회생활을 할 때와 비교하면 데이터에 대한 사회인식과 관심이 굉장히 많이 올라갔습니다. 우연히 기회가 되어 서류전형에 참가할 기회가 있었습니다. 많은 취업준비생이 빅데이터 관련 준비를 하고 있다는 사실에 조금 놀랐습니다. 국가나 민간에서 공모전도 많이 하고, 교육과정도 운영하고 ..

       2020.02.19
    이전 1 2 3 4 5 ··· 11 다음

    티스토리툴바