박범준의 일상로그

안녕하세요. 주피터 노트북 혹은 주피터랩에서 DB에 바로 접속하는 방법입니다. 보통 파이썬으로 DB에 있는 데이터를 가공하거나 분석할 때, csv 등으로 데이터를 다운로드한 후 파이썬으로 불러서 사용합니다. ipython-sql 라이브러리를 사용하면, 주피터에서 DB에 바로 접근할 수 있습니다. 1. 라이브러리를 설치합니다. pip install ipython-sql 2. 데이터베이스용 드라이버 라이브러리를 설치합니다. 접속하려는 DB에 해당하는 라이브러리를 설치하시면 됩니다. ex. SQL server의 DB에 접속하려면 pyodbc를 설치하시면 됩니다. # sql server pip install pyodbc # PostgreSQL pip install pyscopg2 # MySQL pip insta..

파이썬을 사용해 웹에 있는 데이터를 수집해보겠습니다. 거창하게 문법을 따지고 효율을 따지기 보다는, 간단하고 필요한 과정만 담겠습니다. 데이터를 수집할 페이지는 위키백과의 메인페이지입니다. 아래 과정에서 jupyternotebook을 사용했지만 필수가 아닙니다. 파이썬의 기본 idle로 해도 전혀 문제가 없으니, jupyternotebook이 뭔지 모르는 분들, jupyternotebook을 쓸 필요가 없는 분들은 코드만 확인하시면 됩니다. 먼저, 분석에 사용할 모듈인 requests를 설치하겠습니다. cmd를 실행하시고 pip install requests 라고 입력하시고 엔터치시면 됩니다. 엔터를 치면 이것과 비슷한 화면이 나올겁니다. 그러면 설치가 완료된 것 입니다. 이제 준비가 끝났으니 아래의 코..