본문 바로가기

파이썬60

SQL로 어떻게 데이터를 가져오는지 sql을 배워야겠다는 생각이 든게, 엑셀은 데이터가 몇만행이 되면 파일이 무거워지고 일이 안되는 경우가 많다. 근데 sql은 어떤 데이터창고?DB?에서 마음대로 꺼내올수 있다는 식으로 얘기를 해서 관심을 갖게 됐는데, 어떻게 가져오는지 모르겠다. 개발자한테 요청해야되나? 답변 https://brunch.co.kr/@minu-log/4 데이터 분석, SQL만 잘 다뤄도 먹고 들어갑니다. 데이터를 분석하려면 데이터 추출부터 | (개인 웹사이트(링크)에 재발행했습니다.) 이전 글(마케터의 데이터 분석 공부, 어디부터 시작해야 하나요?)에서 데이터 분석을 깊게 공부하고 싶은 분이 brunch.co.kr 회사 대부분의 모든 데이터는 SQL형식으로 저장되어있다고 한다. 어떻게 가져오는지는 그 회사직원만 알 것 같다.. 2022. 6. 12.
데이터 공유 사이트 국내 사이트 서울열린데이터광장 https://data.seoul.go.kr/ 공공데이터포털 https://www.data.go.kr e-나라지표 http://www.index.go.kr/ 국가통계포털 http://kosis.kr 서울특별시 빅데이터 캠퍼스 https://bigdata.seoul.go.kr/ 통계청 http://kostat.go.kr/ 통계청 kostat.go.kr 해외 사이트 구글 데이터 검색 https://toolbox.google.com/datasetsearch 캐글 https://www.kaggle.com/datasets Awesome Public Datasets Github https://github.com/awesomedata/awesome-public-datasets Data .. 2022. 6. 9.
CSV 파일 만드는법 코드잇 문제풀이할때 웹에서 푸는건 좀 별로고 주피터 노트북에서 풀고싶어졌고, 어떻게 데이터를 끌고올까 생각하다 찾게됐다. https://ko.wikihow.com/CSV-%ED%8C%8C%EC%9D%BC-%EB%A7%8C%EB%93%9C%EB%8A%94-%EB%B0%A9%EB%B2%95 CSV 파일 만드는 방법 CSV(comma separated values, 쉼표로 값이 구분된 데이터) 파일은 데이터를 표 형식으로 저장할 수 있어 대규모 데이터베이스를 관리해야 할 때 유용하다. CSV 파일은 마이크로소프트 액셀, 오픈오피스 Ca ko.wikihow.com 2번에 메모장방식을 사용했다. data에 있는 자료를 통째로 복사해서 메모장에 붙여넣기하고 다른이름으로 저장-> 끝에 .csv만 붙여주면 그냥 csv.. 2022. 6. 9.
인코딩(글자 깨지는 문제) 출처 : https://www.youtube.com/watch?v=ABPOjjre0C8 제목 : 문자 인코딩 초간단 개념 정리 (UTF-8, 아스키, 유니코드...) 뷁갌앓젏. 살다보면 이런글자를 많이보고 아까도 CSV파일을 여는데 파일 글자가 깨져서 검색후 찾아보게됨. 영상 요약 : '문자표'라는 개념을 먼저 이해해야된다. 기계끼리는 당연히 숫자로 이야기한다. 그래서 한글로 print하려면 숫자로 말해줘야된다. ex) '1이 입력되면 '가'라는 글자를 모니터에 print시켜라' 처럼. 근데 컴퓨터끼리도 말이 다를 수 있어서 이걸 표준화시켜야되는데 이게 '문자표' 아스키코드(문자표)같은 초창기때만해도 영어만썼고 개발자들이 많지않아서 표준화하기 쉬웠는데, 이젠 언어도 많아지고 개발자들도 많아져서 통일하기가.. 2022. 6. 5.