본문 바로가기

전체 글91

멋쟁이사자처럼 AI스쿨 7주차 회고 이번주에는 데이터 전처리와 시각화 관련 수업이었다... 새로운 데이터가 주어졌을 때 잘 할 수 있을지는 모르겠지만... 한번 배운 것을 확인해 보자! 처음으로 다뤄본 데이터는 서울시 코로나19 발생동향 데이터이다! 일단 필요한 라이브러리를 업로드하고... # pandas, numpy, matplotlib.pyplot 불러오기 import pandas as pd import numpy as np import matplotlib.pyplot as plt 한글폰트 사용을 위해 코리안와이즈 매트플롯립을 설치했다! # 한글폰트 사용을 위해 설치 !pip install koreanize-matplotlib 설치가 잘 끝났고... 여러 부수적인 것들을 설정! import koreanize_matplotlib # 그래.. 2023. 2. 2.
멋쟁이사자처럼 miniproject1(네이버 증권 웹사이트 정보 수집하기) 두번째 주제는 네이버 증권 웹사이트 정보 수집하기로 정했다.. 해당 페이지 : https://finance.naver.com/sise/sise_group.naver?type=upjong 테마별 시세 : 네이버 증권 관심종목의 실시간 주가를 가장 빠르게 확인하는 곳 finance.naver.com 일단 업종별 시세 페이지를 수집한 다음.. 링크를 타고 세부적인 내용을 긁어오기로 했다! 업종별 시세 페이지 수집 함수 코드이다! 링크를 타고 들어가야해서 업종번호도 파생변수로 넣어줬다! # 업종별 시세 페이지 수집 함수 import pandas as pd import requests from bs4 import BeautifulSoup as bs from datetime import datetime def ge.. 2023. 2. 2.
이번 주말 먹은거?(20230129) 동생이 세종갈일이 있어서 가족 다같이 세종감... 주말에 아침은 귀찮으니 패스... 점심을... 여기 있는 세종 피제리아지알로에서 먹었다! 피자 찍는 걸 까먹고 지리게 찢어버린 피자... 좀 짜지만 이태리에 온 너낌을 받았음... 이건 채끝 리조또인데... 버섯향이 지리긴 했음... 이건 무너 파스타인데 올리브향이 좀 강했지만 맛있었음... 문어도 쫄깃하니 맛있었음! 밥 먹고 커피조져야해서... 메타45카페에 갔다! 45층에 있어서 메타45인듯? 카페에서 바라본 세종 카페에서 프로젝트하면서 가오잡는중..? 세종에서 돌아오고 저녁은 초밥! 스시일기에서 먹었다! 좀 가격대 있는 초밥이라 그런지... 지리긴 했음... 암튼 주말에 잘먹었다?? 2023. 1. 31.
멋쟁이사자처럼 miniproject1(스타벅스 매장 정보 수집하기) 멋쟁이 사자처럼 수강을 하면서 첫 프로젝트가 닥쳤다! 평소에 커피를 많이 좋아하기 때문에... 여러 데이터 중 스타벅스 매장 데이터를 수집해보기로 했다! 일단 데이터를 수집하고...(post방식) 여러 전처리를 거치는 함수이다! 특히 이름의 뒷부분에 매장타입에 관한 정보를 가지고 매장타입을 파생변수로 생성했다! # 필요 라이브러리 호출 import pandas as pd import requests import numpy as np #url을 통해 스타벅스 매장의 데이터를 수집하는 함수 def get_starbucks_store(url): # 데이터를 수집할 때 필요한 데이터 data = { 'p_sido_cd':'', 'p_gugun_cd':'', 'in_biz_cd':'', 'set_date':'',.. 2023. 1. 31.
설날 기념 운동과 먹은 것 들...? 설날 전에 아웃백 조졌다... 개비싸다... 쉣... 일단 콘스푸랑 식전빵 개조짐 ㅋㅋㅋㅋ 벌써 배부르다... 이거는 뭐 스튜같은 건데 소주 3병 정도 들어갈듯 ㅇㅈ? 토마호크 스테이크 처음 먹어보는데 입안에 가득찬 느낌은 좋았음? 근데 생각보다 질김... 인스타용... ㅇㅈ? 암튼 아웃백 함 가봤다 이말이지... 설날 담날에 운동하고 먹은 양꼬치... 지리게 구워지고 있다... 마이프로틴!!!! 이거는 장첸 따라해보려고 시킨 마라롱샤? 꽤 커보이지만 먹기 개불편함... 살발라노면 멸치가 따로없네... 소스는 개맛있음 ㄹㅇ 다이어트 진행상황... 4키로 정도 빠진듯 한데... 뱃살은 왜 그대로지...? ㅋㅋㅋㅋ 이거슨... 무지성 140kg 바벨로우... 개 노다가 하는중... 야 뭐하냐...? 운동 개.. 2023. 1. 24.
멋쟁이사자처럼 AI스쿨 5주차 회고 이번주는 정말 많은 것을 배운 것 같습니다... 시간도 참 빠르게 느껴지네요... 그럼 이번주 배운 것들을 정리해봅시다! 가장 먼저... 행정안전부 대통령 기록관에서 대통령 연설기록을 수집했다! 검사 창에서 확인할 것들을 먼저 아래와 같이 확인해준다! 확인 했으면... 필요한 라이브러리와 url을 적고 요청을 해보자! # requests, bs4, pandas 불러오기 import requests from bs4 import BeautifulSoup as bs import pandas as pd page_no = 70 url = "https://www.pa.go.kr/research/contents/speech/index.jsp" params = f"spMode=&artid=&catid=&pageInde.. 2023. 1. 19.
네이버 증권 종목토론실수집(과제보충) 과제를 하다가 내용랭크까지만 수집하고... 내용은 수집 못했었는데요... 또 날짜를 빼놓고 수집했습니다... import pandas as pd import requests from bs4 import BeautifulSoup as bs def get_end_page(item_code): url_for_end = 'https://finance.naver.com' url_for_end = f'{url_for_end}/item/board.naver?code={item_code}' response = requests.get(url_for_end, headers = {'User-Agent':'Mozilla/5.0'}) html = bs(response.text) step1 = html.select('tbody .. 2023. 1. 18.
네이버 영화별 평점 수집해보기 영화보러 갈 사람...? 같이 영화볼 사람이 없네여... 하지만 수집할 데이터는 많쥬... 오늘은 이렇게 영화마다 페이지의 평점을 모두 수집해보는 컨텐츠입니다! 일단 제가 좋아하는 21그램 https://www.netflix.com/title/60031261 21그램 | 넷플릭스 서로 아는 사이는 아니지만, 비극적인 자동차 사고로 인해 얽히게 된 세 사람. 가장 어두운 두려움을 마주하고 삶에 대해 다시 생각해 구원을 찾아야만 한다. www.netflix.com 페이지 평점을 수집해 보쥬! 일단 평점있는 곳에서 검사를 클릭하고... 네트워크, 문서 페이지에서 이름창 2번째에서 요청 URL을 확인합니다! 요청 URL을 주소창에 복붙하고 엔터! 그러면 이렇게 평점만 있는 페이지가 나오네여 ㅎㅎ 이제 그럼..... 2023. 1. 15.