Python 기초 1

✍🏻 배운점

 

Python Programming 기초를 배웠다.

자료형, 출력문, 반복문, 조건문, 중요 자료구조(list, dictionary) 를 통해 데이터에 접근할 수 있는 방법들을 익힌 후,

anaconda 와 jupyter notebook 을 사용하여 간단한 크롤링을 통해 실제 데이터에서 원하는 결과를 확인해 볼 수 있었다.

 

📁 목차

1. Python 크롤링
2. float 형 덧셈
3. sequence 형
4. 출력문
5. list와 반복문
6. Dictionary
7. 스타벅스 데이터 다루기 1 : 서울시 스타벅스 정보 크롤링
8. 스타벅스 데이터 다루기 2 : 서울시 스타벅스 리저브 가게 개수 구하기
9. 스타벅스 데이터 다루기 3 : 서울시 스타벅스 자치구별 매장 개수 구하기
10. 스타벅스 데이터 다루기 4 : 서울시 스타벅스 오픈 요일 개수 구하기

 

 

---

 

 

 

들어가며

 

파이썬의 언어 유래와 역사를 들을 수 있었고, 데이터 분석을 위해 갖추어야 할 능력에 "코딩, 통계 및 수학, 도메인 지식" 이 세가지가 중요하다.

(특히 도메인 지식을 많이 요구한다고 한다.)

 

 

 

 

 

Python 크롤링

 

import requests 
import pandas as pd
url = "https://finance.naver.com/item/sise_day.naver?code=005930&page={}"
head = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/110.0.0.0 Safari/537.36"}
df=pd.concat([pd.read_html(requests.get(url.format(x), headers=head).text)[0].dropna() for x in range(1,5)])

 

네이버 주식 페이지에서 크롤링을 통해 데이터를 가져오고 이를 pandas 를 사용한 데이터 프레임으로 만들 수 있다.

 

df.iloc[::-1] # 데이터 역순으로 바꾸기

 

또한, 이렇게 작성하면 데이터가 역순으로 바뀌게 된다.

 

아래 시퀀스형 데이터를 정리할 때 한 번 더 나오는 방식이다.

(자주 사용하는 방법이니 알아두자.)

 

 

 

 

float 형 덧셈

 

0.1 + 0.2

 

이 수식을 파이썬을 통해 계산하면 0.3 이 아닌, 0.3000000000004 로 출력된다.

 

파이썬에서는 실수를 부동소수점 방식으로 표현하기 때문이다. (즉, 비트와 연관이 있다.)

 

 

 

 

sequence 형

 

index 를 통해 데이터에 접근하고, 주로 아래와 같은 표현 방법을 따른다.

 

temp[start:end:step]

 

temp 변수에서 (start) index 부터 (end - 1) index 까지를 의미한다.

여기서, step은 말 그대로 '몇칸 씩 띄울건지' 정하는 역할을 한다.

 

특히, [::-1] 표현은 역순으로 표현할 때 자주쓰이므로 꼭 알아두자.

 

그 밖에도, * 로 문자열을 반복할 수 있고, + 는 문자열끼리 합칠 수 있다.

 

 

 

 

출력문

 

print(text.format(""))

 

format 함수를 통해 동적 맵핑이 가능하다.

 

 

 

 

List 와 반복문 

 

text = "저는 {} 입니다."
class_a = ["김김김", "이이이", "홍홍홍", "박박박", "임임임"]

 

for name in class_a:
    print(text.format(name))

 

class_a는 리스트로, 반복문에서 적용하게 되면 앞에서 부터 하나씩 뽑아 name 이라는 변수에 넣게 된다.

format 함수에 의해 text의 { } 안에 앞에서 저장된 name 이 들어가게 된다.

 

 

 

여기서, format 사용법에 대해 더 알아볼 수 있다.

# 파이썬 3.x 출력 방식 
print("저는 {} 입니다. ".format(name))

# 파이썬 3.6 f-strings 
print(f"저는 {name} 입니다.")

 

f-strings 방식을 통해 좀 더 직관적으로 이해하기 쉽게 표현할 수 있다.

 

 

 

 

Dictionary

 

중괄호를 사용하여 key 및 value로 구성되어 있으며, 주로 json 파일이 딕셔너리 구조로 이루어져있다.

 

dict_a = {"스타벅스" : "커피"} # {key : value}
dict_a["스타벅스"] # 커피

 

key 값을 통해 value 값을 얻을 수 있다.

 

 

 

 

 

스타벅스 데이터 다루기  1 : 서울시 스타벅스 정보 크롤링

 

 

import requests
url = "https://www.starbucks.co.kr/store/getStore.do?r=GKYHQKU7D3"
payload = {"in_biz_cds" : "0",
"in_scodes" : "0",
"ins_lat" : "37.566535",
"ins_lng" : "126.9779692",
"search_text" : "",
"p_sido_cd" : "01",
"p_gugun_cd" : "",
"in_distance" : "0",
"in_biz_cd" : "",
"isError" : "true",
"searchType" : "C",
"set_date" : "",
"all_store" : "0",
"T03" : "0",
"T01" : "0",
"T27" : "0",
"T12" : "0",
"T09" : "0",
"T30" : "0",
"T05" : "0",
"T22" : "0",
"T21" : "0",
"T10" : "0",
"T36" : "0",
"T43" : "0",
"T48" : "0",
"P10" : "0",
"P50" : "0",
"P20" : "0",
"P60" : "0",
"P30" : "0",
"P70" : "0",
"P40" : "0",
"P80" : "0",
"whcroad_yn" : "0",
"P90" : "0",
"new_bool" : "0",
"iend" : "1000",
"rndCod" : "IZVHHSIFWC",}
r =  requests.post(url, data=payload)
star = r.json()['list']

 

스타벅스 홈페이지에서 서울시에 있는 스타벅스 매장 데이터를 크롤링한다.

 

 

스타벅스 데이터 다루기  2 : 서울시 스타벅스 리저브 가게 개수 구하기

 

cnt = 0
for store in star:
    if store['s_name'][-1] == "R":
        cnt = cnt + 1
        print(store['s_name'])

 

 

서울시 스타벅스 리저브 가게의 개수를 구할 수 있다.

 

 

스타벅스 데이터 다루기  3 : 서울시 스타벅스 자치구별 매장 개수 구하기 

 

dict_a = {}
for store in star:
    gu = store['gugun_name']
    if gu in dict_a:
        dict_a[gu] += 1
    else:
        dict_a[gu] = 1

 

 

서울시의 자치구별 매장 개수를 구할 수 있다.

 

 

스타벅스 데이터 다루기  4 : 서울시 스타벅스 오픈 요일 개수 구하기 

 

master = dict(zip(range(0,7), "월화수목금토일"))
for x in range(100, 1001, 100):
    date_ = datetime.datetime.strptime("20230213", "%Y%m%d") + datetime.timedelta(days=x)
    date_str = str(datetime.datetime.now() + datetime.timedelta(days=x))
    print(date_str.split()[0], master[date_.weekday()])

 

서울시 스타벅스 오픈 날짜를 통해, 가장 오픈이 많은 요일을 구할 수 있다.