크롤링 데이터 csv에 저장하기

Pandas를 사용하여 웹 사이트에서 데이터를 긁어내어 DataFrame에 저장한 후에는 to_csv 메서드를 사용하여 데이터를 CSV 파일에 저장할 수 있습니다.

나중에 사용하거나 분석하기 위해 데이터를 저장하려는 경우 유용할 수 있습니다.

다음은 to_csv 메서드를 사용하여 Panda DataFrame을 CSV 파일에 저장하는 방법의 예입니다.

import pandas as pd

# Load data into a DataFrame
df = pd.read_html(url)[0]

# Save the DataFrame to a CSV file
df.to_csv('data.csv', index=False)

728x90

그러면 인덱스 열(있는 경우)을 제외하고 DataFrame의 데이터가 data.csv라는 CSV 파일에 저장됩니다.

필드 간에 사용할 구분 기호 및 파일에 사용할 인코딩과 같은 to_csv 메서드의 동작을 사용자 지정하는 추가 매개 변수를 지정할 수도 있습니다.

데이터가 CSV 파일에 저장되면 read_csv 함수를 사용하여 다시 Panda 데이터 프레임에 로드하거나 다른 도구를 사용하여 데이터를 분석하고 조작할 수 있습니다.

728x90