[python] 웹 스크래핑을 활용한 주식 관련 뉴스 수집

12 Dec 2023

python

주식 투자자들은 시장 동향을 파악하기 위해 종종 주식 관련 뉴스를 찾아보곤 합니다. 이번 글에서는 웹 스크래핑을 활용하여 특정 주식 관련 뉴스를 수집하는 방법에 대해 알아보겠습니다.

1. 필요한 라이브러리 설치

웹 스크래핑을 위해 다음의 파이썬 라이브러리가 필요합니다.

pip install requests beautifulsoup4

2. 웹 스크래핑을 통한 데이터 수집

우선, requests를 사용하여 웹 페이지의 HTML을 가져옵니다.

import requests
from bs4 import BeautifulSoup

url = '주식 관련 뉴스가 있는 웹 페이지 주소'
response = requests.get(url)
html = response.text

그런 다음, BeautifulSoup를 사용하여 HTML에서 필요한 정보를 추출합니다.

soup = BeautifulSoup(html, 'html.parser')
news_list = soup.find_all('주요 뉴스가 있는 HTML 태그')
for news in news_list:
    title = news.find('뉴스 제목이 있는 HTML 태그').text
    link = news.find('뉴스 링크가 있는 HTML 태그')['href']
    print(title, link)

3. 데이터 가공 및 저장

수집된 정보를 원하는 형식으로 가공하고 필요에 따라 데이터베이스에 저장하거나 CSV 파일로 저장할 수 있습니다.

이렇게 하여 웹 스크래핑을 통해 주식 관련 뉴스를 수집할 수 있습니다.

참고 문헌:

목차

1. 필요한 라이브러리 설치

2. 웹 스크래핑을 통한 데이터 수집

3. 데이터 가공 및 저장