meta tag 크로링 (feat. python)

다음과 같은 meta 테그의 특정 속성만 추출하고 싶은 경우가 있다

source_id = '25441767'
# source_id = '1000623206'
rq = requests.get(new_url + source_id, headers=rnd_header)
souprq = BeautifulSoup(rq.content, 'html.parser')
souprq.select('meta')

poi = souprq.select_one('meta[property="og:title"]')['content']
address = souprq.select_one('meta[property="og:description"]')['content']
# '당신을 좋은 곳으로 안내 할 지도' == None
print(poi)
print(address)

원하는 정보 추출 완료~!

 

참조: 

[python] 메타태그 크롤링 하는 법 (tistory.com)

[python] 메타태그 크롤링 하는 법

 

추가적으로 참조하면 좋을 사이트 (카카오맵 사용시)

- https://wooiljeong.github.io/python/kakao_local_api/

- https://github.com/WooilJeong/PyKakao

- https://wooiljeong.github.io/PyKakao/PyKakao.html#module-PyKakao.api

-