본문으로 건너뛰기

문과생도AI 숙제(네이버크롤링100개)

레오

2024.06.23

문과생도AI 숙제(네이버크롤링100개) 본문 이미지

#문과생도AI#2주차

정기님이 제공한 예제문을 그대로 입력해서 진행했습니다.


다음과 같이 코딩이 나왔습니다


한번에 동작이 될리 없다고 생각하긴 했지만 역시 아무뉴스도 크롤링안됩니다.

다시질문을 던집니다.


저는 엣지를 사용하기 떄문에 마우스오른쪽 클릭하여 검사항목을 사용합니다.


이걸 사용했는데 , 좀더 탐색을 해보니 이것도 될 것 같더군요. 이번에는 HTML 보기를 눌러서 다시 코딩을 시켜봅니다.


다시 지피티가 제공한 코딩으로 해보니 잘됩니다.

그런데 csv파일이 어디있는지 몰라서 물어봤습니다.


이제 잘 동작합니다. csv파일에 한글이 깨집니다.


다시요청합니다.


![[Pasted image 20240623093922.png]]

잘동작하는데 일주일이 지난것도 나와서 2일전까지만 뉴스만 보도록 정리해봅니다.


답변이 2일전만 한다고 나오네요. 다시 요청합니다.

저의 의도와 다르게 답변을 해서 다시 요청합니다.

코드를 보니 분, 시간단위로 반영이 잘되었습니다.

실행해보니 잘 동작합니다.


전체코딩입니다.


Insight

1. element / selector/ X-path에 대한 이해와 개발자도구를 사용해 정확한 위치를 찾아내는 것이 중요함

2. 한글깨짐은 자주발생하지만 쉽게 해결된다. utf-8-sig 를 사용함

3. csv파일처럼 저장위치는 지정을 해놓는것이 좋음

2

함께 이야기해요 2

로그인하고 댓글을 남겨 주세요

레
레오2024.06.23

코딩은 잘모르지만, 정기님의 꼭알아야 할 뽀인트 강좌 덕분입니😊다~

박정기 프로필 이미지
박정기2024.06.23

우와 @leo 레오님!

엄청나세요!! 1을 알려드리면 10을 하시는군요! 특히 2일전 신문기사만 가져오는 부분이 엄청 좋았습니다!!

Leo님만의 과제에서 말하지 않았던 약간의 추가적인 로직!


1. element / selector/ X-path에 대한 이해와 개발자도구를 사용해 정확한 위치를 찾아내는 것이 중요함

→ 맞습니다! 정확한 위치를 찾는게 매우 중요합니다!

2. 한글깨짐은 자주발생하지만 쉽게 해결된다. utf-8-sig 를 사용함

→ 한글깨짐도 정말 잘 해결하셨어요!

3. csv파일처럼 저장위치는 지정을 해놓는것이 좋음

→ 지정 안하면 파이썬 파일 .py 위치에 저장되니까요!
그리고 파일 저장하는 이름도 저장한 시점으로 저장하도록 해줘 라고하면
중복되는 이름이 안만들어져서 계속 저장을 시킬수도 있어요!

과제 너무 베스트 오브 베스트로 해주셔서 감사드립니다!!

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기