반응형 파이썬뉴스요약5 파이썬으로 뉴스 크롤링을 해주는 라이브러리 - Newspaper 오늘은 파이썬의 Newspaper의 라이브러리를 한 번 파헤쳐 보려고 합니다. Newspaper는 뭐하는 친구인가요? Newspaper3k: Article scraping & curation — newspaper 0.0.2 documentation Newspaper3k: Article scraping & curation Inspired by requests for its simplicity and powered by lxml for its speed: “Newspaper is an amazing python library for extracting & curating articles.” – tweeted by Kenneth Reitz, Author of requests “Newspap newspaper... 2021. 10. 1. 20:26 파이썬으로 자동 요약하기 5편 - 자동 요약mk.2 오늘은 저번 시간에 이어서 내용 요약 수정편입니다. 제가 만든 코드를 직접 돌려보니 문제가 하나 생겼습니다. 글 정렬은 잘되어있지만 막상 코드를 까보니 하나의 문단 속에 글자만 집어 넣어져 있는 관계로 어쩔 수 없이 손코딩으로 태그들을 넣어 다시 정렬시켜 만들었습니다. import re import feedparser import datetime import json import requests from newspaper import Article from typing import List from textrankr import TextRank #게임 동아 "https://game.donga.com/feeds/rss" #인벤 "http://feeds.feedburner.com/inven" #게임 인사이트.. 2021. 6. 11. 10:48 파이썬으로 기사 요약하기 3편 - 메일 전송 오늘은 저번 시간에 만든 엑셀 파일을 메일에 첨부해 전송해보겠습니다. 저는 지메일, Gmail을 이용해 한 번 보내보도록 하겠습니다. Gmail을 이용하려면 첫번째로 2차 인증설정과 동시에 앱 비밀번호를 생성과 IMAP설정을 해야지 Gmail로 메일을 보낼 수 있습니다. 1. IMAP설정 gmail에 접속한 다음 우측 상단에 있는 톱니바퀴를 눌러 빠른 설정 창을 열어줍니다. 빠른 설정 바로 밑 모든 설정보기를 클릭해 들어가 전달 및 POP/IMAP 메뉴에 들어갑니다. IMAP 사용 안함으로 체크되어있는 것을 IMAP 사용으로 변경 해줍니다. 2. 2차 인증, 앱 비밀번호 설정 구글 계정에 접속합니다. 좌측 메뉴에 있는 보안 - 앱 비밀번호를 클릭합니다. 만약 2단계 인증을 하지 않았다면 2단계 인증을 사.. 2021. 6. 4. 19:34 파이썬으로 기사 요약하기 2편 - 요약 파일 저장 파이썬 한글 요약에 관련된 내용을 구글링으로 찾아보니 이러한 내용들이 나오게 됩니다. Textrankr, Lexrank... 등 여러가지가 나오는데 저는 이 중 Textrankr가 뉴스 요약에는 적합하다고 판단해 Textrankr를 이용해 사용하고 있습니다. List[str]: tokens: List[str] = text.split() return tokens # 리스트 형식으로 저장하는 공간을 만들고 그 공간에 데이터들을 요약한다. mytokenizer: MyTokenizer = MyTokenizer() textrank: TextRank = TextRank(mytokenizer) # 요약한 데이터는 3줄까지 가능하도록 설정하는 변수 k: int = 3 #-------------------- 직접적으로 .. 2021. 6. 2. 23:26 파이썬으로 기사 요약하기 1편 - 기사 요약 오늘부터 파이썬으로 사업 자동화 시키기 프로젝트 첫번째 시간으로 매일 하고 있는 뉴스 기사 요약하는 것을 파이썬을 이용해 자동화 시켜보려고 합니다. 막 구글에 "파이썬 기사 요약", "파이썬 3줄 요약", "파이썬 네이버 기사 요약"과 같이 검색을 해 나오는 내용들이 모두 잘못되었다고 먼저 이야기 하겠습니다. "대체 왜 잘못되었다고 이야기하는거에요?" 현재 gensim에서 Summarize 라이브러리가 없기 떄문에 대다수의 요약하는 코드들은 다 먹통입니다... 저도 이걸 찾는다고 깃허브부터 시작해서 gensim 공홈, summarize를 어디서 하는지 Textrank와 같은 사이트들을 뒤져가면서 찾은 결과라서 그렇습니다 (거의 2시간동안 붙잡고 찾았습니다.) 막상 코드들은 엄청 단순하고 간단한데 그걸 못.. 2021. 5. 31. 23:36 이전 1 다음 반응형
