1. API 설계 : 서버가 제공할 기능이 무엇인지 먼저 생각해놓기
- 포스팅 API - 카드 생성 (CREATE)
- 요청 정보: 요청 URL = /memo, 요청 방식 = POST, 요청 데이터 = URL(url_give), comment(comment_give)
- 서버 기능:
- URL의 meta태그 정보를 바탕으로 제목, 설명, 이미지URL 스크래핑
- (제목, 설명, URL, 이미지URL, 코멘트) 정보를 모두 DB에 저장
- 응답 데이터: (JSON 형식) 'result': 'success' -> API 정상적 작동 여부 알림
- 리스팅 API - 저장된 카드 보여주기 (READ)
- 요청 정보: 요청 URL = /memo, 요청 방식 = GET, 요청 데이터 = 없음
- 서버 기능: DB에 저장돼있는 모든 (제목, 설명, URL, 이미지URL, 코멘트) 정보를 가져오기
- 응답 데이터: (JSON 형식) 'articles': 아티클 정보 -> 정보들을 카드로 만들어 붙히기
2. 조각 기능 구현 : API 설계 후, 이 기능이 정상적으로 원하는대로 잘 작동하는지 별도파일에 작은 단위로 구현 테스트
- meta 태그: html head에 들어가는, 우리 눈에 보이는(body) 부분 외에 사이트의 속성을 설명해주는 태그
- 예) 카카오톡 메신저가 url을 받았을때 그 페이지에서 크롤링하여 보여주는 정보들
url만 입력해도 보이는 속성 - 페이지를 만들때 메타태그에 이런 정보들을 잘 담아서, url 공유 할때 잘 나타나도록 만들면 좋음
- 우리는 og:image / og:title / og:description을 크롤링해서 필요한 정보를 나홀로 메모장 페이지에 보여줄 예정
- 별도 파일에서 잘 작동하면 본 파일에 적절히 복사하여 사용
-
import requests from bs4 import BeautifulSoup url = 'https://movie.naver.com/movie/bi/mi/basic.nhn?code=171539' headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'} data = requests.get(url,headers=headers) soup = BeautifulSoup(data.text, 'html.parser') # title = soup.select_one('head > meta:nth-child(9)') -> 출력 시 None # url과 comment는 클라이언트로부터 받아옴 title = soup.select_one('meta[property="og:title"]')['content'] img = soup.select_one('meta[property="og:image"]')['content'] desc = soup.select_one('meta[property="og:description"]')['content']- 파이썬 코드가 html의 메타태그에 접근하는 순서와 우리가 그 페이지의 html에서 보는 메타태그의 순서가 다름
3. 나홀로 메모장
# app.py
from flask import Flask, render_template, jsonify, request
app = Flask(__name__)
import requests
from bs4 import BeautifulSoup
from pymongo import MongoClient
client = MongoClient('localhost', 27017)
db = client.dbsparta
## HTML을 주는 부분
@app.route('/')
def home():
return render_template('index.html')
@app.route('/memo', methods=['GET'])
def listing():
articles = list(db.articles.find({}, {'_id': False}))
return jsonify({'all_articles':articles})
## API 역할을 하는 부분
@app.route('/memo', methods=['POST'])
def saving():
url_receive = request.form['url_give']
comment_receive = request.form['comment_give']
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'}
data = requests.get(url_receive, headers=headers)
soup = BeautifulSoup(data.text, 'html.parser')
title = soup.select_one('meta[property="og:title"]')['content']
img = soup.select_one('meta[property="og:image"]')['content']
desc = soup.select_one('meta[property="og:description"]')['content']
doc = {'title':title, 'img':img, 'desc':desc, 'url':url_receive, 'comment':comment_receive}
db.articles.insert_one(doc)
return jsonify({'msg':'저장 완료'})
if __name__ == '__main__':
app.run('0.0.0.0',port=5000,debug=True)
<!--index.html-->
<!Doctype html>
<html lang="ko">
<head>
<!-- Required meta tags -->
<meta charset="utf-8">
<meta name="viewport" content="width=device-width, initial-scale=1, shrink-to-fit=no">
<!-- Bootstrap CSS -->
<link rel="stylesheet" href="https://maxcdn.bootstrapcdn.com/bootstrap/4.0.0/css/bootstrap.min.css"
integrity="sha384-Gn5384xqQ1aoWXA+058RXPxPg6fy4IWvTNh0E263XmFcJlSAwiGgFAW/dAiS6JXm"
crossorigin="anonymous">
<!-- JS -->
<script src="https://ajax.googleapis.com/ajax/libs/jquery/3.5.1/jquery.min.js"></script>
<script src="https://cdnjs.cloudflare.com/ajax/libs/popper.js/1.12.9/umd/popper.min.js"
integrity="sha384-ApNbgh9B+Y1QKtv3Rn7W3mgPxhU9K/ScQsAP7hUibX39j7fakFPskvXusvfa0b4Q"
crossorigin="anonymous"></script>
<!-- 구글폰트 -->
<link href="https://fonts.googleapis.com/css?family=Stylish&display=swap" rel="stylesheet">
<title>스파르타코딩클럽 | 나홀로 메모장</title>
<!-- style -->
<style type="text/css">
* {
font-family: "Stylish", sans-serif;
}
.wrap {
width: 900px;
margin: auto;
}
.comment {
color: blue;
font-weight: bold;
}
#post-box {
width: 500px;
margin: 20px auto;
padding: 50px;
border: black solid;
border-radius: 5px;
}
</style>
<script>
$(document).ready(function () {
showArticles();
});
function openClose() {
if ($("#post-box").css("display") == "block") {
$("#post-box").hide();
$("#btn-post-box").text("포스팅 박스 열기");
} else {
$("#post-box").show();
$("#btn-post-box").text("포스팅 박스 닫기");
}
}
function postArticle() {
let url = $('#post-url').val()
let comment = $('#post-comment').val()
$.ajax({
type: "POST",
url: "/memo",
data: {url_give:url, comment_give:comment},
success: function (response) { // 성공하면
alert(response["msg"]);
// 페이지 새로고침
window.location.reload()
}
})
}
function showArticles() {
$.ajax({
type: "GET",
url: "/memo",
data: {},
success: function (response) {
let articles = response['all_articles']
for (let i = 0; i < articles.length; i++) {
let title = articles[i]['title']
let img = articles[i]['img']
let desc = articles[i]['desc']
let url = articles[i]['url']
let comment = articles[i]['comment'];
let temp_html = `<div class="card">
<img class="card-img-top"
src="${img}"
alt="Card image cap">
<div class="card-body">
<a target="_blank" href="${url}" class="card-title">${title}</a>
<p class="card-text">${desc}</p>
<p class="card-text comment">${comment}</p>
</div>
</div>`
$('#cards-box').append(temp_html)
}
}
})
}
</script>
</head>
<body>
<div class="wrap">
<div class="jumbotron">
<h1 class="display-4">나홀로 링크 메모장!</h1>
<p class="lead">중요한 링크를 저장해두고, 나중에 볼 수 있는 공간입니다</p>
<hr class="my-4">
<p class="lead">
<button onclick="openClose()" id="btn-post-box" type="button" class="btn btn-primary">포스팅 박스 열기
</button>
</p>
</div>
<div id="post-box" class="form-post" style="display:none">
<div>
<div class="form-group">
<label for="post-url">아티클 URL</label>
<input id="post-url" class="form-control" placeholder="">
</div>
<div class="form-group">
<label for="post-comment">간단 코멘트</label>
<textarea id="post-comment" class="form-control" rows="2"></textarea>
</div>
<button type="button" class="btn btn-primary" onclick="postArticle()">기사저장</button>
</div>
</div>
<div id="cards-box" class="card-columns">
</div>
</div>
</body>
</html>'course > spartacoding' 카테고리의 다른 글
| [웹개발 종합반] 5주차 (1) 무비스타 (0) | 2021.11.05 |
|---|---|
| [웹개발 종합반] 4주차 (4) 4주차 과제 (0) | 2021.11.04 |
| [웹개발 종합반] 4주차 (2) Flask 활용 (0) | 2021.11.03 |
| [웹개발 종합반] 4주차 (1) Flask 기초 (0) | 2021.11.03 |
| [웹개발 종합반] 3주차 (5) 3주차 과제 (0) | 2021.11.02 |
