본문 바로가기

728x90

문돌이 존버/코딩연습

문돌이 존버/코딩연습 2021. 9. 30.
git 기본 지식 쌓기(3) 최근 git에서는 master라는 브랜치 이름 대신 main이라는 이름을 사용합니다. master가 노예를 연상시킨다는 이유로 이름을 바꾼 것인데요. 따라서 이전에 만든 레퍼지토리라면 master로 표시되고, 최근에 만든 것이라면 main이라고 표시될 것입니다. 만약 깃허브 상에서 보이는 이름과 git bash에서 보이는 이름이 다르다면 이름을 통일해주어야 합니다. 깃허브 상에서 바꾸려면 Settings 메뉴를 누르고 Branches 탭에서 이름을 수정하면 됩니다. git bash에서 바꾸려면 아래 명령어를 실행하면 됩니다. git branch -m master main git fetch origin git branch -u origin/main main git push나 pull을 할 때 아래와 같은 ..
문돌이 존버/코딩연습 2021. 3. 12.
파이썬 정규표현식 연습 문제 풀이 (1) 문제 소스는 여기에서 참고했습니다. 1. 날짜 표현 탐지하기 DD/MM/YY 형태로 작성된 날짜를 탐지하는 정규표현식을 작성해라 day는 01~31일, month는 01~12월, year은 1000~2999년까지 있다고 가정한다 1, 2, 3 등 숫자 1개의 경우 앞에 0이 붙는다 문제에 나온 것처럼 각종 조건을 대괄호 [] 와 | 를 통해 or 관계를 표시해줬습니다. 2. 강력한 비밀번호 탐지하기 비밀번호 강력한지 확인해라 강력한 기준은 최소 길이가 8 이상이고, 대문자와 소문자를 포함해야 하며, 적어도 하나의 숫자가 있어야 한다 대문자 및 소문자는 모두 영어 기준이다 먼저, 전방탐색 개념을 이용했는데, 이는 조건을 만족하는 것이 있는지 확인하는 과정입니다. 전방탐색 구문운 ?= 로 시작하고 등호 다음..
문돌이 존버/코딩연습 2021. 3. 12.
파이썬 정규표현식(regexp) [], ^, |, 기호(+, ?, ., *) 유명한 스탠포드 대학의 Jurafsky 교수가 제공하는 Regular Expressions PPT를 사용해 첨부 자료를 작성했습니다. 큰 괄호 [] 안에 있는 문자가 패턴이 된다. 아래 예시를 살펴보자. [wW]: 소문자 w 및 대문자 W라면 매치 (or의 관계) [123456789]: 1~9 중 하나의 숫자 (주의) [wW]의 경우, Wwbook에서 "wbook"에만 매치된다. 즉 w와 W 중 하나에만 해당되는 것이다. 아래 예시를 참고하자. [] 안에 모든 문자를 일일이 적어주기는 귀찮기에 Range를 사용해도 된다. 여전히 주의할 점은 or의 관계라는 것이다. 두 번째 [a-z]의 경우, 예시 문장이 모두 소문자로 이루어져 있지만 "m"만 매치되었다. [A-Z]: 영어 대문자 [a-z]: 영어 소문..
문돌이 존버/코딩연습 2021. 3. 8.
파이썬 selenium을 이용한 댓글 크롤링, feat. 네이버 tv 크롤링은 안하다 보면 계속 잊어버리는 것 같더군요... 복습 차원에서 연습을 해보았고, 코드를 공유해보려고 합니다. 그전에 selenium에 대해서 다시 한 번 살펴봤고, 함수들 역시 계속 잊어버려 함수(메서드)들을 아래와 같이 정리해봤는데요. (2023.09.04 수정) 셀레니움 버전이 업그레이드 되면서 메서드 방식에도 변화가 생겼습니다. 일단, 아래 메서드들은 이제 더 이상 사용할 수가 없습니다. 조건을 만족하는 모든 elements 리턴 조건을 만족하는 첫 번째 element 리턴 driver.find_elements_by_css_selector driver.find_element_by_css_selector driver.find_elements_by_class_name driver.find_ele..
문돌이 존버/코딩연습 2021. 3. 8.
파이썬 크롤링 requests vs urllib.request 차이는? 오늘은 파이썬 크롤링을 하면서 궁금해하셨을 request와 urllib.request의 차이에 대해 말해보겠습니다. 일단 필요한 모듈을 불러옵니다. import requests import urllib.request import re from bs4 import BeautifulSoup as bs 1. requests 데이터를 보낼 때 딕셔너리 형태로 보낸다 없는 페이지를 요청해도 에러를 띄우지 않는다 url = 'https://newsstand.naver.com/?list=&pcode=011' req = requests.get(url) print('url을 get으로 받아온 형태는: ', req) print('#' * 20) html = req.text print('get으로 받아온 후의 문자열만 추출..
문돌이 존버/코딩연습 2021. 3. 3.
AI가 예측하는 미스트롯2 진선미는 누구? 이번에 소요 팀원들과 간단하게 재밌는 프로젝트를 진행 중인데요. 바로 트로트 경연 프로그램에 참여한 가수들의 "진선미"를 예측하는 것입니다. 요즘 트로트 열풍이 불고 남녀노소 누구나 즐기는 프로그램에서 AI가 진선미를 예측해보면 좀 더 흥미를 주지 않을까 생각했습니다. 지금까지 트로트 경연 프로그램은 약 8개가 있는 것으로 알고 있으며, 목록은 아래와 같습니다. 프로그램명 방송사 미스터트롯 TV조선 미스트롯1 TV조선 미스트롯2 TV조선 보이스트롯 MBN 트롯신이 떳다 SBS 트로트의 민족 MBC 트롯 전국체전 KBS 트롯파이터 MBN 이 중 미스트롯2와 트롯파이터를 제외한 나머지 프로그램은 이미 종료되었습니다. 그리고 미스트롯2는 바로 내일을 마지막으로 진선미가 발표된답니다. 사실 저희의 프로젝트는 아..
문돌이 존버/코딩연습 2021. 1. 4.
파이토치(pytorch) 텐서 기본 개념 이해하기, feat. Colab 기존에 딥러닝을 배우면서 텐서플로우를 썼었는데요, 이번에 새롭게 파이토치 공부를 시작했습니다. 물론, 텐서플로우도 많이 사용되지만 자연어처리 관련해서 파이토치를 굉장히 많이 사용하는 것 같더라구요. 텐서플로우나 파이토치나 큰 개념은 변하지 않기 때문에 완전히 새롭게 느껴지진 않았습니다. 다만, 이번엔 기초부터 다시 차근차근 복습해보려고 합니다. 파이토치 관련 내용은 사실 제 복습을 위해 작성된 것입니다. 언제든 기본적인 지식이 헷갈릴 때면 참고할 수 있도록 말이죠. 하지만 이는 저 뿐만 아니라 많은 분들께도 도움이 되리라 생각합니다. 해당 코드는 유원준님이 작성하고 계신 위키독스의 PyTorch로 시작하는 딥 러닝 입문을 그대로 참고했습니다. 파이토치 텐서 기본 개념 정리 Google Colaborato..
문돌이 존버/코딩연습 2021. 1. 1.
비전공자 문돌이가 설명해주는 Collaborative Filtering 개념, feat. Andrew Ng Collaborative Filtering 을 사용해야 하는데 기본 개념이 또 헷갈려서 아예 정리를 하기로 결정했습니다. 제가 참고한 내용은 Andrew Ng이 설명하는 Machine Learning 강의이며, 해당 강의는 코세라에서도 무료로 수강할 수 있고, 접근성이 편한 유튜브에도 업로드되어 있습니다. Lecture 16.4 — Recommender Systems | Collaborative Filtering Algorithm — [ Andrew Ng ] - YouTube $x_1$는 어떤 영화가 얼마나 로맨틱한지, $x_2$는 어떤 영화가 얼마나 액션적인지를 나타내는 특성 벡터입니다. 쉽게 말해, $x_1$의 첫 번째 벡터는 "Love at last"라는 영화가 얼마나 로맨틱한지를 숫자로 나타낸 것..
문돌이 존버/코딩연습 2020. 9. 17.
git 기본 지식 쌓기(2) 아래는 원격 저장소에 있는 브랜치를 확인하고 특정 브랜치를 선택하는 일련의 과정입니다. git init git remote add origin "YOUR ADDRESS" git remote update # 모든 브랜치 확인 git checkout -t origin/"BRANCH NAME" # 특정 브랜치 가져오기 원격 저장소에 잘못 업로드된 폴더나 파일을 삭제할 때는 아래 명령어를 사용합니다. git rm -r --cached {폴더 or 파일 이름} 원격 저장소가 아닌 로컬 저장소에 있는 폴더나 파일을 삭제할 경우 아래 명령어를 사용합니다. git rm {폴더 혹은 파일 이름} 이렇게 한 이후에는 git commit -m 및 git push -u 까지 해주면 성공적으로 폴더나 파일이 삭제될 것입니다. ..
문돌이 존버/코딩연습 2020. 7. 18.
파이썬 웹크롤링(web-crwaling) 파헤치기! feat. BeautifulSoup, Selenium 이번에 회사 동료분이 슬랙, 라인웍스, 잔디, 워크플레이스 등 여러 기업용 메신저 블로그 포스트를 정리해야 했는데요. 그 많은 포스트를 수동으로 작업하려고 하니 앞길이 막막해 보이더라구요. 저도 웹크롤링 공부도 할겸 포스트를 긁어주겠다고 말했고, 짧지 않은 시간을 들여 코딩해봤습니다. ㅋ 사이트마다 html 구조가 달라 다소 귀찮았지만... 덕분에 html 공부도 했네요. 긁어와야 할 정보는 날짜, 제목, URL 이었습니다. 저는 Selenium을 쓸 때, find_elements_by_css_selector 과 find_elements_by_xpath를 혼용해서 사용했습니다. 잔디의 경우, 페이지 이동이 아닌 "더보기" 버튼을 클릭하는 구성이었습니다. 즉 더보기를 계속 누르면서 무한 스크롤을 해야 하는..

728x90

티스토리툴바