분류 전체보기(45)
-
MySQL
Start, exit mysql -u root -p # mysql 실행, -u 유저명으로 root, 비밀번호 사용 mysql -u root# root 사용자, 비밀번호 미사용 -> access denied mysql -u abc# abc 사용자, 비밀번호 미사용 exit # 종료 Password 설정 # database 로그인후 SET PASSWORD = PASSWORD('1234') WHERE USER = 'root'; # 비밀번호 설정 UPDATE USER SET PASSWORD = PASSWORD('1234') WHERE USER = 'root'; # 비밀번호 변경 flush privileges;# 권한 cache flush # 비밀번호 잊어버린경우 mysqld --skip-grant # 인증없이 ..
2022.09.28 -
Selenium
웹페이지의 구분 동적 : HTML이 갱신됨(SNS), request후 렌더링시간이 걸린다 정적 : HTML(일반적인 웹사이트)이 고정되어있음 동적 웹사이트의 동작방식 동기처리 : 랜더링을 마친후 데이터를 처리함 비동기처리 : 랜더링이 마칠때까지 기다리지 않고 즉시 데이터 처리를 시작하는 방식으로, 랜더링을 마치기전에 웹스크래핑을 하는경우 일부 데이터를 잃어버릴수 있다. * 비동기처리방식은 랜더링 시간을 기다릴 필요가 없이 데이터 처리가 이루어지므로 일반적으로는 효율적인 방식이다. 다만, 웹 스크래핑을 하는경우에는 비동기처리 방식에 대해서는 추가적인 조치가 필요하다 동적 웹사이트 스크래핑 1. 비동기 처리방식에서 랜더링을 마친후 데이터처리를 하기위해 데이터 처리전에 적당히 시간을 지연시킨다 2. 웹브라우저..
2022.09.28 -
Deep Domain Adaption
개요 Image Classification Task를 예로 들때, train 과정에서 사용되는 dataset과 operation 에서 사용되는 dataset의 domaim의 분포가 달라지면서 domain shift 가 발생한다 (DSLR 이미지로 학습후, 만화 그림으로 예측) 이 경우 성능이 저하될수 있다 여러 도메인의 dataset을 수집하여 학습하기는 실제로 어렵기에 이를 해결하는 방법론이 등장하게 되었다 기존의 general 한 모델에서 특정 domain에 맞추어 transfer learning이 한가지 방법이 될수 있다 주요 분류 1. Source-domain, Target-domain 2. Transfer Leaning의 분류 task 같음 task 다름 domain 같음 Usual Learni..
2022.09.27 -
BeautifulSoup4
DOM(Document Object Model) 브라우저는 HTML을 파싱해서 DOM을 만들고 이를 출력한다 HTML 문서를 브라우저가 렌더링엔진으로 웹 문서를 로드하고 tree 구조로 만드는 파싱을 수행하고 DOM 을 생성한다 head, body, 등 각 노드 object들을 tree 구조로 만든것을 DOM이라 한다 DOM을 이용하면 보다 쉽게 HTML manipulate이 가능하다 파이썬으로 HTML을 분석할때는 HTML Parser가 필요하다 https://wit.nts-corp.com/2019/02/14/5522 DOM은 정확히 무엇일까? | WIT블로그 최근 잘못 이해하고 있었던 DOM에 대해 정확한 개념을 정리해 보고자 What, exactly, is the DOM? 문서를 번역해 보았습니다...
2022.09.27 -
가우시안 프로세스(GPR)
모수, 비모수 추정(Parametric, Non-Parametric Regression) random variable의 parameter를 사용하는지로 구분 Parametric - curve fitting, linear regression point를 추정하게 된다 Non-Parametric - GPR(gaussian process regression) , filtering, moving average interval, area, volume 등 구간을 추정하게 된다 다변량 정규분포 두 random variable이 각각 normal distribution을 따를때, multi variable normal distribution은 아래 식으로 표현한다 Gaussian Process m(t)를 무한한 벡터..
2022.09.26 -
HTTP
HTTP request GET / HTTP 1.1 HOST: www.programmers.com User-Agent : Mozilla / 5.0 request - response 구조(client - server) HTTP/1.1 200 OK HEAD, BODY 구조 response state 200, 300, 404, 500 ... https://developer.mozilla.org/ko/docs/Web/HTTP/Status HTTP 상태 코드 - HTTP | MDN HTTP 응답 상태 코드는 특정 HTTP 요청이 성공적으로 완료되었는지 알려줍니다. 응답은 5개의 그룹으로 나누어집니다: 정보를 제공하는 응답, 성공적인 응답, 리다이렉트, 클라이언트 에러, 그리고 developer.mozilla.org..
2022.09.26