ai-creator

# 웹크롤링이란? wiki # Web의 통신 구조 인터넷 익스플로러나 크롬등을 웹 브라우저라고 한다. 우리가 인터넷을 할때 순서를 생각해보자. 먼저 웹브라우저를 열어서 원하는 주소를 입력한다. 여기서는 www.naver.com을 입력했다고 가정해보자. 위의 홈페이지는 내 컴퓨터에 있는 것이 아니라 홈페이지들을 저장하고 있는 웹서버에서 가지고 온다. 내 컴퓨터가 아닌 멀리 웹 서버에 있는 홈페이지가 과연 어떻게 내 컴퓨터에서 보이는지 간단하게 살펴보자. Step1) 우리가 인터넷을 할때 웹 브라우저를 실행하면 가장 먼저 웹 브라우저는 해당 주소의 홈페이지를 저장하고 있는 웹서버를 찾아가 홈페이지를 달라고 요청한다. Step2) 홈페이지 요청을 받은 웹 서버는 상대방이 원하는 홈페이지 소스 코드를 인터넷을 ..

유투브 영상을 다운로드하고 싶은 이유는 다양할 것이다. 소장하고 싶은 컨텐츠이거나, 유투브 프리미엄에 가입하지 않아도 wifi가 없는 상태에서 영상을 즐기고 싶거나 등등 여러 이유가 있을 것이다. 여기에서는 프로그램으로 영상을 다루기 위한 목적으로 사용하고 있으므로, ffmpeg의 실행파일과 동일한 경로를 사용해서 관리하겠다. 하여, 사전에 "ffmpeg설치(for windows)" 를 한다. Step 1) youtube-dl 다운로드 - url : https://yt-dl.org/latest/youtube-dl.exe - ffmpeg-4.2.2-win64-static\bin 에 복사 ** 환경변수 설정을 해 둔 상태이므로, 이곳에서 관리하도록 하겠다. Step2) 정상동작 확인 다운받고자 하는 yout..

FFMPEG이 무엇인지는 FFMPEG 위키백과 를 통해서 확인하고, 바로 설치를 해보자! step1 ffmpeg 다운로드 step2 환경 변수 설정 step3 재부팅 step4 정상동작 확인 Step1) FFMPEG 다운로드 접속 url : https://www.ffmpeg.org/download.html#build-windows 윈도우 용으로 설치 할 것이므로, [윈도우] 버튼 클릭 > [Windows builds by Zeranoe] 를 클릭하면 아래와 같은 화면으로 이동한다. - Version : X.X.X로 표현되어 있는 안정화된 버전을 클릭한다. - Architecture : 64bit인지 / 32bit인지 확인하여 클릭한다. - Linking : 단순히 ffmpeg 실행 목적이여서 "stati..

참 바쁜 세상에 살고 있습니다. 정보는 넘쳐나고 시간은 없다는게 문제지요. 모든 것을 다 읽고 보지 않더라도 중요한 내용만 요약해서 정리해주는 봇이 있었으면 참~ 좋겠습니다. 손석희 앵커의 뉴스 브리핑을 요약해겠습니다. 2019년 연말을 뜨겁게 달군 슈가맨 양준일씨의 대한 뉴스브리핑을 사용하고자 합니다. 양준일씨의 등장은 정말 충격적이였고, 경이로웠는데요, 뉴스브리핑에서는 어떻게 설명되었을까요? 어떠세요? 중요한 문장이 잘 요약된 것 같나요? 1) ffmpeg - 설치 방법 > windows : ffmpeg 설치 (for windows) > mac os $ brew install ffmpeg - 설치 이유 : ETRI OpenAPI의 경우 제약사항이 있습니다. > 샘플링 레이트 16kHz, mono ch..

국민대 특강 이후에 직접적인 feedback을 받지 못해서 조금 아쉬웠습니다. 필요가 채워졌는지, 더 궁금한 사항은 없었는지 등등 feedback을 마구마구 받고 싶은데 말이죠~ 제가 좀......;; 걱정인형이라 특강 전/후에 풀리지 않는 고민들을 많이 하거든요 ㅎㅎㅎ 그러던 와중에 어머나!!! 제 강의를 들으셨던 분께서 강연초청 가능하냐고 문의를 하셨답니다!!! 위의 행사는 한학년을 단위로 강연(25분 정도) 후 질의응답으로 마무리되는 콘서트입니다. [빅데이터 전문가]의 직업군으로 설명이 필요한데, 직업군에 대한 소개도 있으면 좋겠지만 주 목적은 진로 선택에 있어 어려운 점 및 문제해결 등을 이야기 하길 원합니다. 따라서, 경험이 많고 경력이 어느 정도 있으신 분이 본인의 직업 선택에 있어서 어려웠던..

국민대에서 감사하게도 특강 요청이 왔습니다. 주제는 빅데이터 분석 기법 및 적용 사례에 대한 내용을 담아달라고 하셨구요~ 특강일정은 2019년 10월 05일, 10월 19일 이렇게 2주간에 걸쳐서 진행되었습니다. 강의를 준비하기 앞서 어떤 부분을 전달 드려야 좋을지 고민을 많이 했습니다. - 빅데이터의 두려움을 없앨 수 있도록 우리 생활 속에 사용되고 있는(=인식하지 못하는) 분석 이야기를 들려주는게 좋을까? - 빅데이터와 인공지능 사례들과 예상 문제점들에 대해서 말씀드릴까? - 학교에서 배운 빅데이터와 회사에서 바라보는 빅데이터의 인식차이를 말씀드릴까? 등등 어떤 내용들을 기대하고 계실지, 어떻게 전달하면 좋을지 말이지요. 첫 시간에는 우리 생활 속에 사용되고 있는 빅데이터로 친숙하게 받아드릴 수 있는..

2020년 4월부터 kakao developers 사이트가 전면 개편되었습니다. 기존에 access token을 제공해주었는데요, 현재는 인증을 거쳐 code / access_token / refresh token 을 발급받도록 변경되었습니다. 또한 기존 애플리케이션이 있더라도 애플리케이션을 새로 만드는 것을 권장 드립니다. ** 개편 마이그레이션으로 인한 호환성 문제가 있네요.^^;; # 애플리케이션 새로 만들기 및 권한 설정 (더보기 클릭) 더보기 [애플리케이션이 없는 경우] 1) 애플리케이션 추가하기 ** 사용중이던 애플리케이션 있다면, 2)로 이동합니다 2) 동의 항목 표시 3) 활성화 설정 및 redirect uri 설정 4) 플랫폼 등록 (** 도메인 순서 중요!) > 참고 : 인증토큰 받기 ..

https://youtu.be/rNGmYm365hA # 기능 - 박수 - 음악 - 숫자 - 언어의 변화 (영어 + 한글) - 두 화자의 대화 # 정확도 # 두 화자의 대화 https://youtu.be/rNGmYm365hA?t=335 원장님 : 이게 무스가 두가지 종류가 있고, 젤이 두가지 종류가 있고, 무스제품으로 좀더 스타일링 하기 편하게 머리 상태를 만진(만든?) 다음에 고정은 스프레이로 하고 있어요. 서준 : 그러니까 젖은 상태에서 무스(를?) 바르는 건가요? 잡음과 음악이 많고, 소리가 명확하게 들리지 않아서 내용을 파악하기에는 무리가 없지만, 받아적기를 할기에는 쉽지 않았습니다. 그럼, # 아나운서의 발음은 어떨까요? 링크 : 손석희 앵커 마지막 브리핑 훨씬 결과가 좋네요^^b

python프로그램을 통해서 네이버 자동 로그인을 수행하고자 합니다. 네이버 로그인의 경우, 다양한 웹사이트에서 연동하여 사용하고 있죠? 그러니, 네이버 자동 로그인 프로그램을 만들어 놓으면, 네이버 계정 연동을 해 놓은 사이트들 모두 사용가능하다는 의미입니다^^ ㅁ 라이브러리 설치 $ pip install selenium $ pip install pyperclip ㅁ 크롬 웹 드라이버 설치 다운로드 우리가 개발한 파이썬 크롤링 소프트웨어에서 크롬(chrome)브라우저의 기능을 이용하도록 하기 위해서 웹드라이버(web driver)를 설치해야 합니다. > windows 더보기 1) 크롬 버전을 확인 합니다. 2) 크롬 버전에 맞는 웹드라이버를 다운로드 합니다. > 다운로드 URL : http://chro..

> 부동산 매매데이터를 KB부동산 사이트 를 통해서 활용하는 경우가 많습니다. 그러나, 일일이 아파트를 검색하고, 매매거래가를 다운로드 받아서 활용해야 하는 불편함이 있습니다. '크롤링을 통해서 프로그램화 하면 되지 않아?' 라고 생각할 수 있지만, KB부동산의 경우 크롤링에 필요한 html 코드를 볼 수 없게 막아두었답니다.ㅠㅠ 다행히도 공공데이터(www.data.go.kr)에서는 OpenAPI를 제공해주고 있습니다. 이를 이용하여 부동산 실거래 데이터를 수집해보시죠! > 공공데이터 가입 (www.data.go.kr) 사용할 API: 공공데이터 포털(국토교통부 - 아파트매매 실거래데이터) 언어 & 환경(IDE) : Python3.6 & Jupter notebook > Step 1 아파트매매 실거래 데이..