본문 바로가기
728x90
반응형

전체 글856

12 Best Web Scraping Tools https://www.hdfstutorial.com/blog/best-web-scraping-tools/ 툴 소개 1. Luminati Data Collector 2. ProWebScrapper 3. webscraper.io 4. data-miner.io 5. scrapy.org 6. scraper 7. webhose.io 8. OutWit.com 9. FMiner.com 10. PySpider 11. Apify SDK 12. Parsehub.com 2021. 9. 10.
윈도우즈10 에서 scrapy 설치하기 설치전 warning 메시지가 안뜨게 하려면 python 에 경로가 잡혀 있어야 한다. 나는 그냥 경로를 잡지 않고 직접 들어가서 진행함. scrapy 를 인스톨하기 위해서 comman 를 사용한다. pip install scrapy 이 명령어를 사용하면, 현재 최신 버전을 설치하게 됨.. C:\Python39-32\Scripts>pip install scrapy Collecting scrapy Downloading Scrapy-2.5.0-py2.py3-none-any.whl (254 kB) |████████████████████████████████| 254 kB 1.1 MB/s 설치 체크 (버전체크 포함) >>> import scrapy >>> >>> print(scrapy.__version__) 2.. 2021. 9. 9.
혼자 영어 공부하기 좋은 사이트 20선 어학 연수이후 영어를 사용하는건...말할 기회보다는 문서를 읽는 쪽에 집중되다보니... 가끔 영어 실력이 퇴보하는 느낌이 많이 나서 찾아보았다. 다행히 정리를 잘 해놓은 사이트를 발견해서 퍼온다....매일 영어공부 해야지... 언젠간 코비드19도 사라질테고....열심히 여행 다녀야 하니까...ㅎㅎㅎㅎㅎ 출처 : http://www.ngocity.org/new/bbs/board.php?bo_table=c02&wr_id=18 ======================================================= 혼자 영어공부하기 좋은 사이트 20선 1. VOA News Special English http://www.voanews.com/specialenglish/index.cfm Voice o.. 2021. 9. 8.
지도학습과 비지도학습 지도 학습(supervised learning) 회귀(regression) : 입력 변수 X에 대해서 연속형 출력 변수 Y를 예측 분류(classification) : 입력 변수 X에 대해서 이산형 출력 변수 Y(class)를 예측 함수f가 회귀모형 -> Y는 연속형 변수 함수f가 분류모형 -> Y는 이산형 변수(클래스) 지도 : Data가 이럴땐 결과는 요렇게 되...라는 식으로 컴퓨터에게 가르치는것. 연속형 변수 : 회귀문제라고 함. 실수값을 가진다는 의미. 이산형 변수 : 분류문제... 비지도 학습(unsupervised learning) 출력변수 Y가 존재하지 않고, 입력 변수 X 사이의 관계를 알아내는 것 군집 분석 : 군집화 개념..패거리들끼리 묶는개념...음...똥은 똥끼리 묵는것?? 위 그.. 2021. 7. 7.
728x90
반응형