반응형

Log 264

[데이터 크롤링] 네이버 뉴스 기사 데이터 크롤링 방법 + 자동화

안녕하세요 소신입니다 ! 뉴스기사 분석을 통해 다양한 인사이트를 얻을 수 있습니다. 네이버 뉴스는 다양한 언론사를 포함하고 있기 때문에 주제, 분야별로 나눠 다양한 분석을 진행할 수 있습니다. 그럼 바로 크롤링 스타뜨 1. 패키지 Import 웹 데이터를 주고받기 위한 requests 패키지와 웹 구조를 따라 크롤링 할 수 있게 해주는 BeautifulSoup을 임포트 해줍니다. 2. 네이버 검색을 위한 URL 확인 위에 저렇게 URL 있죠? 저걸 가져옵니다. url_format = 'https://search.naver.com/search.naver?&where=news&query={검색어} &sm=tab_pge&sort=0&photo=0&field=0&reporter_article=&pd=3&ds={..

[Python] 파이썬 파일 생성, 쓰기, 파일 이름 변경, 파일 + 폴더 탐색, 삭제 패키지

안녕하세요 ! 소신입니다. 파이썬 분석을 진행할 때 꽤 많이 쓰는게 다시 찾고 그러면 귀찮은게 많더라구요 데이터 수집을 하면서 바로바로 원하는 파일에 저장하고, 특정 확장자명을 가지는 파일이나 폴더를 탐색하고, 수많은 파일의 이름을 동시에 변경, 삭제하는 것을 패키지로 모아봤습니다. github.com/svstar94/SDAU svstar94/SDAU JJ Data Analysis Notes in Github (Package). Contribute to svstar94/SDAU development by creating an account on GitHub. github.com 사용방법은 ipynb를 참고하시면 되고 FileManager.py를 다운받아서 import해주시면 됩니다. ㅁ 파일 생성, 쓰기..

[프로젝트 중심 데이터 분석 강좌 - Python 기초] 2. 파이썬 연산, 자료형

안녕하세요 소신입니다. 데이터 분석을 위한 파이썬 기초입니다. 파이썬을 다루기 위한 기본 문법을 살펴보겠습니다. 기본 문법은 외우고, 이해해야 하는 부분입니다. ㅁ 산술연산 ㅇ 사칙연산 파이썬에서 활용가능한 사칙연산은 다음과 같습니다. 구분 예제 결과 덧셈 1 + 2 3 뺄셈 1 - 2 -1 곱셈 5 * 2 10 나눗셈 5 / 2 2.5 나눗셈 (몫) 5 // 2 2 나눗셈 (나머지) 9 % 2 1 제곱 2 ** 3 8 괄호 (우선순위) (2 + 3) * 2 10 ㅇ 자료형 type(값) - 자료의 형태를 확인하는 함수 type(2) # 결과 : int type(10.5) # 결과 : float - 자료형 int - 정수 float - 실수 bool - True or False (논리형) str - 문자..

TOPCIT 공부 방법 + 에센스 Ver.3 + 기출문제 + 공식 무료 온라인 강의

안녕하세요! 소신입니다. 이번에 멀티캠퍼스에서 혁신성장 청년인재양성 프로젝트로 자연어처리과정을 들으면서 TOPCIT 시험을 치뤘습니다. 정기시험이 아니라 특별시험이라 인원수가 적어 400점으로 3수준 턱걸이인데도 상위 10% 안에 들던.. ※ 에센스, 샘플문제 다운로드 시 FLASH PLAYER가 필요합니다 !!! ㅁ Topcit Essence Ver. 3 다운로드 URL topcit.or.kr/edubox/essence/topcitEssence.do TOPCIT topcit.or.kr 인쇄하기 눌러서 PDF로 저장하시면 편하게 보실 수 있습니다. 좀 오래걸리긴하지만 기다리면 됩니다. 단지 페이지가 짤릴 수 있기 때문에 반으로 or 더 잘게 쪼개서 인쇄하시면 됩니다. 나중에 구글에 PDF 합치기로 하나로..

[프로젝트 중심 데이터 분석 강좌 - Python 기초] 1. 파이썬 설치하기

안녕하세요 소신입니다. 데이터 분석을 위한 Python 기초편입니다. 처음은 아나콘다를 설치하고 환경을 설정하는것부터 시작하겠습니다. ㅁ 아나콘다 설치 Anaconda | Individual Edition Anaconda's open-source Individual Edition is the easiest way to perform Python/R data science and machine learning on a single machine. www.anaconda.com 파이썬 기본 설정과 분석 기본 패키지를 받기 위해 아나콘다를 설치합니다. Download 버튼을 클릭해줍니다. 각자의 환경에 맞게 설치해주시면 되는데 글을 작성하는 11월 14일 기준 최신버전은 3.8 버전입니다. ㅁ 아나콘다 설치 ..

2020 유통관리사 2급 합격 ! Only 기출, 핵심요약 공유, No 교재, No 인강

안녕하세요 소신입니다 ! 11월 1일에 유통관리사 20년 3회 시험을 무사히 마쳤습니다 ! 가답안 채점 결과 67.75로 간신히 합격했네요. (유통물류일반 72 상권분석 60 유통마케팅 64 유통정보 75) 작성자 정보 (2020.11.1 기준) 산업공학 전공 (생산관리 물류관리) - 유통관련 지식 전무 CPIM Part. 1 취득, Part. 2 공부 중 (11월 14일 시험) 물류관리사 취득 (물류관리사도 딱히 도움되는건 아닌데 위에 내용들은 거의 도움안됌 오히려 헷갈리게 만듬 ㅋㅋㅋㅋ) 데이터 분석 공부 中 (인공지능, 빅데이터 등등) TOPCIT 공부 (2주) ADsP 공부 中 밑에는 생각보다 기출 풀 때 유통정보에 도움이 됐습니다. (본시험에서는 성적보니까 딱히? 전자상거래 관련 문제가 많이나왔..

국가전문자격 물류관리사 합격, 공부법, 난이도 후기

안녕하세요 ! 소신입니다. 18일날 물류관리사 시험을 보고 25일날 CPIM 시험이 바로 있어서 후기가 늦었습니다. 물류관리사(CPL:Certified Professional Logistician) ㅇ 시험 후기 ㅁ 다음 시험이 언제더라.. 아 맞다 1년에 한번있지.. ㅁ 법규 = FxxK GYU ㅁ 여의도에서 봤는데 앞에 한강이 보였습니다. 결론 = 시험 문제 난이도 상당하다. 시험끝나고 가채점 전까지 패닉와서 한강 수온체크하고 뛰어들까 생각함. 시험시간 1교시 : 9:30 ~ 11:30 (물류관리론, 화물운송론, 국제물류론) 2교시 : 12:00 ~ 13:20 (보관하역론, 물류관련법규) 원래 아침, 점심을 잘 안먹기도 하고 시험이 오전에 있을때는 밥 안먹는 타입이라 공복으로 1시까지 시험봤음 (시험..

CPIM Part. 1 합격, 공부법, 복기, 피어슨뷰 자택시험, 공부자료 공유

안녕하세요 소신입니다 ! CPIM Part. 1 합격했습니다.  ㅇ 시험 후기ㅁ 이걸 이렇게 낸다고? 개x끼가ㅁ 음..이건 아니고.. 이것도 아니고.. 하면 문제별로 보기 2개씩 남아있음 개빡침ㅁ 점점 늘어나는 Flagㅁ 결과만 봐선 50%의 확률로 잘 찍은 것 같음ㅁ 아 그리고 계산문제 많이나온다 했던것 같은데 개념문제만 계속나와서 화가 많이났음 ㅇ 공부 방법ㅁ 간단한 자기소개전공 - 산업공학 출신 (생산관리, 물류관리, ERP, SCM 등등 관련 수업 들음)특이사항 - 물류관리사 병행, CPIM 시험 1주일 전 합격 ㅁ 공부했던 방법 : IMM 1회독, 350제, 기출 복기, 최신 기출 (1년 치 정리), Pocket Prep    ㅇ IMM은 전체적으로 공부했던 것 기억살리는 데 사용, 원서를 보면..

반응형