본문 바로가기

파이썬 크롤링 001 - 구성요소, 구현방법 / 데이터수집 자동화 안녕하세요 ! 오랜만에 정말 오랜만에 잡다한 기술 내용으로 포스팅을 하네요. 이번에 조금 길게 정리해보고 싶은 주제는 크롤링입니다. 크롤링이 꼭 개발자의 영역은 아닌것 같습니다. 누구나 개발할 수 있는 영역이라 생각하고 복잡한 내용은 조금 공부하면 충분히 할 수 있는 부분이라고 생각됩니다. 첫 번째 포스팅은 구현 방법을 정리하는 정도로 마치고 두번째, 세번째 이어가면서 실제로 어떻게 크롤링 프로그램을 구현하는지 더 할 수 있으면 수집한 데이터를 데이터베이스에 저장하고 관리하는 내용까지 정리해보려고 합니다. 이 포스팅을 보고 계시다면 당연히 검색으로 들어오셨을 확률이 매우 높죠. 검색어에는 '크롤링 (crawling)' 이 포함되었을 확률도 매우 높다고 생각됩니다. 따라서 크롤링이 뭐야? 는 넘어가도 되겠.. 더보기
머지 레이서 사전예약 (모바일, 게임, 신작, 미니카, 추억, 업그레이드) 머지 레이서 사전예약 정보 머지 레이서 모바일 게임이 사전예약을 시작했습니다. 미니카를 수집하고 업그레이드 해서 속도로 경쟁하는 그런 게임이라고 말씀드릴 수 있겠네요. 아래 짧은 영상을 보시면 좀 더 쉽게 이해가 되실 것 같아요. 미니카 어릴 때 조금 가지고 놀았었어요. 비싸고 좋은건 못가졌지만 그래도 그 엔진 소리가 좋았었는데 말이죠 ㅋㅋㅋㅋ 어릴 때 미니카를 가지고 노셨던 분들은 한 번씩 해보셔도 좋을 듯 !! 실물이 아니라 게임 안에서 있는 미니카지만 그래도 행복할 것 같지 않나요? 더보기
방치소녀 플레이 후기 (모바일, 게임, 수집, 육성, 미소녀) 방치소녀 플레이 해봤습니다 (후기, 모바일, 게임) 방치소녀라는 모바일 게임을 해봤는데요. 게임 제목처럼 방치하는 게임이 되겠습니다. 물론 계속 보고 계셔도 상관없지만 가끔씩 들어와서 성장 시키고 아이템 업그레이드 하고 그런 재미가 있네요. 방치소녀 설치 바로가기 : https://play.google.com/store/apps/details?id=com.monawa.girlalone 앱을 꺼도 서버에서는 계속 돌아가는 것인지 정확히 어떤 프로세스인지는 모르겠지만 앱을 꺼도 성장합니다. 아이템도 먹고요. 레벨업도 하고요. 아래 그림과 같이 앱을 껐다가 다시 키면 이렇게 전투 얼마나해서 아이템이랑 경험치 얼마나 받았는지 알려줍니다. 실제 전투는 막 멋진 동작이 있는건 아니고 텍스트로 이루어집니다. 익숙하신.. 더보기
드림이터 사전예약 (모바일, 게임, 탄도 슈팅) 드림이터 사전예약 정보 드림이터 사전예약이 시작되었습니다. 짝짝짝!!! 사전예약하시고 아이템도 챙겨가세요 !! 벌써 사전예약하신 분들이 약 1.5만명 되네요. 저도 그 중에 한 명이 되었고요 ㅋㅋ 사전예약 보상은 목표인원 달성 시에 받을 수 있는 것 같아요. 5만이면 금화 3000개, 다이아 100개, 행동력(칩) 50개를 받을 수 있고요. 30만 돌파하면 소환코어 6개, SR 드라이버 1명을 받을 수 있네요. 같이 해서 30만 돌파합시다 ㅋㅋㅋㅋ 사전예약 페이지 바로가기 미소녀가 많이 나온다는거 !!!! 덕후 양산 게임이 될지도 모르겠습니다. ㅋㅋㅋ 수집하는 재미도 있을 것 같고요. 플레이는 어려울 것 같지는 않고 간단하게 즐길 수 있을 것 같다는 생각이 드네요. 영상으로도 드림이터 게임 내용을 확인해.. 더보기
엘룬 사전예약 시작했어요 (모바일, 게임, 신작, 추천) 엘룬 사전예약 정보 모바일 게임 신작 "엘룬" 사전예약이 시작되었네요. 사전예약하시고 아이템 보상도 받으시고 오픈을 놓치지 마세요 !! 사전예약 보상 아이템은 1-연차 가챠 티켓 1장, 성장라이쳐 2성 3개, 5만 골드 입니다. 10연차 가챠 티켓이 젤 중요해보이죠? ㅎㅎ 초반 가챠가 중요하긴 하니까요. 엘룬 사전예약 바로가기 그래픽 좋죠? 구도도 멋진 것 같고 엘룬이 약 200여종 이라고 하니까 모으는 재미도 분명히 있을 것 같아요. 그리고 아마도 계속해서 엘룬은 추가되겠죠. 엘룬들을 모아서 멋진 덱을 만들고 도전하고 하는 그런 게임인 것 같아요. 단순하게 스토리만 클리어 하는 것이 아니라 PVP, 보스전도 준비되어 있네요. PVP로 덱을 겨룰 수 있을 것 같은데 그러면 더 빠져들 수 있겠죠? ㅎㅎ 엘.. 더보기
라스트오리진 정식서비스 진짜 시작 (같이, 모바일, 게임) 라스트오리진 정식서비스 + 이벤트 라스트오리진 재정비해서 정식서비스 다시 시작했습니다. 최애캐를 만날 수 있는 게임이라고 저는 소개하고 싶어요. 캐릭터가 다양하기도 하고 매력도 있어서 마음에 드실거에요. 스토리도 빠지지 않습니다. 모바일 새로운 게임 찾으시는 분들은 한 번 아래 내용을 확인해보세요. 라스트오리진 설치 바로가기 https://play.google.com/store/apps/details?id=com.smartjoy.LastOrigin 이벤트도 진행되고 있습니다. 카페회원수 10만명 돌파하면 수복 나노머신 10개, 장비코어 10개, 유전자 씨앗 10개, 급속 완성회로 20개, 자원패키지 5000개, S급 중장 보호기 기간테스를 받으실 수 있어요. 지금 카페회원수는 대략 9.1만명 정도입니다... 더보기
초시공전기 사전예약 시작합니다 (모바일, 게임, 횡스크롤, 2D, 화려함) 초시공전기 사전예약이 시작되었습니다 !!!! 사전예약 페이지를 확인해봤는데요 정말 화려하네요. 영웅을 모으고 잘 조합해서 더 많은 데미지를 낼 수 있도록 하고 이런거 정말 좋아하는 종류의 게임인데요. 사전예약하면 인게임 아이템 5만원 상당을 100% 지급하니까 시작해보실 분들은 사전예약 필수입니다. 초시공전기 사전예약 바로가기 사전예약 보상 아이템은 100만골드, 영웅 소환권 5회, 피로도, 투표 케릭터 지급입니다. 사전예약 페이지 접속하시면 아래 영웅들의 상세 정보를 보실 수 있어요. 이런 것 구경하는 것도 재미죠 ㅎㅎ 클라우디아가 인기 제일 많을 것 같긴하네 전 아폴리온도 멋진 것 같아요. 초시공전기 사전예약 바로가기 실제 게임 스샷인데요. 화려함이 돋보이는 것 같습니다. 초시공전기 사전예약 바로가기 더보기
에픽세븐 (모바일, 게임, 애정 캐릭터, 수집) 에픽세븐이 정식으로 서비스 되고 있는데요. 설명 문구 중에 "눈을 감으면 떠오르는 캐릭터" 요 설명 참 좋은 것 같아요. 그만큼 캐릭터에 신경을 많이 쓴 게임이라는 것인데요. 정말 그래요. 애정하는 캐릭터들을 만날 수 있는 게임입니다. 평점도 나쁘지 않고요 꾸준히하면 덱도 맞추고 캐릭터 수집하는 재미를 느낄 수 있는 게임이에요. 에픽세븐 설치 바로가기 에픽세븐 캐릭터 소개인데요. 공식홈페이지 가보시면 확인하실 수 있습니다. 보이스도 있고, 캐릭터 소개영상도 있으니까요. 한 번 확인해보세요. 에픽세븐 설치 바로가기 더보기
블로그 SEO 시작 (6) - 네이버웹마스터 도구를 통해 수집요청하기 예전에 작성했던 내용들을 살펴보니까 팁이 하나 빠졌더라고요. 네이버에서 운영하는 웹마스터도구에 블로그를 등록해두면 자동으로 수집되는데요. 하루에 50개 URL은 수동으로 요청할 수 있습니다. 수동 요청하면 얼마나 좋아지는지 정확하게 알 수 없지만 그래도 요청하는게 좋을 것 같아요. 1. 네이버 웹마스터도구 사이트에 접속해서 로그인하세요.2. 등록된 사이트를 선택하고3. 요청 >> 웹 페이지 수집에서 수집하고 싶은 URL을 등록하세요. 하루에 총 50개의 URL을 수집해달라고 요청할 수 있는데요.만약에 숫자로 URL이 설정되어 있는 경우에는 자바스크립트 간단하게 짜서 돌릴 수 있습니다.저도 그렇게 하고 있고요. 하나 씩 입력하기에는 넘나 귀찮음 ㅠ 만약에 텍스트로 URL을 표시하도록 설정하신 분들은 조금 .. 더보기
(모바일게임) 웨폰즈 소울걸 사전예약 받고 있어요. 웨폰즈 소울걸 사전예약이 진행되고 있어요. 많이 접해봤던 유형의 게임인데요.수집의 재미가 있는 게임이죠 ㅎㅎ 저는 예전에 로드투드래곤 정말 열심히 했었는데 :-) ㅎㅎ 아무튼 웨폰즈 소울걸 사전예약하고 있고요.사전예약하면 아이템 지급되니까요.관심있는 분들은 미리 사전예약하고 아이템 챙기세요~ 사전예약은 아래 그림을 누르면 연결되도록 해뒀어요. 사전예약하면 받을 수 있는 아이템은 아래와 같습니다. 현재는 CBT 진행되는 것 같아요.곧 본 게임이 시작될 것 같습니다 :-) 더보기