'분류 전체보기'에 해당되는 글 25건

네이버 계정은 여러모로 연동되는게 많이 있다 보니 쓰기 좀 그렇더군요.

서로이웃 같은게 나쁜건 아닌데 뭔가 네덕이나 친목질같은 소리 듣는것도 맘에 안들고...

그리고 네이버 블로그같은경우 구글 검색에 잘 안뜨는 경우도 많고 말이죠.

좀 안다 하시는 분들은 다 검색엔진을 한글-네이버, 그 외-구글 로 사용하시기 때문에 티스토리를 하는 편이 좋다고 생각했죠.

그래도 한때는 꽤 인기 많았던 블로그였는데 ㅋㅋㅋ

일하면서 원격으로 집 PC 접속해서 개발해서 겨우 MaruCrawler 완성했습니다.

요즘 이거 한다고 늦게 자고 일찍 일어나는 생활이 며칠째 이어져서 상당히 피곤하네요.

주말에도 일정이 여전히 꽉 차있는 상태인데 말이죠...

어쨌든 콘솔일지라도 다운받는데는 지장이 전혀 없으므로, 자기 전에 돌려놓고 자신다던지 하는걸 추천드립니다.

계속 깜빡거리는 크롬창이 별로 크게 거슬리시지 않으시면 그냥 사용하셔도 됩니다...

전 피곤하니 이만 자봐야겠습니다.

* 본 블로그 관리자는 프로그램이나 소스코드를 사용 및 악용하여 발생하는 문제에 대해 어떠한 책임도 지지 않습니다.

HalfElf_MaruCrawler (1.00 ver.).7z

블로그에 처음으로 올리는 프로그램이네요.

marumaru.in 의 만화를 다운받는 프로그램인 MaruCrawler입니다. 

사실상 그냥 마루마루 다운로더이긴 합니다만, 편의성은 확실히 GUI보다 떨어지네요.

마루크롤러라고 부르시면 됩니다. 

죄송합니다, 디자인만큼 네이밍 센스도 부족합니다.

보통 마루마루 다운로더로 umaruGrab을 많이 사용하시던데 요즘은 잘 안된다고 하여 직접 제작해 보았습니다. GUI는 거의 절대로 만들 생각이 없으며 기능을 추가하더라도 콘솔 형태 그대로 갈 생각입니다. 디자인도 못하는 데다 GUI 만드는게 콘솔보다 백 배는 더 귀찮기 때문입니다. 

(성능 면에서도 콘솔이 훨씬 뛰어납니다)

하지만 이정도 기능으로도 우마루 엿먹이기는 충분할 것 같네요. 일단 다운로드 기능 하나는 확실히 되니까요.

모든 만화를 테스트 해 본게 아니기 때문에 확실하지는 않습니다.

따라서 사용해보시고 안되는게 있으면 제보 부탁드립니다.

평소부터 크롤링은 재밌어했는데 온갖걸로 다 막아둔 마루마루 크롤링이라니 이런 꿀잼이.

이제 이걸로 우마루 악덕짓은 좀 줄어들려나 모르겠습니다.

공지에 명시한 대로 프로그램의 소스는 공개하지 않습니다.

다시 명시한 대로 프로그램 내에 악성코드같은건 심지 않았습니다.

프로그램에 대한 문의사항, 버그 제보, 기능 건의 등은 댓글이나 방명록으로 부탁드립니다.

예의와 개념을 밥말아먹은 소리는 차단과 댓글삭제로 대응합니다.

==============================================

다음은 사용법입니다.

몇가지 유의할 사항이 있으므로 꼭 주의깊게 읽어주시기 바랍니다.

이 프로그램은 chrome 브라우저를 필수적으로 설치해야 사용이 가능합니다. 꼭 설치해주세요.

압축 파일 내에는 3개의 파일이 들어있습니다. 이 모두를 같은 폴더 내에 압축 해제해주세요.

실행할 프로그램은 HalfElf_MaruCrawler.exe 뿐입니다. 우마루 아이콘이 있을 겁니다. 나머지 두개는 건드리지 말고 그자리 그대로 놔둡니다. 특히 chromedriver.exe가 없을 경우 작동하지 않으니 주의하세요.

프로그램은 총 두 번에 걸쳐 입력을 받습니다.

첫 번째는 만화의 고유 id이며, 두 번째는 돌릴 Thread의 수입니다.

(Thread의 개념은 여기를 참고하시기 바랍니다)

만화의 아이디는 다음 이미지를 참고하시면 되겠습니다.

marumaru.in에서 각 만화의 페이지에 들어갔을 때 나오는 값입니다.

Thread에는 싱글코어 = 2, 듀얼코어 = 4, 쿼드코어 = 8 을 입력하시면 가장 무난합니다.

코어를 모르시겠다면 그냥 4를 입력해주세요.

이후 자동으로 MaruCrawler_Download 폴더 내에 만화 이름으로 폴더를 생성 후 다운받기 시작합니다.

진행 사항은 Episode 마다 한번씩 백분율로 나타내며 100%가 될 경우 최대 1~2분 후 프로그램이 자동 종료됩니다.

여기서 중요한 것이, 이 크롤러는 크롬 브라우저를 기반으로 작동하기 때문에 크롤링을 위해 Episode 하나당 크롬 창이 한번 잠깐 떴다가 닫히기를 반복합니다. 이는 절대 건드리지 말고 내버려둡시다. 차후 크롬이 뜨지 않게 다른 방법을 사용할 수도 있겠지만 현재는 예정에 없습니다.

프로그램 진행 중 종료 방법은 그냥 X버튼을 누르는 것, 작업 관리자에서 종료하는 것 등 여러 가지가 있습니다만 그냥 종료하시면 알아서 다운로드는 멈춥니다.

이 프로그램은 이어받기를 지원합니다.

하지만 실행한다고 바로 이어받는 것이 아니고, 파일이 전부 정상적으로 존재하는지 확인을 위해 Episode마다 브라우저는 열리고 닫힙니다.

파일이 존재한다고 판단되면 바로바로 지나치므로 닫은 부분까지 진행률은 빠르게 올라갈 것입니다.

만약 예기치 않은 렉이나 오류로 인해 프로그램이 이미지를 다운받지 않고 멈춰 있다면, 1~2분 뒤 모니터 Thread가 이를 감지하고 프로그램을 재시작합니다. 이때는 MaruCrawler_Download 내에 생성된 latest 파일을 기반으로 만화를 다운받습니다. 이 파일은 하나밖에 생성이 되지 않기 때문에 동시에 만화를 받겠다고 이 프로그램을 여러 번 실행시키면 절대 안 됩니다.

굳이 어떻게든 여러 번 실행하고 싶다면 압축 푼 폴더째로 복사하여 다른 폴더로 옮긴 후 실행시키세요. 하지만 부작용은 책임 못 집니다.

이 프로그램은 각 에피소드의 제목을 가져오지 않고 순서대로 000~999까지 저장합니다. 따라서 외전이나 번외편, 특별편 등을 가릴 수 없습니다. 이는 차후 업데이트로 반영할 예정이니 참고 바랍니다.

+ 현재 수위가 높아 비밀번호가 필요한 만화의 경우 다운로드를 지원하지 않습니다. 아마 앞으로도 그럴 가능성이 높습니다.

+ 파일의 재배포는 허용하지 않습니다, 블로그 링크 걸어주세요.

+ 현재 폴더명에 전혀 필터링을 하지 않아 ?나 /등 파일명에 들어갈 수 없는 문자가 포함된 만화는 다운받을 수 없습니다, 차후 업데이트 예정입니다.

말그대로 marumaru.in의 만화를 다운받아 저장하는 프로그램이고, 현재 배포용으로는 약간 부족하고 버그도 좀 있지만 정상 작동하는 상태입니다.

GUI는 지원하지 않습니다, 콘솔 어플리케이션이므로 디자인도 전혀 들어있지 않습니다.

(사실 제가 디자인을 못합니다)

검색 기능도 제공하지 않으니 받고 싶은 만화의 id값을 직접 프로그램에 입력하여야 합니다.

나중에 필요하다면 txt파일에 id를 적어두는것만으로 자동적으로 다운받도록 기능을 추가할 예정입니다.

현재는 id값을 입력하면 자동으로 만화 제목을 가져다가 폴더를 만들고, 해당 폴더 내에 "%03d" 포맷으로 순차적으로 화수별, 또는 권별로 폴더를 만든 뒤 그 안에 마찬가지로 "%03d.jpg" 포맷으로 파일을 다운받도록 하고 있습니다.

다운받다가 중간에 비정상 종료되거나 사용자가 종료했을 경우 프로그램을 다시 실행하여 같은 id값의 만화를 다운받으면 이미 다운받은 파일은 그냥 지나가고 0 byte로 파일만 생성된 경우에는 정상적으로 다시 다운받으므로 이어받기 기능이 적용됩니다.

해당 프로그램은 chromedriver를 이용하여 크롤링을 진행하므로 현재는 windows 환경의 chrome이 설치되어 있을 것을 전제로 합니다.

아직 배포 날짜와 여부는 미정이며 완성도가 적당해졌다고 생각할 경우 배포하겠습니다.

프로그램 소스는 공개하지 않습니다.

이 블로그는 공식적으로 내보이기 힘든 내용들을 올리기 위해 만들어졌습니다.

덕질이라던가, 덕질이라던가, 덕질이라던가

전 현재 IT 회사 다니고 있습니다.

자세한 일은 비밀이고, 시간 나거나 심심할 때 프로그램 개발 합니다.

딱히 제가 개발자라고 말하지는 않았습니다.

좋은 아이디어나 필요하다고 생각하는 프로그램이 있으시면 댓글로 달아주시면 보고 생각해 보겠습니다.

애니메이션, 만화 등 좋아하는 '오타쿠' 맞구요, 이 부분에 대해 지적질은 삼가해주시기 바랍니다. 보기싫으면 나가시면 됩니다.

제가 만든 프로그램에 대해 건의사항이 있으시면 해당 프로그램 게시물의 댓글에 요청해주시면 됩니다. 물론 보고 제가 귀찮지 않은 한도 내에서 기능 추가하고 개선할 예정입니다.

당연한 거지만 절대 제 프로그램 내부에 악성코드 등을 넣어서 배포하는 짓은 하지 않습니다. 정 불안하시면 프로그램마다 해시 넣어드릴테니 비교해가면서 다운받아 사용하시면 됩니다. 그래도 못 믿겠다면 어쩌겠습니까, 안쓰면 되지.

닉네임에 큰 의미 없습니다.

그냥 예전부터 하프엘프라는게 좋았어요.

나이, 성별(솔직히 유추 못하는게 이상하지만), 메일주소, 전화번호, 페이스북이나 타 SNS 등에 대한 정보는 일절 공개하지 않습니다.