leegeunhyeok / cyworld-bot Goto Github PK

한참 잘 되다가 갑자기 파란화면뜨면서 PC재부팅 되더니 싸이봇 다시 실행하면 안되요.
싸이봇화면이 닫히고 저 검은화면만 남아서 더이상 진행이 안되네요.
왜 이렇게 될까요?
그리고 사진파일이나 그외 글 파일들도 종료되기전 저장된건 제대로된 파일이 아니예요.
다시 다른 폴더에 싸이봇을 다운받아 해봐도 안되네요.

안녕하세요. 싸이월드 사진 백업을 찾던 중에 글을 보게 되었습니다.
제가 코딩 쪽을 잘 몰라서 그런지 4번 의존 라이브러리 설치부터 어떻게 해야 하는지 막혀서 문의드립니다.

의존 라이브러리 설치에서 드라이브 폴더에 크롬드라이버 파일을 넣고 그 파일을 어떻게 실행해서 아래와 같은 명령어를 넣는 것일까요? 그다음에 필요한 기본 설정 및 실행 명령어도 어떻게 해야 하는지 몰라 문의드립니다.

제 컴퓨터 환경은 Mac OS입니다. 설명에서 적어주신 파이썬 등은 설치를 완료하였습니다.
혹여라도 시간이 허락된다면 답변 부탁드립니 :)

(2019-11-05 17:42:35.977639) - [INFO] 크롬 드라이버 로딩 중..
(2019-11-05 17:42:38.204755) - [INFO] 크롬 드라이버 로딩 완료
(2019-11-05 17:42:38.205356) - [INFO] 싸이월드 홈페이지 접속 중..
(2019-11-05 17:42:52.927189) - [SUCCESS] 싸이월드 홈페이지 접속 완료
(2019-11-05 17:42:52.928170) - [INFO] 로그인 시도 중..
(2019-11-05 17:43:17.907296) - [SUCCESS] 로그인 성공
(2019-11-05 17:43:17.907720) - [INFO] 마이 홈으로 이동 중..
(2019-11-05 17:43:27.339354) - [SUCCESS] 이동 완료
(2019-11-05 17:43:27.341797) - [INFO] 이미지 다운로드 작업 시작
Traceback (most recent call last):
File "bot.py", line 246, in
.run(parser=parser, downloader=downloader)
File "bot.py", line 190, in run
self._chromedriver, cookie, parser_logger, self._delay)
TypeError: init() missing 1 required positional argument: 'delay'

위의 로그와 함께 봇이 종료됩니다.

README 대로 진행하고 저의 경우 virtualenv venv과정만 추가해서 실행까지 할 수 있었습니다.

근데 파싱은 잘 되는 것 같은데 실제로 images 폴더에 다운로드는 되지 않습니다.

어떻게 해야 할까요 ?

왜 이럴까요?

일단 감사의 말씀을 드립니다.
만들어주신 상세한 가이드 덕분에 파이썬 설치해서 코드 실행해서 게시글과 사진을 받을 수 있었습니다.

몇가지 이슈를 제보드립니다.

1. 다이어리 백업
   사용해보니 다이어리의 경우에는 저장이 되지 않는 것 같습니다.
   혹시 가능하다면 다이어리를 받을 수 있게 만들어주실 수 있을까요?
   개인적인 요청일수도 있습니다만, 저의 경우에는 다이어리가 좀 많아서요 ^^

2. 이미지 파일명 깨짐
   아래와 같이 파일명이 저장되는 경우가 있습니다. 가장 뒤에 jpg 앞에 . 이 빠져 있는 형태로 저장됩니다.
   (참고로 말씀드리면 맥북 사용중이고, 크롬은 78 버전입니다)
   2010.03.19_자동차_궁합_알아보기_62.asp%3Fredirect%3D%252F290021%252F2010%252F3%252F19%252F85%252F%25B0%25AD%25C0%25CE%255F1%252D1%252Ejpg

너무너무 고맙습니다 열심히 백업 받고 있습니다
혹시 동영상도 저장이가능할까요?

환경

• MacOS 10.15.3
• Python 3.7.5

문제사항

-w (windowed) 옵션을 붙여 빌드할 경우 크롤링 작업 시작 시 오류가 발생함. (멀티프로세싱 관련)

• 스크립트로 실행할 경우 문제 없음

싸이월드 백업하려고 찾아보다가 좋은 프로그램 찾아서 앗싸를 외쳤어요..^^;;
시도해보니 아래처럼 로그가 찍히는데 사용자정보를 맞게 입력했는데요...
계속 저 상태에서 로그인이 안되는데 어떤 점이 문제일까요?;;;;ㅜㅜ

(2020-06-29 13:50:45.221417) - [INFO] 크롬 드라이버 로딩 중..
(2020-06-29 13:50:48.264415) - [INFO] 크롬 드라이버 로딩 완료
(2020-06-29 13:50:48.266409) - [INFO] 싸이월드 홈페이지 접속 중..
[0629/135048.317:ERROR:ssl_client_socket_impl.cc(959)] handshake failed; returned -1, SSL error code 1, net_error -100
(2020-06-29 13:50:50.654356) - [SUCCESS] 싸이월드 홈페이지 접속 완료
(2020-06-29 13:50:50.655354) - [INFO] 로그인 시도 중..
(2020-06-29 13:51:01.295421) - [ERROR] 사용자 정보를 확인해주세요
QThread::wait: Thread tried to wait on itself

먼저 만들어주셔서 감사합니다.

이미지가 잘 다운받아지네요.

실제로 사용 해 보니 게시글에 내용이 더 중심인 경우가 많더라구요.

혹시 이미지 폴더명을 posts로 변경하고 같은 파일명에 txt확장자로 파싱되게 해주는 기능을 추가 할 예정은 없으신가요?

감사합니다.

pip3 install -r requirement.txt

실제 .zip 폴더안 txt파일 이름은 requirements.txt
입력시
pip3 install -r requirements.txt

혹시나 하는 마음에 여쭤봅니다.

비밀번호에 특수문자(#, %)가 포함되어 있어 bot.py가 동작하지 않는 오류

Traceback (most recent call last):
File "bot.py", line 273, in
user_password = config.get('user', 'password')
File "/Library/Frameworks/Python.framework/Versions/3.8/lib/python3.8/configparser.py", line 799, in get
return self._interpolation.before_get(self, section, option, value,
File "/Library/Frameworks/Python.framework/Versions/3.8/lib/python3.8/configparser.py", line 395, in before_get
self._interpolate_some(parser, option, L, value, section, defaults, 1)
File "/Library/Frameworks/Python.framework/Versions/3.8/lib/python3.8/configparser.py", line 442, in _interpolate_some
raise InterpolationSyntaxError(
configparser.InterpolationSyntaxError: '%' must be followed by '%' or '(', found: '%'

안녕하세요?!
저는 컴퓨터 프로그램에 대한 지식이 거의 없는데요, 싸이월드 사진 및 자료들을 쉽게 다운받을 수 있다고 해서 이렇게 문의 드립니다.

사진으로 보여주신 순서대로 따라서 하고 있었는데,
config.ini 를 열 수 있는 어플리케이션이 없다고 나오네요.

저는 맥을 쓰고 있는데요, 어떤 어플리케이션을 쓰면 config.ini을 열 수 있을까요?!

압축을 푼 크롬드라이버는 어디에 두어야 할 지 이해를 못 하여 질문합니다..

또한 config.ini 파일이 없는데 이전 어디에서 제가 잘 따르지 못한 부분이 있는 건가요?

(2019-11-04 09:58:06.543329) - [INFO] 크롬 드라이버 로딩 중..
(2019-11-04 09:58:08.673538) - [INFO] 크롬 드라이버 로딩 완료
(2019-11-04 09:58:08.674320) - [INFO] 싸이월드 홈페이지 접속 중..
(2019-11-04 09:58:23.120707) - [SUCCESS] 싸이월드 홈페이지 접속 완료
(2019-11-04 09:58:23.121136) - [INFO] 로그인 시도 중..
(2019-11-04 09:58:28.509315) - [ERROR] 시간이 초과되었습니다
시간이 초과되었다는 메시지와 함께 프로그램이 종료됩니다. 크롬 잘 열리고 열린 크롬에서 로그인되어 싸이 타임라인으로 넘어가는 것까지 확인됩니다만, 타임라인으로 넘어가기 전에 시간초과로 프로그램이 종료됩니다.
해외 거주하여 서버응답이 늦어서 그런걸까요? 해결방안 알려주시면 감사하겠습니다.

싸이월드 이거 지금도 크롤링 되는건가요?

크롬 드라이버 로딩 완료
싸이월드 홈페이지 접속 중..
ERROR : ssl_client_socket_impl.cc(935) handshake failed
싸이월드 홈페이지 접속 완료
로그인 시도 중...
알수없는 오류가 발생했습니다
QThread::wait: Thread tried to wait on itself

로그가 이렇게 뜨고 작동이 안 됩니다.ㅠㅠ

좋은 소스코드를 공유 해 주셔서 감사합니다.
백업은 엄두도 안나는 일 이었는데, 덕분에 상당부분 백업을 받았습니다.

두가지 로그에 2가지 에러가 주기적으로 10~15번에 한번(?) 꼴로 발생하는것 같은데,

1. 첫번째는 cp949 인코딩 에러 .... 사진 다운로드
2. 두번째는 크롤링 파싱이 안되는 에러가 간헐적으로 발생합니다 ... 텍스트 날짜파싱

사용환경

• Windows10 Pro, 64bit x64
• Lenovo Thinkpad x1. i5-6300u @2.4Ghz / RAM: 8G
• Python 3.7.3 (default, Apr 24 2019, 15:29:51) [MSC v.1915 64 bit (AMD64)] :: Anaconda, Inc. on win32

에러로그

(2019-11-05 20:08:32.663011) - [ERROR] 'cp949' codec can't encode character '\xa0' in position 60: illegal multibyte sequence

(2019-11-05 19:37:26.771582) - [ERROR] Message: no such element: Unable to locate element: {"method":"css selector","selector":"div.view1 p"} (Session info: chrome=77.0.3865.120) (Driver info: chromedriver=2.41.578737 (49da6702b16031c40d63e5618de03a32ff6c197e),platform=Windows NT 10.0.18362 x86_64)