E D R , A S I H C RSS

Freechal Album Spider

1002 가 만들었� 프리첼 앨범�오기 프로�트. (10월 20� ~ 29�) 그와 관련한 프로�트 후기.

작업�기

프리첼� 유료화�면서 주위 사람들� 게시�들� 프리첼로부터 �전� 하기 시작하였다. 주위 아는 �회선배들� 경우는 그중 숭실대�서 게임방� 운�하시는 분� 있어서 �회사람들 전용 서버를 하나 마련하고 게임방�서 굴리기로 한다. 프리첼 게시� 변환기� 경우 �미 범용�� 제로보드나 �지보드�서 제공� 하지만, 앨범�나 화� 백업� 지�하지 않는다. 그리고, 게시� 백업� 할때엔 프리첼 관리�가 기존 게시�들� 접근 권한정�를 조절해줘야 한다. 로그�처리가 안�어있기 때문��, 제로보드 게시� 변환기를 보니 쿠키 관련 처리가 없었다.

마침 개��으로 �주 �용하는 ClientCookie 가 있기 때문� 쉽게 작성할 수 있�것�� �단, 어�정� 스케줄� 잡고 작업 시작.~

프로토콜 분�

처� 무엇� 해야 할지 고민� 해야 하는�, �단� '�미지를 가져오는게 가능한가?' 를 먼저 하게 �었다. 프리첼� 경우 �미지를 얻어오는 방법� getImage.asp 화�� 통해서만 가능하다. �반 JPG ��가 아니기 때문�, getImage.asp 로 넘겨주는 ��들� 알아내야 한다.

1002 는 webdebug 와 Proxomitron �개를 �용하는�, 둘 다 �종� 프�시 서버처럼 �용하여 HTTP 로 송수신 �는 GET/POST, HTTP Header ��터들� 로그를 확�할 수 있다. 둘� �용, 프로토콜 분�� 하였다.

프로그래�

�회 사람� 운�하는 겜방�서 작업; 금연� 겜방� �렇게 좋�수가. 한쪽� 세미나실� 기�� 관련 서�� 빼곡하게 차 있는 것� ���.

vi - python - ctags - grep 조합� �� 참 잘 들어맞는다. 다른 Python 쪽 좋� IDE들� 잘 못접해서 그런지 개��으론 가장 편한 조합� �었다. 타 개발툴들로 작업할때 하� �들� �것들� 조합으로 ���으로 할 수 있게 �다.

처��는 모듈� 대해 Remote Test 를 먼저 진행했다가, Local Test 로서 �단 HTML 문서를 받아놓고, �를 TDD 로 하면서 ��터들� 추출하는것� 낫겠다 �단, Local Html Test 를 작성해나갔다. �전 ProjectPrometheus �서 했었� 방법과 비슷했었�지�, �사천리로 거� 하루�안 관련 작업들� �났다.

작업� 계� 하다 보니, � 모듈들� 대해 BottomUp 스타�로 작성� �었다. 근�, 막� '다�� 해야 할��?' 질문� 해보니, 좀 ��해졌다. �래서는 안�겠다고 �단, �단 만들어놓� 개개� 모듈들� 근거로 시퀀스 다�어그램� 그리고 그 순서를 잡아나갔다.

� 모듈들� 서로 불러져야 할 순서들� 정하고 난뒤, 내가 만든 � 모듈들� �종� SpikeSolution 처럼 ��브러리 연습하듯� �용해보았다. 그러면서 잠시 놓쳤� �름� 다시 잡았다. �러한 �들� ���으로, 그리고 '무엇� 할까 - �것� 하�' �고 ��해낼 수 있었� 것� 기분� 참 좋게 했다.

초반 3�정�는 TDD 를 하고 후반� PBI 스타�로 테스트 코드� 진행했는�, 후반으로 갈수� 작업 진척�가 떨어지고, 코드� 대한 �해�� 떨어�� �꼈다.

주로 제로보드 ��터로 변환하기 위한 ��터베�스 저장 부분��, 첫번째 �유로는 제로보드 DB � 스키마를 제대로 파악하지 못한것� 문제였다. � 문제는 프리첼->제로보드 컨버터 PHP 소스를 보고 �를 Python 으로 �팅하였다. �전� PHP 프로그래�� 많� 했기 때문� �숙했고, 어차피 같� 어족군(?)� 언어�므로 별다른 어려움� 없었다. 하지만, 테스트 경우를 명확하게 하지 않았기 때문�, 작�� 제대로 �지 않는지� 대해서는 게시� 변환뒤 매번 웹�서 나온 결과를 확�해야 했다.

�하나 문제로는 ��하게 MySQLdb 모듈� 문제를 �으켰는�, update query 를 날릴때 �러발�� 하는 것�였다. 똑같� 쿼리문� 쉘�서 실행했�때는 잘 �었는�, MySQLdb � cursor �래스를 �용, 쿼리를 날리면 실행� 안�는 것�였다. (DB � �용� �는�, �러가 발�한다.) � 부분� 대해서는 �단 try-except 로 땜질처리를 했지만, 그리 기분좋진 않다. 수정� 필요하다.

질문

제가 python� 전혀 몰�서 그러는�요, �거 사용법좀 알려 주시겠어요.
암만 해� 안 �서요.. freechal 앨범용량� 너무 커져서 앨범� �부분� �주하려고 하는�, �미지 가져오는 부분� PHP로 하는� 잘 안�서요..
�글� 보면 부�드립니다...
늦게서야 보게 �어서..; 지금� 작�� 할런지는 잘 모르겠습니다. 알바때문� 바빠서 유지보수를 못하는 중�지�.. freechal service UI 가 바뀌면 깨지는 녀��것�지�..; 사용하기전� 필요한 것으론 Python 2.2x 버전 정�와 MySQLdb ��브러리가 필요하고요. 해당 proper.py 화�� 맞춰주신뒤, freechalscript.py 를 실행해주시면 �니다. 같� 역할� 하는 프로그램� http://www.perlmania.or.kr �서 먼저 구현�걸로 기억합니다. 거기서 해당 강좌� 있�걸로 기억하오니 참조하세요. --1002
우선 �사합니다. 근� �러가 나네요^^; 제가 현재 �미지 가져오는 부분� 처리를 �저히 못하겠는�, 혹시 � 부분�서 주�하여야 할 부분� 있나요? python� Header setting같� 거 하나요? 전 PHP로 하고 있거든요..
�리는 보통� �런류� 프로그램 (HTTP 로 문서 가져오고 스트� 파싱하여 ��터로 가공하고 DB� 저장) � 비슷합니다. 단, 앨범게시�� 경우 로그�� 필요한�, � 경우 쿠키 처리를 위한 header setting� 해줘야겠죠. Perl 같� 경우 LWP, Python � 경우 ClientCookie, Java � 경우 HttpUnit(�래� 용�는 다르지만, �런 프로그램� 위한 간� 브�우저 ��브러리로 쓸 수 있습니다.) 등� ��브러리를 쓸 수 있습니다. 그리고, �미지� 경우는 해당 URL� 보고 다시 HTTP Connection � 열어서 얻어와서 binary로 저장해야 한다는 것� 유�사항� �겠습니다. (HTML만 얻어오면 img tag � ��들만 있겠죠.) 그리고 header setting �서 약간 미묘(?)한 부분� 있�것 같��, 저는 � webdebug 로 캡�한거 그대로 보낸지�..; � 부분� CVS� 코드 참조하세요. --1002

�사합니다. Image가져오는 부분� 그 �안 안 �서 �기하고 있었는�, �분� PHP로 해결했습니다. ^^ 제가 Header setting� 잘못했�군요.


Valid XHTML 1.0! Valid CSS! powered by MoniWiki
last modified 2021-02-07 05:23:17
Processing time 0.0101 sec