275일차 - 크롤링 데이터 가다듬기 (4)

오늘은 시간이 많이 없다. 얼른 후딱 끝내보자!!

 

우선 전체 엑셀파일에서 중복 데이터를 제거한 장르 목록을 뽑아보자.

 

결과

'군사', '재난', '요괴 호러', '왕도', '시간여행', '군상극', '히어로', '사극', '농구', 
'슬래셔', '슬랩스틱', '역사 마법', '시골', 'SF의 모험', '모험 메카', '유도', '도박', 
'액션 스릴러', '일상드라마', '코미디 메카', '백합', '19금', '일상 치유', '슬픔', 
'여행', '블랙 코미디', '양키', '뱀파이어', '메카', '학원', '과자', '장편 드라마', 
'회귀', '스파이 미스터리', '코미디의 판타지', '던전', '마법 모험', '브로맨스', '루프', 
'혼고 미츠루', '오컬트', '전쟁', '야쿠자', '스릴러 스릴러', '심리', '디스토피아', 
'마법소녀의 마법', '판타지', '헬스', '코메디 등장인', '등산', '권투', '로맨스일상', 
'판타지T마법', '아포칼립스 SF', '마법', '마녀의 로맨스', '청춘', '착각', '스포일러', 
'OST', '나가사키 켄지', '악마', 'SF', '괴수', '학원 배틀', '마술적 사실주의', '경제', 
'SF의 공상과학', '범죄', '사변', '연극', '드라마 모험', '드라마 스페이스 오페라', 
'역사야오이', '일상', 'SF 코미디', '스파이', '교사', '좀비', '스핀오프', '다크 히어로', 
'바이크', '드라마의 모험', '무협', '밀리터리', '로맨스 판타지', '실험', '전쟁 이야기', 
'성인식', '흡혈귀', '격투', '현대', '불교', 'SF 스릴러의 드라마', '19금미스터리', 
'누아르', '아이돌', '레스토랑', '다크 코미디', '드라마의 로맨스', '고양이', '세카이', 
'가족', '레이싱', '감성', '로맨틱 코미디', '역사의 드라마', '역사', '개그', 
'19금의 로맨스', '갱스터', '오토메이트의 판타지', '요리', '시대', '잡지 연재', 
'아동', '프로레슬링', '천사', '농업', '축구', '19금의 코미디', '일상 코미디', '서사', 
'해양', '모험', '환생', '초능력', '마법소녀', '스포츠', '오컬트 추리', '심리의 미스터리', 
'전차', '전대', '우주서부코미디', '과학', '코미디의 모험', '드라마', '이능력', '타임슬립', 
'이능력 배틀', '모험 코미디', '퇴마', '고어', '배구', '카지노', '판타지 밀리터리', '로맨스', 
'닌자', '옴니버스', '성인', '배틀액션', '야오이', '음악 비디오 일상', '판타지의 드라마', 
'공상과학', '테니스', '서부극', '코미디 로맨스', '미술', '치유', '러브코미디', '배틀로얄', 
'육아', '음식', '복싱', '에로틱 코미디', '첩보', '미식축구', '스릴러', '코미디 밀리터리', 
'역사 드라마', '서커스', '삼양출판사', '빙의', 'SF 학원 배틀', '초자연', '스팀펑크', 
'이세계', '사무라이', '메카닉', '배틀의 코미디', '야구', '시트콤', '모험모험', '액션 모험', 
'자전거', '판타지 액션', '피겨 스케이팅', '느와르', '전쟁의 드라마', '공포', '사이버펑크', 
'복수', '스페이스 오페라', '사건', '노가미 타케시', '가부키', '서바이벌', '의학', '우화', 
'캠핑', '만담', '각본: 엔도 아키노리; 코나카 치아키', '와인', '스포츠 왕도', '배틀', 
'오토코노코', '아포칼립스', '연애', '연애 모험', '음악', '탁구', '무예', '드라마 메카', 
'공포 호러', '수영', 'TS', '다크 판타지', 'SM', '학원 드라마', '자동차', 
'호색로맨스 공상과학', '오타쿠', '삼국지', '해적', '추리', '밴드', '댄스', '우주', 
'마왕', '전생', '쿠킹 판타지', '경찰', '미스터리', '시대극', '마작', '취주악', 
'코미디 공상과학', '에로', '공상과학 코미디', '해학', '생존', '호러', '하렘', '동화', 
'패밀리 드라마', '패러디', '전략', '19금의 로맨틱 코미디', '코미디', '9금', '의료', 
'스릴러액션', '핵 앤드 슬래시', '액션', '액션 월간 코미디 제논', '골프', '개그의 밀리터리', 
'요괴', '드라마 로맨스', '대체역사', '슈팅', '서부', 'BL', '괴도', '법률 드라마', 
'드라마의 판타지'

큰 틀로 쓸만한 장르들을 뽑아보자.

 

코미디, 블랙 코미디, 아포칼립스, SF, 판타지, 모험, 메카, 액션, 스릴러, 일상, 드라마, 백합, 19금, 치유, 학원, 심리, 로맨스, 로맨틱 코미디, 가족, 드라마, 개그, 스포츠, 이세계, 미스터리, 공포, 공상과학, 시대극

 

 

여기서 이제 이상한거 찾아야하니까 한줄로 줄세우기 해보자

 

서커스 동화 서사 역사 판타지의 드라마 다크 히어로 괴도 시트콤 19금의 로맨틱 코미디 에로틱 코미디 연애 모험 대체역사 우화 마법소녀의 마법 만담 사극 청춘 육아 러브코미디 군사 판타지T마법 느와르 드라마 로맨스 우주서부코미디 의학 격투 연극 판타지 액션 빙의 스포일러 캠핑 SF 코미디 드라마 모험 요괴 호러 코미디 밀리터리 TS 감성 배틀액션 전략 9금 19금미스터리 슬랩스틱 드라마의 로맨스 코메디 등장인 패러디 아이돌 고어 오토메이트의 판타지 우주 브로맨스 연애 닌자 스파이 미스터리 던전 SF의 모험 레스토랑 미식축구 해적 쿠킹 판타지 세카이

경제 로맨스일상 음악 요괴 초능력 퇴마 삼국지 심리의 미스터리 요리 모험 메카 스릴러액션 학원 드라마 서부극 레이싱 미술 권투 마녀의 로맨스 액션 모험 무예 서부 악마 양키 장편 드라마 에로 왕도 역사 마법 배구 바이크 전대 아포칼립스 SF 배틀로얄 현대 OST 배틀의 코미디 취주악 와인 해학 BL 추리 밴드 스팀펑크 실험 첩보 회귀 노가미 타케시 전쟁의 드라마 야쿠자 복싱 패밀리 드라마 착각 군상극 스포츠 왕도 마법 모험 마법소녀 교사 사이버펑크 일상드라마 댄스 학원 배틀 범죄

SF의 공상과학 자전거 갱스터 역사의 드라마 사건 스릴러 스릴러 등산 환생 히어로 슈팅 슬래셔 마왕 가부키 배틀 코미디의 판타지 아동 불교 타임슬립 성인 액션 월간 코미디 제논 오타쿠 역사야오이 음악 비디오 일상 액션 스릴러 뱀파이어 헬스 다크 판타지 오컬트 이능력 배틀 삼양출판사 하렘 야오이 초자연 밀리터리 모험모험 이능력 루프 과자 전생 시골 자동차 각본: 엔도 아키노리; 코나카 치아키 개그의 밀리터리 야구 좀비 혼고 미츠루 의료 호러 재난 사변 유도 법률 드라마 복수 탁구 마술적 사실주의 모험 코미디 메카닉 일상 치유 코미디 공상과학 핵 앤드 슬래시

수영 코미디 메카 시대 해양 19금의 로맨스 경찰 농업 스핀오프 과학 스페이스 오페라 축구 음식 골프 무협 옴니버스 로맨스 판타지 스파이 드라마의 판타지 판타지 밀리터리 오토코노코 마작 SM 마법 드라마 메카 코미디의 모험 SF 스릴러의 드라마 호색로맨스 공상과학 역사 드라마 피겨 스케이팅 코미디 로맨스 테니스 드라마의 모험 공포 호러 흡혈귀 여행 생존 일상 코미디 다크 코미디 전쟁 이야기 전차 19금의 코미디 괴수 카지노 나가사키 켄지 도박 천사 잡지 연재 SF 학원 배틀 드라마 스페이스 오페라 슬픔 서바이벌 성인식 농구 오컬트 추리 사무라이 시간여행 공상과학 코미디 고양이 프로레슬링 전쟁 디스토피아 누아르

 

여기서 이상한 부분들 치환해주자.

 

 

중복도 제거해주자

 

결과

농업 닌자 댄스 SM 바이크 마작 현대 추리 아이돌 와인 뱀파이어 야쿠자 등산 착각 축구 캠핑 오타쿠 로맨틱 스팀펑크 브로맨스 슈팅 delete모험 빙의 사극 슬픔 무예 갱스터 다크 판타지 우주 불교 권투 아동 환생 음악 배틀액션 이능력 첩보 시골 밴드 성인식 양키 삼국지 사건 프로레슬링 재난 스파이 농구 루프 도박 타임슬립 서바이벌 요괴 회귀 해적 우화 레이싱 서커스 천사 육아 전략

골프 패러디 전대 해양 의학 테니스 하렘 헬스 대체역사 전생 생존 세카이 음식 만담 해학 BL 스포일러 연애 디스토피아 던전 서부극 흡혈귀 복싱 과학 무협 연극 스핀오프 스페이스 오페라 에로 여행 경찰 TS 군사 다크 히어로 퇴마 119금 배틀로얄 피겨 스케이팅 청춘 다크 코미디 시간여행 자전거 가부키 전쟁 느와르 초능력 유도 고어 레스토랑 사이버펑크 delete 악마 고양이 범죄 군상극 서부 사변 옴니버스 성인 동화

메카닉 초자연 마왕 의료 배구 마법소녀 복수 서사 슬래셔 괴도 호러 히어로 야구 수영 오컬트 전차 요리 슬랩스틱 감성 역사 시대 과자 SF 학원 시트콤 배틀 좀비 미식축구 마법 괴수 왕도 격투 밀리터리 사무라이 탁구 오토코노코 교사 취주악 카지노 미술 경제 자동차 실험

 

다시 이상해 보이는거 치환하고 중복 제거해주자.

 

결과

축구 감성 옴니버스 프로레슬링 테니스 하렘 사건 환생 회귀 삼국지 미식축구 서부극 요리 배틀액션 괴수 히어로 사이버펑크 마작 사무라이 delete 초자연 루프 스페이스 오페라 성인 다크 판타지 사극 과학 스팀펑크 추리 의료 등산 서커스 바이크 미술 밀리터리 호러 연극 다크 코미디 자전거 TS 카지노 탁구 천사 괴도 밴드 경찰 유도 서사 현대 재난 초능력 착각 헬스 의학

사변 피겨 스케이팅 레이싱 마왕 BL 닌자 해양 음식 해학 브로맨스 갱스터 느와르 오타쿠 음악 세카이 우화 경제 배틀 슬픔 스포일러 야쿠자 슈팅 오토코노코 생존 시골 배틀로얄 아동 우주 퇴마 수영 연애 슬랩스틱 왕도 여행 아이돌 레스토랑 전차 요괴 시트콤 복수 고양이 마법 복싱 취주악 디스토피아 도박 군상극 스핀오프 교사 골프 전대 청춘 자동차 권투

배구 역사 농업 와인 악마 야구 무예 마법소녀 던전 불교 고어 무협 로맨틱 다크 히어로 만담 메카닉 가부키 서바이벌 성인식 대체역사 육아 전략 흡혈귀 타임슬립 동화 서부 시대 시간여행 격투 이능력 전생 양키 과자 좀비 빙의 SM 뱀파이어 캠핑 범죄 스파이 해적 댄스 실험 첩보 농구 패러디 군사 오컬트 전쟁

 

이제 이상한거는 delete, 배틀액션, 성인식 3개밖에 안보인다.

나머지는 직접 찾아서 지워주자.

 

 

이제 장르를 제외한 나머지는 모두 C 시트인 "태그"로 옮기자.

 

 

결과

 

이정도면 충분하다! 이제 하나로 합친 엑셀 파일도 만들자.

 

 

 

오늘은 여기까지!

내일은 공백인 데이터들 찾아서 정리해주고, 차후에 애니가 나오고나서 업데이트를 해줘야할테니까 그 부분도 만들어야겠다.