2021-hknu-cd / hair

실시간으로 머리 스타일을 변환하는 프로젝트입니다.

HAiR

Hair Attribute instance Representation

헤어스타일의 속성을 변환

개발중...🙌🙌

Documentation(https://www.notion.so/Documents-bbcec7a5a93b468c9adc3342e60209e1)

Used Repository

https://github.com/raviranjan0309/Detect-Facial-Features

https://github.com/kampta/face-seg

hair's Issues

얼굴인식의 사이즈를 지정해야함

최적사이즈

#2 여기서 어떻게 와야할지?

QR generator

• 변환 완료된 사진을 타임스탬프로 정렬 (transformer에서 반환된 사진)
• 저장된 사진은 1시간이내 삭제 또는 사용자가 직접삭제 (UI)
• 사진 다운로드는 HTTP로 ex)hair.~~/images/123456789.jpg
• [ ]

(이미지, 마스크) -> dense_orient

두개 주어지면 orient발산

얼굴(np.ndarray) -> 마스크(np.ndarray)

/checkpoint/baldgan 폴더 생성옵션

wing을 이용해서 얼굴 align

얼굴 -> np.ndarray

512 * 512사이즈면 좋을것 같아요!~

MaskOrientGenerator.py 구현

긴머리 -> 짧은 머리로 수정하려면 Mask의 1비트를 0으로 전환하여야함.

Aligner.py 구현

starGAN2 에서 wing.py를 써본 경험이 있으니 그거 활용!!

카메라에 얼굴을 비추지 않으면, 얼굴 없다고 알려주기!

Is your feature request related to a problem? Please describe.
현재 dlib은 얼굴이 사진에 꼭 있다고 가정하고 시작함

Describe the solution you'd like

Describe alternatives you've considered
A clear and concise description of any alternative solutions or features you've considered.

Additional context
Add any other context or screenshots about the feature request here.

UI단과 인터페이스를 갖는 Transformer 클래스 구현

UI측에서 사용할 수 있도록 구현 예정인 메소드

• 레퍼런스(appearance, shape, structure)를 설정하는 메소드
• 변환을 요청하는 메소드

BoundingBox.py 구현

이미지를 캡쳐했으니깐 다시 붙여야겠지요?

Scaler.py 구현

업스케일링과 다운스케일링 둘다 하기!

BoundingBox가 이미지를 벗어나면 Exception띄우기

7/21일 회의에서 발췌.

에러핸들링 구문 추가 필요.

UI

• Background
• Server Status
• reference image downloader
• transformer integration
• image not selected
• selected image
• select able image
• Camera Input
• [ ]

https://wikidocs.net/35477

파이썬 파일을 컴파일해서 제공

Is your feature request related to a problem? Please describe.
실시간 프로젝트이니깐, 컴파일해서 제공해야할것임.

Describe the solution you'd like
https://docs.python.org/ko/3.8/library/py_compile.html

Describe alternatives you've considered
A clear and concise description of any alternative solutions or features you've considered.

Additional context
Add any other context or screenshots about the feature request here.

ShapeStructureTransformer.py 구현

https://github.com/david-svitov/baldgan

이거 적용해보는것도 재미가 있겠네요

Appearance 변환 통합 테스트

AppearanceTransformer.py를 사용해서 스타일 변환 테스트해야 합니다.

Aligner가 Align시에 해상도가 떨어지는 이슈

이미지를 확대시키고, 그다음에 회전하면서 이미지가 축소되는 편이 이미지 열화가 덜할것같다
#25 참고