티스토리

잘하는게없어요

검색하기

블로그 홈

잘하는게없어요

mj9245.tistory.com/m

금잔디명예소방관 님의 블로그입니다.

구독자: 0

방명록 방문하기

주요 글 목록

DreamBooth: Fine Tuning Text-to-Image Diffusion Models for Subject-Driven Generation 논문 리뷰 Stable Diffusion webui에서 사용가능한 fine tuning 기법 4가지 다 끝낼 예정 힘내자..^^! Abstract 대규모 Text to Image 모델들은 놀라운 발전을 이루었지만, 주어진 세트에서 주체의 외모를 모방하고 다른 맥락에서의 새로운 재현을 합성하는 능력이 부족하다. 이 논문에서는 T2I diffusion 모델의 "Personalization"에 대한 새로운 접근 방식을 제시한다(사용자의 요구에 특화된 모델). 주체의 몇장 이미지를 입력으로 주고, 사전 훈련된 T2I 모델(이 논문에서는 Imagen 사용, 그러나 특정 모델에 제한되지 않는다고 함)을 미세 조정하여 해당 주체와 고유 식별자를 연결하는 방법을 배우게 한다. 주체가 모델의 출력 도메인에 내장된 후, 고유 식별자.. 공감수 2 댓글수 0 2023. 7. 17.
GPT-4 Technical Report Paper 리뷰 (Visual Input에 중점두기) 내가 판 100 페이지 논문리뷰 무덤.. 땅파러 간다 Abstract GPT-4는 이미지와 텍스트 입력을 받고 텍스트 출력을 생성할 수 있는 large-scale multimodal 모델이다. 여러 학문적인 벤치마크에서 인간 수준의 성능을 출력함. (시험 점수 상위 10%, 변호사 시험 통과) Pre-trained 된 Transformer 모델이다. Post-training alignment process results를 통해서 사실성과 원하는 동작에 대한 성능이 향상됨. 이 Report는 GPT-4의 계산량의 1/1000 이상의 모델로 훈련된 결과를 기반으로 함. 1. Introduction 이 레포트에서 강조하는 것 : 이미지와 텍스트 입력 처리, 텍스트 출력 생성이 가능한 대규모 멀티모달 모델이라는.. 공감수 0 댓글수 3 2023. 6. 8.
Robust Speech Recognition via Large-Scale Weak Supervision (=OpenAI Whisper) Paper 리뷰 Abstract 이 논문에서는 음성 처리 시스템의 능력을 연구하였다. 68만 시간의 다국어 및 다작업 supervision을 적용한 결과, 일바적인 벤치마크에서 잘 일반화되면서 다른 모델들과의 경쟁력을 갖지만 어떠한 파인튜닝도 필요하지 않은 제로샷 transfer setting에서 작동한다. 정확도와 견고성(robust)을 올리고, 이 모델의 추론코드를 공개하여 견고한(robust) 음성 처리에 대한 추가적인 연구의 기반으로 활용되고자 한다. 1. Introduction 음성인식 분야의 발전은 Way2Vec 2.0과 같은 unsupervised pre-training techniques (비지도 사전 훈련 기법)의 개발로 인해 활기를 얻었다. 이 방법은 인간이 직접 라벨을 작성할 필요 없이 날것의 오디오.. 공감수 1 댓글수 1 2023. 5. 8.
Attend-and-Excite: Attention-Based Semantic Guidance for Text-to-Image Diffusion Models 논문 리뷰 Abstract 현재의 T2I 모델은 탁월한 능력을 보여주지만, 의미를 완전히 전달하는 이미지를 생성하는데는 여전히 실패할 확률이 있다. 이 논문에서는 공개젹으로 사용 가능한 Stable Diffusion을 분석하고, 이를 이용하여 입력 프롬프트에서 하나 이상의 주제를 생성하지 못하는 catastrophic neglect를 평가한다. 또한 모델이 해당 주제의 속성(예를 들어 색깔과 같은)을 올바르게 bind하지 못한다는 일부 케이스를 발견했다. 이러한 실패를 줄이기 위해 이 논문에서는 생성된 이미지의 fidelity를 향상시키기 위해 inference time동안 신속하게 생성 프로세스에 개입하는 것을 추구하는 Generative Semantic Nursing(GSN)이라는 개념을 소개한다. Attend.. 공감수 0 댓글수 0 2023. 3. 7.
High-Resolution Image Synthesis with Latent Diffusion Models 논문 리뷰 A-1. Probability and Likelihood - Machine Learning 강의노트 (wikidocs.net) What are Stable Diffusion Models and Why are they a Step Forward for Image Generation? | by J. Rafid Siddiqui, PhD | Towards Data Science What are Stable Diffusion Models and Why are they a Step Forward for Image Generation? An Easy Guide to Latent Diffusion Models towardsdatascience.com semantic segmentation의 목적과 대표 알고리즘 FCN.. 공감수 1 댓글수 0 2023. 1. 9.
An Image is Worth One Word: Personalizing Text-to-Image Generation using Textual Inversion 논문 리뷰 이 논문은 개인적으로 읽을 일이 생겨서.. 읽기 시작햇는데 파파고에서 조금 어려운 말을 내 식으로 해석하고 내가 모르는 이론들을 추가로 더 조사한 정도다 대충 읽어서는 이해가 안돼서 진짜 한문단한문단 번역해서 쓸데없는 내용까지 있을수도. 중간중간 영어로 쓴 부분은 내가 공부하면서는 무슨느낌인지는 이해했지만 한글로 표현하기는 어려운.. 단순히 어휘력에 한계를 느껴 영어로 표시함 Abstract Text-to-image 모델은 자연어를 통해서 이전에 없던 창조적인 자유를 제공한다. 그러나 이 자유가 어떻게 특정한 독특한 개념의 이미지를 생성하는지, 또는 새로운 역할과 장면에서 구성하는지는 불분명하다. 이 논문에서는 그런 창조적인 자유를 허가하는 심플한 접근법을 제공하는데, 객체 또는 스타일과 같이 사용자가 .. 공감수 0 댓글수 0 2023. 1. 4.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.