AromaGen: 다중 모드 언어 모델을 활용한 풍부한 후각 경험의 실시간 생성

AromaGen: Interactive Generation of Rich Olfactory Experiences with Multimodal Language Models

후각은 음식, 기억, 사회적 경험과 깊이 연결되어 있어, 연구자들은 오랫동안 후각을 인터랙티브 시스템에 통합하고자 노력해 왔습니다. 그러나 대부분의 후각 인터페이스는 여전히 고정된 향 카트리지와 사전 정의된 생성 패턴에 국한되어 있으며, 대규모 후각 데이터셋의 부족은 AI 기반 접근 방식을 더욱 제한했습니다. 본 연구에서는 자유 형식의 텍스트 또는 시각적 입력으로부터 실시간으로 일반적인 향을 생성할 수 있는 AI 기반 웨어러블 인터페이스인 AromaGen을 제시합니다. AromaGen은 잠재적인 후각 지식을 활용하여 의미 있는 입력을 12가지 정교하게 선택된 기본 향 물질의 구조화된 혼합물로 매핑하는 다중 모드 LLM으로 작동하며, 이 혼합물은 목걸이형 디스펜서를 통해 방출됩니다. 사용자는 자연어 피드백을 통해 문맥 학습 방식을 사용하여 생성된 향을 반복적으로 개선할 수 있습니다. 통제된 사용자 연구($N = 26$)를 통해, AromaGen은 초기 생성 단계에서 인간이 구성한 혼합물과 유사한 성능을 보이며, 반복적인 개선을 통해 실제 음식 향과 유사한 수준(중앙값 8/10)에 도달하고, 인공적인 느낌을 실제 음식과 유사한 수준으로 감소시켰습니다. AromaGen은 실제 환경에서의 인터랙티브 후각 생성에 한 걸음 더 다가가며, 의사소통, 웰빙, 몰입형 기술 분야에서 새로운 가능성을 열어줍니다.

Smell's deep connection with food, memory, and social experience has long motivated researchers to bring olfaction into interactive systems. Yet most olfactory interfaces remain limited to fixed scent cartridges and pre-defined generation patterns, and the scarcity of large-scale olfactory datasets has further constrained AI-based approaches. We present AromaGen, an AI-powered wearable interface capable of real-time, general-purpose aroma generation from free-form text or visual inputs. AromaGen is powered by a multimodal LLM that leverages latent olfactory knowledge to map semantic inputs to structured mixtures of 12 carefully selected base odorants, released through a neck-worn dispenser. Users can iteratively refine generated aromas through natural language feedback via in-context learning. Through a controlled user study ($N = 26$), AromaGen matches human-composed mixtures in zero-shot generation and significantly surpasses them after iterative refinement, achieving a median similarity of 8/10 to real food aromas and reducing perceived artificiality to levels comparable to real food. AromaGen is a step towards real-world interactive aroma generation, opening new possibilities for communication, wellbeing, and immersive technologies.