광고
광고
광고
광고
광고
광고
광고
광고
광고
로고

[ChatGPT-그림 그리는 로봇] CMU 연구원은 그림 그리는 AI 로봇인 로봇 페인팅 시스템 FRIDA을 제작했다. FRIDA는 예술가가 아니고, 예술가들이 협업할 수 있는 시스템이다. 이미지를 그리기 위해 로봇은 프롬프트에 대한 응답으로 텍스트 또는 이미지를 생성하는 OpenAI의 ChatGPT 및 DALL-E 2를 구동하는 것과 유사한 AI 모델을 사용한다.

운영자 | 기사입력 2023/02/28 [00:00]

[ChatGPT-그림 그리는 로봇] CMU 연구원은 그림 그리는 AI 로봇인 로봇 페인팅 시스템 FRIDA을 제작했다. FRIDA는 예술가가 아니고, 예술가들이 협업할 수 있는 시스템이다. 이미지를 그리기 위해 로봇은 프롬프트에 대한 응답으로 텍스트 또는 이미지를 생성하는 OpenAI의 ChatGPT 및 DALL-E 2를 구동하는 것과 유사한 AI 모델을 사용한다.

운영자 | 입력 : 2023/02/28 [00:00]

카네기 멜론 대학(Carnegie Mellon University) Robotics Institute의 연구원들은 페인트 브러시가 부착된 로봇 팔인 FRIDA라는 도구를 개발했다이 도구는 인공지능(AI)을 활용하여 예술 프로젝트에서 인간과 함께 작업한다.

 

이 팀은 5월에 열리는 2023 IEEE 로봇 및 자동화 국제 컨퍼런스에서 "FRIDA: 차별화 가능한 Real2Sim2Real 계획 환경을 갖춘 협업 로봇 화가라는 제목의 연구를 발표할 예정이다.

Peter Schaldenbrand는 박사이다컴퓨터 과학 학교의 로봇 공학 연구소 학생인 그는 FRIDA와 함께 일하며 AI와 창의성을 탐구한다.

 

“개구리 발레리나 그림이 있는데 정말 멋지게 나온 것 같다.”라고 그는 말했다. "정말 우스꽝스럽고 재미있다. FRIDA가 내 의견을 기반으로 생성한 놀라움을 보는 것이 정말 재미있었다고 생각한다."

 

FRIDA는 예술 발전을 위한 프레임워크 및 로보틱스 이니셔티브의 약자이다. Frida Kahlo의 이름을 따서 명명되었다.

이 연구는 Schalderbrand RI 교수진인 Jean Oh, Jim McCaam이 주도했으며 CMU 전역의 학생과 연구원들을 매료시켰다.

아티스트가 아닌 협업 도구

사용자는 텍스트 설명을 입력하거나스타일에 영감을 주는 다른 예술 작품을 제출하거나사진을 업로드하고 그것을 표현하도록 요청하여 FRIDA를 안내할 수 있다팀은 오디오와 같은 다른 입력도 테스트하고 있다.

 

"FRIDA는 로봇 페인팅 시스템이지만 FRIDA는 예술가가 아니다." Schalderbrand가 계속 말했다. “FRIDA는 소통할 아이디어를 생성하지 않는다. FRIDA는 아티스트가 협업할 수 있는 시스템이다아티스트는 FRIDA에 대한 높은 수준의 목표를 지정하면 FRIDA가 이를 실행할 수 있다.”

 

이미지를 그리기 위해 로봇은 프롬프트에 대한 응답으로 텍스트 또는 이미지를 생성하는 OpenAI ChatGPT  DALL-E 2를 구동하는 것과 유사한 AI 모델을 사용한다. FRIDA는 브러시 스트로크로 이미지를 그리는 방법을 시뮬레이션하고 머신러닝을 활용하여 진행 상황을 평가한다.

 

FRIDA의 최종 제품은 기발하고 인상적이다브러시 스트로크는 대담하고 로봇 작업에서 자주 찾는 정밀도가 부족하다.

"FRIDA는 인간과 로봇의 창의성의 교차점을 탐구하는 프로젝트이다."라고 McCann은 덧붙였다. "Frida는 캡션 이미지와 같은 작업을 수행하고 장면 콘텐츠를 이해하고 이를 예술적 생성 문제에 적용하기 위해 개발된 종류의 AI 모델을 사용하고 있다."

 

FRIDA는 예술 제작 과정에서 AI와 머신러닝을 여러 번 사용한다첫째붓을 사용하는 방법을 배우는 데 한 시간 이상을 소비한다그런 다음 입력을 이해하기 위해 OpenAI CLIP(Contrastive Language-Image Pre-Training)과 같이 인터넷에서 스크랩한 텍스트와 이미지를 페어링하는 방대한 데이터 세트에서 훈련된 시각 언어 모델을 사용한다.

 

물리적 이미지를 생성하는 데 있어 가장 중요한 기술적 과제 중 하나는 FRIDA가 시뮬레이션에서 생성하는 것과 캔버스에 그리는 것 사이의 차이인 시뮬레이션과 실제 간극을 줄이는 것이다. FRIDA real2sim2real이라는 아이디어를 사용한다여기서 로봇의 실제 브러시 스트로크는 시뮬레이터가 로봇과 페인팅 재료의 물리적 기능을 반영하고 모방하도록 훈련하는 데 사용된다.

 

FRIDA의 팀은 현재 사용하는 언어를 지속적으로 개선하여 현재 대형 시각 언어 모델의 일부 제한 사항을 해결하는 것을 목표로 한다그들은 모델에게 뉴스 기사의 헤드라인을 제공하여 세계에서 무슨 일이 일어나고 있는지에 대한 감각을 제공하고 미국 또는 서양 편견을 피하기 위해 다양한 문화를 더 잘 대표하는 이미지와 텍스트에 대해 교육했다.

unite.ai

 
ChatGPT, 그림 그리는 로봇, 협업 로봇 관련기사목록
PHOTO
1/6
광고
광고
광고
광고
광고
많이 본 기사
ChatGPT AI로봇 많이 본 기사
최신기사