口頭指示で化学実験するロボット研究助手

トロント大学のチームは、コンピュータービジョンと大規模言語モデルを組み合わせて、話し言葉での指示に従って複数ステップの化学実験を自動実行し、結果のレポートも作成できるデスクトップ型ロボットシステムを開発したということです。この「ORGANA」という名の「化学実験の有能なロボット助手」は、口頭指示で化学実験、24時間稼働するロボット研究助手です。今のところ、「液体の試薬を使用した非常に簡単な分析」しかできないようですが、口頭指示でここまでできれば、あと数年でもっと複雑な実験も高等指示でこなせるようになりそうです。
 
 
クリエイティブAI講座：ORGANA〜化学実験の有能なロボット助手
収録日：2024年10月25日
https://www.youtube.com/watch?v=luPsacb2Pz8
 
口頭指示で化学実験、24時間稼働するロボット研究助手　　2024.10.22
https://www.technologyreview.jp/s/348243/this-lab-robot-mixes-chemicals/
 
ORGANA: A Robotic Assistant for Automated Chemistry Experimentation and Characterization
Kourosh Darvish1,2,†, Marta Skreta1,2,†, Yuchi Zhao1,†, Naruki Yoshikawa1,2, Sagnik Som1, Miroslav Bogdanovic1, Yang Cao1, Han Hao1, Haoping Xu1,2, Alán Aspuru-Guzik1,2,‡, Animesh Garg1,2,3,‡, Florian Shkurti1,2,‡
1University of Toronto, 2Vector Institute, 3NVIDIA
†equal contribution ‡equal supervision
https://ac-rad.github.io/organa/
 
[Submitted on 13 Jan 2024]
ORGANA: A Robotic Assistant for Automated Chemistry Experimentation and Characterization
https://arxiv.org/pdf/2401.06949
 
 
Robot Research Assistant for Conducting Chemical Experiments via Verbal Instructions
 
A team from the University of Toronto has developed a desktop robotic system that combines computer vision and large language models to automatically carry out multi-step chemical experiments based on spoken instructions and even generate reports of the results. Named 'ORGANA,' this 'competent robotic assistant for chemical experiments' can conduct chemical experiments through verbal instructions and operate as a research assistant 24 hours a day. For now, it is only capable of performing 'very simple analyses using liquid reagents,' but if it can handle this much through verbal instructions, it seems likely that in a few years it will be able to handle more complex experiments with advanced instructions.