
未踏IT スーパークリエータ
落合陽一PM > 和田氏は本プロジェクトにおいて、特に機械学習とコンピュータビジョンの領域で卓越した技術的貢献を示した。無限の条件が存在する自然環境下において高い汎化性能を有しつつ、比較的非力なコンピュータ上でも低レイテンシ・高スループットに動作する機械学習モデルの構築という挑戦的課題に取り組んだ。
Keio Univ. D2
学振DC1 | 未踏IT'24 スーパークリエータ

落合陽一PM > 和田氏は本プロジェクトにおいて、特に機械学習とコンピュータビジョンの領域で卓越した技術的貢献を示した。無限の条件が存在する自然環境下において高い汎化性能を有しつつ、比較的非力なコンピュータ上でも低レイテンシ・高スループットに動作する機械学習モデルの構築という挑戦的課題に取り組んだ。

本システムでは、「モーションキャプチャ等を用いずに、カメラ画像のみから自己位置推定を行う手法(Visual Inertial Odometry)」「機械学習に基づき花の姿勢を認識する画像認識技術」「草木や果樹棚、他ドローンとの衝突を避けながらドローンを群制御する制御プランナ」等により、未知の不整地環境でも作業を可能にする。さらに、棚下に潜り込んで、葉面や花弁に対する直接的な散布を行うことができる機体も開発する。
近年,画像内に存在しない物体や,物体間の関係を誤認識するハルシネーション(幻覚) が問題視されている.一般に,幻覚は MLLM の Image Captioning性能により評価される.そのため幻覚の問題を低減するには,幻覚を適切に評価できる高性能なImage Captioning向け自動評価尺度が必要である.しかし,既存の自動評価尺度は人間との相関が依然として低く [Sarto+ CVPR23],円滑な改良サイクルのもと,幻覚の発生頻度を半自動的に改善していくことは困難である ...
![[CVPR24 (Highlight)] Polos](https://yuiga.dev/polos/images/eye-catch.webp)
Polos: Multimodal Metric Learning from Human Feedback for Image Captioning

SONYのnnablaチャンネルに動画を寄稿しました.この動画では,Transformerに代わる次世代のモデルとも言われているH3(Hungry Hungry Hippos)論文を解説します.本論文では先行研究であるS4の弱点を分析し,S4の弱点を補う形としてH3を提案しています.

Preferred Networks様で約二ヶ月の研究インターンに参加しました.本記事では当研究の一部をご報告させて頂いています.
![[CVPR23] DialMAT](https://user-images.githubusercontent.com/51681991/245792438-00fb772b-2590-4269-a05b-24db71e1aef4.jpg)
The model secured the top position in the DialFRED Challenge, which took place at the CVPR 2023 Embodied AI workshop. Our" target="_blank" class="underline text-blue-600 visited:text-purple-700 hover:text-blue-700">https://embodied-ai.org/papers/2023/23.pdf'>Our paper was accepted at CVPR23 Workshop. (equal contributor)
![[CoNLL23] JaSPICE](https://yuiga.dev/jaspice/images/eye-catch.jpg)
JaSPICE: Automatic Evaluation Metric Using Predicate-Argument Structures for Image Captioning Models
![[IROS23] Multimodal Diffusion Segmentation Model](images/diffusion.png)
Multimodal Diffusion Segmentation Model for Object Segmentation from Manipulation Instructions

Flareformer: Large-scale Solar Flare Prediction by Integrating Magnetograms and Sunspot Physical Features
![[ACCV22] Flare Transformer](https://user-images.githubusercontent.com/75234574/154173007-d11c61d1-3541-4519-974b-a077fcceaa3b.png)
Flare Transformer: Solar Flare Prediction using Magnetograms and Sunspot Physical Features. Accepted at ACCV 2022.

A simple cli viewer for Scrapbox. Written in pure golang ʕ◉ϖ◉ʔ.

Backup any articles from note.com.
noteをバックアップ・エクスポートするWebサービス

When reading papers recently uploaded to arxiv, it is important to approximate the reliability of the paper. The easiest method to filter papers is to check the number of citations of the authors. With this application, you can account for the total number of citations (= credibility of a paper) in an instant from the arxiv link.
![[ICASSP22] CORSMAL Challenge](images/CORSMAL.webp)
Our team KEIO-ICS participated in the CORSMAL challenge 2021. Our solution won "capacity and dimensions estimation", "filling mass estimation", and "container capacity estimation"!
Our paper was accepted at ICASSP 2022. (equal contributor)

A simple shell written in OCaml + Lex + Yacc. Just a toy for learning.

An Optimized Misskey Client App for iOS.
iOS用のMisskeyクライアント.

PortSnippet monitors source codes and automatically generates snippets.Only for VS Code!

A service to tweet your latest progress report for AtCoder. Written in Typescript with Nuxt.js

An elegant Misskey framework written in Swift.

iCimulator simulates camera functions on iOS Simulator with images, videos, or your MacBook Camera.

A flexible TabBarController library with search tab like SNKRS, written in pure swift.

A tweak that enables your Apple Watch to show a third-party incoming call. Released on Packix. Thanks for 7222 Downloads!!

A lightweight TextView where can be attached any UIView.

「字が汚いねと君に言われて、僕は救われた気がしたんだ」 ── 僕の無意識は、この経験をテムズ川の深いところから、音も立てずに掬い上げてきた...

プログラムを書くことと小説を執筆することは似ている. けれども, 滔々と流れゆく記号列を操作するという相似形の作用線において, 両者には決定的に異なる特性が一つだけある ─ それは...

先日, 研究室の勉強会でこの本のGibbs Samplingの章(9.3.4)を担当しました. 実際にpythonで実装してみたりしたので...

cakesがサービス終了を発表してから早1ヶ月。このニュースに驚かれた方も多いでしょう。cakesが終わるとなれば、明日は我が身。noteのバックアップも不安で...

こんにちは。去年の春、僕は理工学部の一年生として慶應義塾大学に入学しました。ですが、入学してすぐ、4月5月あたりでしょう...