こういう感じに消える＆見れないようにできる！ やり方 TL;DR CloudFlare ZeroTrustの一部を使い，常にプロキシでURLをチェックするようにしておけばよい https://www.ideasquantified.com/removing-youtube-shorts/#dnsvsurl 動画本体について ショート動画用のAPIにはクエリパラメタとして?ctier=SHがついているので，こいつらをブロック .*ctier=(O|A).*, /initplayback, youtube.com/youtubei/v1/reelも ...

gdownの時代はもう終わり https://yuiga.dev/blog/ja/posts/巨大データgdownのaccess_denied問題は諦めよう/ これからはrcloneの時代や！！ https://rclone.org/ Rclone is a command-line program to manage files on cloud storage. It is a feature-rich alternative to cloud vendors’ web storage interfaces やりかた 共有アイテムに対して，自分のドライブにショートカットを置く rclone ls gdrive: ...

福田恆存「人間・この劇的なるもの」 三國万里子「編めば編むほどわたしはわたしになっていった」 三島由紀夫「不道徳教育講座」 安部公房「死に急ぐ鯨たち・もぐら日記」 三島由紀夫「行動学入門」 pha「どこでもいいからどこかへ行きたい」 三島由紀夫「小説家の休暇」 モリー・マルーフ「脳と身体を最適化せよ！」 ジョージ・オーウェル「本vs煙 ...

状況 2ヶ月前，清涼飲料水をキーボードにこぼしてしまった 当時，キーボードを外して中を拭いたにもかかわららず，日によって調子が悪い → 気温・湿度にキーボードの調子が左右されるようになってしまった ある日はなんともないのに，別の日には，キーを押すと鈍い打鍵感 糖でキーボードの中にりんご飴が生成されてるような感じ ということでキーボー ...

概要: 他人の否定や批判の大半は、我々の知ったことではないのである いま、2つのロジックAと￢Aがあるとする。（￢AはAと正反対のロジック）。 このとき、公理系さえ変えれば、どちらの結論A/￢Aも客観的に正しい状態が存在しうる。 つまり、それぞれの公理系の中で正しい主張となりうる公理系が存在しうるのである。 この前提に立った際、 ...

修士課程での主要な活動 修士課程での主要な活動 (2023/04/01 〜 2024/09/05) 早期卒業（飛び級） 1.5年で修士を卒業し，9月から博士課程へ 論文 主著 CVPR 2024, CoNLL23 採択 (上位3.6%のCVPR Highlightへ選ばれる) 共著 CVPR WS 2023, IEEE/RSJ IROS 2023, ACCV 2024 採択 国内論文 8本 グラント関連 2025年度 JSPS 日本学術振興会特別研究員（DC1）採用 2024年度 JST BOOST 採用 未踏 2024 採択 (落合陽 ...

リンク集 Mamba: Linear-Time Sequence Modeling with Selective State Spaces https://github.com/state-spaces/mamba https://github.com/Dao-AILab/causal-conv1d 備忘録 mamba-ssmやcausal-conv1dがPEP517に準拠していないのでpoetry add <package-name>だとインスコできない poetry add <path>でもsetup.py読んでくれないからムリ → 無理やりローカルでwheelを作ってpoetry addすれば ...

🌐 project page 📄 arXiv 🤗 Dataset 主著一本がCVPR 2024に採択されました 🔥🔥🔥 朝から最高の気分です！！！#CVPR2024 pic.twitter.com/2O5cBWzQGx — YuWd (@YuigaWada) February 27, 2024 ...

double vs fp32 vs fp16 vs bfp16 double (64bit) 1/11/52 = 64 fp32 -> float (32bit) 1 / 8 / 23 = 32 fp16 -> float (16bit) 1 / 5 / 10 = 16 IEEEで規格化 bfloat16 1 / 8 / 7 = 16 指数部をfp32に合わせている 仮数部は実質的な有効数字 (粒度) を決めて，指数部は値のrangeを決めるので，仮数部を減らして指数部を増やすことで，取りうる値のrangeを最大化してあげる (仮数部) x 2^(指数部) 2^() ...

pyproject.tomlで変な制約を付けていると，poetry updateで依存関係の解決が終わらないことがある． とりあえず poetry update -vvvでverbose mode (mode 3)で出力しましょう． 大抵は無限にバージョンを遡って行っているパターンが多い． 目で追っていくと，やたらとバージョンを探索しているライブラリだったり，頻出するライ ...

CPUの主な構成要素は以下の通り： ALU（Arithmetic Logic Unit，算術論理演算装置）： ALUは，レジスタから読み出されたオペランド（操作対象のデータ）とオプコード（操作を指示するコード）を用いて，算術計算や論理演算を行う． レジスタ： レジスタは，高速な小容量の記憶装置で，CPU内で直接アクセスされるデータや指令を ...

分岐予測の失敗 → 5ns L1 / L2キャッシュ→ 0.5ns / 7ns L1 cache reference 0.5 ns Branch mispredict 5 ns L2 cache reference 7 ns Mutex lock/unlock 100 ns Main memory reference 100 ns Compress 1K bytes with Zippy 10,000 ns 0.01 ms Send 1K bytes over 1 Gbps network 10,000 ns 0.01 ms Read 1 MB sequentially from memory 250,000 ns 0.25 ms Round trip within same datacenter 500,000 ns 0.5 ms Disk seek 10,000,000 ns 10 ms Read 1 MB sequentially from network 10,000,000 ns 10 ms Read 1 MB sequentially from disk 30,000,000 ns 30 ms Send packet CA->Netherlands->CA 150,000,000 ns 150 ms Where 1 ns = 10-9 seconds 1 ms = 10-3 seconds 引用: “Numbers Everyone Should Know” from Jeff Dean. doubleのbit数 MSB・指数・仮数で1 ...

概要 巨大なembeddingをチャンクで外部に保存し，DDP(Distributed Data Parallel)を使った学習時に各GPUで読み込みたい そんなときtorch.load(path, map_location=f"cuda:{rank}")にかかる時間の分散が大きい場合がある 前提: torch.loa ...