UPGRADE with TOKYO第52回を開催しました！（結果速報）｜UPGRADE with TOKYO（東京都 公式） note.com/upgrade_tokyo/… 優勝しました。 これから東京都の下水道施設の設備点検を、アクティブセンシング＋弊社エッジAI技術で進めてまります！ ドローン搭載で自動点検も視野に入ったプロジェクトです。

よし、最後の2本のConformerも無くせた。アルゴリズムからほぼ精度低下無しでTransformer、Conformer両方外せたぞ。これは勝ったなｗ 旧世代NLP勢の意地。。 結局あの界隈は長期記憶メモリが欲しいのか、エントロピー計算したいのか全部ごった煮にしすぎなんだよ。

ChatGPT5.2が本当に使えなくなってきた。 まともな思考が望めないからProで実行したら1時間近く考えた挙げ句、ダウンロードシンクもらってダウンロードしようとしたら、ファイルがないと言われた。。。 落とせないと言ったら再試行はじめた。また1時間近く。。。そしてまた落とせない。なんだこれ。

たまに『Transformerのような基礎研究の突破口が必要だから、今のスケーリング競争をやめて基礎研究に戻ろう』という意見を耳にしますが、当時GoogleBrainに在籍していた立場から言わせてもらえば、Transformerこそが現代の大規模スケーリング研究の幕開けでした。Transformerの最大の貢献は、LSTM等の

記事を投稿しました！ SRAM数KBで動く。エッジAIのための日本語トークナイザ「mmjp」をC99で書いた qiita.com/shin1985/items… #Qiita 最近私の昔のNLP研究のOSSを使うことが多く、マイコン向け実装を追加したついでにQiita記事を書きました。QCの案件でも使ってます！マイコンのSLMにどうぞ！

うお、、、昨日案件の話通ったメールきてた。海外メールだからスルーしてた。 これはすごい。うちのスケールが桁で一気に上がるぞ。やばいやばい。第一希望の相手だしここ抑えたらもう勝ちやん。国内パートナー早く選定しなきゃ。

言語処理はある意味ヒューリスティックを入れるためのひとつの軽量化手段。でも情報落ちする。 うちがよくやるのは並行して学習時だけ音声情報の中間表現をモデルに流し込む。もちろんSloosのオプトインのプラットフォーム持ってるからやれるとかはあるけど。2万時間はないと有意差出ないからなあ。。

都　下水道管渠の非破壊検査手法構築　ＱｕａｎｔｕｍＣｏｒｅと協働 | 建通新聞 電子版 digital.kentsu.co.jp/articles/artcl…

まじでそう。5億超えるまでは理屈抜きでこれが欲しい。突破力、とにかく突破力。

NVIDIA公式から、 遅延がほぼゼロの音声AIが発表されました。 オープンソースで重みも無料。 人間と聞き分けがつかない声で、 会話にラグがないのが最大の強み。 詳しくはこちら👇

やべえ本当に1875年までのデータだけで学習させたLLM作った人出てきた。時間あったら手元で試してそれ以降の発見の何は答えられて何が答えられないのかめちゃくちゃ試したい。 github.com/haykgrigo3/Tim…

小田原で大学を作ろうと企画しています 入学生の半分はもちろん若いひと達ですが 残りの半分は老人にしたいと考えています 退職して悠々自適している人の中には学び直ししたいと思っている方々が居られると思うので もちろん大学院も 積極的にリクルートします あとの25%は外国の人

うちが5年くらい前にMicrosoft for Startupsに選ばれて、3000万円のAzureクレジットを頂いたのに近い状況か。 まあ提携といえば提携だけど、ミスリード起きるよね。

GPT、Grok、Claudeは「正直ベース」という枕詞を付けると、それまでの会話に寄り添った予定調和のバイアスを単に排除するだけの解答が期待できるけど、Geminiは、あえて反対意見を並べて真逆の結論に無理にバイアスをかけていくので、結論ではなく、賛成・反対の意見を列挙するためのツールって感じ。

GPTは「勝ち筋」「崩れる」言い過ぎ。なんて独特な言い回しの人を学習してんだろｗ

家族が私以外全員インフルエンザB型にかかってしまい、 私までやはり…逃げようがない。。 やっと落ち着いたけど、週末から今日までちょっと休んだだけで、この時期だから依頼仕事が山積みになってしまった。。