Grok のアルゴリズムを詳解する

by

Grok の動作は、巨大な言語モデルが入力を受け取り、完成した回答を一度に返すという単純な構図では説明できない。最下層では、入力された文字列をトークンへ分割し、数値ベクトルへ変換したうえで、文脈に続く次のトークンの確率分 … 続きを読む

再学習に必要な情報量は課題構造で決まる

by

大量のデータで学習した計算機モデルを再現するには、学習時に使ったデータをすべて保存し続けなければならないのだろうか。この問いでは、学習に必要なデータ量と、学習後に保持すべき情報量を分ける必要がある。大量の標本は、未知の規 … 続きを読む

クラウドでは内部も設計対象になる

by

暗号化は、情報を守るための強力な技術である。しかし、暗号化されていることと、情報が安全に扱われていることは同じではない。通信内容が読みにくくなっていても、その通信がどこで平文になり、どこで複製され、どの権限で参照され、ど … 続きを読む

2026 年上期の Devin の進化を振り返る

by

2026 年上半期の Devin を見ると、変化の中心は、AI がコードを書く能力の向上だけには収まらない。より重要なのは、開発作業の置き場所が変わったことである。従来の開発支援 AI は、開発者の手元で候補を出し、説明 … 続きを読む

カタツムリの殻は環境に応答する

by

濡れると模様が消えるカタツムリがいる。乾いているときには、殻に白い斑紋が見える。ところが雨や水分で濡れると、その白い模様が消え、殻全体が暗く見える。さらに乾くと、模様はふたたび現れる。東京大学大学院理学系研究科・理学部の … 続きを読む

生命への問いを設計する科学

by

京都大学などの研究グループが発表した「ごちゃまぜ人工基質法」は、新しい酵素を多数見つけた研究である。同時に、それは生命科学における問いの作り方を変える研究でもある。研究成果としてまず重要なのは、ペプチドへ脂質を付加する新 … 続きを読む