Akira T. (@akira_dev) header
Akira T. (@akira_dev) profile picture

技術者 / 企業研究者(因果推論、意思決定のための機械学習)。博士(情報学)← 社D ← JTBC ← 航空宇宙工 / バイオリン / ジャグリング / ロボコン / スマブラ / 自作キーボード / 3Dプリンタ / 筋トレ / 立ち読み / タイパ育児

東京
Joined October 2009
Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)Photo by Akira T. (@akira_dev)
今は亡きMoments機能で作ってた書籍紹介ツイートまとめておくか
博論をまとめるときにパラパラ参照した本の一つ。不確実性・確率とは何かという哲学議論から始まり、不確実性の下での人間の(合理的な)意思決定を記述するモデル化として、定番の期待効用理論(vNM定理)やその後の最新の行動経済理論を紹介しながら、再度確率とは何かに迫っていく、というお話。
1
1
1
15
57,991
本出す(くらいの専門性を持つ)の、学生時代に立てた人生のサブゴールのうちの1つ(の中でも比較的難しそうなやつ)だったので、次の人生の目標を考えたい。
6
262
病み上がりなのと、本の盆栽ができなくなったことなどからちょっと鬱モード
1
328
3歳児が反抗期で全てをいちいち拒否するので疲れるというのもある。 「そろそろ出かけるから電車おしまいして」「イヤ!!!」「電車しまって」「イヤ!!!」「服着替えて」「イヤ!!!」「歯磨きするから来て」「イヤ!!!」「歯磨きするから来て」「イヤ!!!」「靴履いて」「イヤーー!!!!」
126
音楽理論って結局よくわかってないんだよな。音楽理論ってあるのか無いのかもわからん。なんでマイナーは暗いのかもわからん。
204
ちょうちょ、丸サ進行でいけるんや。もしや丸サ進行って割と何でもいける?
204
偏見だけど、娘いる父親って人生に満足してる感ない?僕も娘も欲しいなと思っていたんだけどその理由を考えると、娘ってただ愛せそう。息子だとなんというか、いずれ出ていく世間の荒波に備えて鍛えておいてやる責任を感じてしまう。世の中から雑に扱われることに慣れさせておかなければとか。
237
11/30刊行『因果機械学習』の中から、比較的独立して楽しめるコラムを1つずつ公開します!(出版社許可済み) 1つ目は「因果性の定義をめぐる哲学」です。 事前知識としてシンプソンのパラドックス↓をふまえた議論になります。 ja.wikipedia.org/wiki/%E3%82… --- 因果関係というものは、日常やさまざまな専門分野でその存在が仮定されているにもかかわらず、分野間で共通した単一の定義が定まっているわけではありません。むしろ分野によっていくつかの因果があるという多元論的な見方が、科学哲学の分野において提唱されています。そのような因果の定式化の試みをいくつか簡単に紹介します。詳細は科学哲学の書籍を参照してください。 近代的な科学を踏まえて因果について定義を試みた初期の代表的な哲学者がデイヴィッド・ヒュームです。ヒュームは、ギリシャ以来の哲学が重視してきた、理性や論理による思考に基づく真理探究には限界があり、数学以外の真理の探究は経験と観察に基づくと考えました。因果についても同様に、因果とされるものはすべて真理であるとは限らず、単に経験から抽出した規則性のことを人は因果関係としているのだと考えました。ヒューム以後も、規則性を基礎とする定義がさまざまに考案されましたが、いずれも問題を抱えていました。本章で紹介した擬似相関が問題の一例です。 これに対してデイヴィッド・ルイスが提案したのが反事実条件を中心に据える考え方です。植物の種に水をやったから発芽した、というように、ある原因があったからこそ今の結果が生まれた、もしその原因がなかったら違った結果になっていた、という、「ありえた別の結果」を想定し、それと現実との違いに焦点を当てる議論です。この考え方は現在の因果推論における反実仮想に受け継がれています。先のシンプソンのパラドックスの状況においても、「この人が(若いにもかかわらず)もし運動をたくさんしていたら」という反事実条件に対して正しく推論できれば「コレステロールが下がる」という結果を導くことができ、矛盾が生じません。 反事実条件に対しても批判があり、今ある世界と別の可能性は特定できるのか、という問題がその1つです。たとえば「もしこの面接応募者が男性だったら」という条件がどのような世界に対応するのか必ずしも自明ではありません。性別が異なれば、身長や体重、筋力は相応に異なる状態を仮定するのでしょうか。学歴はどうでしょうか。ルイスは、「最も現実に類似した世界」を考えればよい、としましたが、その際に用いる類似度の定義についてコンセンサスが得られるかどうかは別の問題となるでしょう。 反事実説に対するもう1つの批判は、その前提とする可能世界が現実には観測できないということです。ウェスリー・サモンは「知識はあくまで現実の経験に基づくべき」という批判を行い、因果はプロセスであるという説を唱えました。物理学では、ある事象の影響が離れた場所に瞬時に現れることはないとされています。影響は局所的にとどまり、離れた場所に影響しているように見えても、局所的な影響が光の速度以下で伝播しているだけとみなせます。つまり、因果的な関連を分解して微視的に見ると、時空間的に隣接した事象が連鎖するプロセスが常に関与しているはずなので、それをこそ因果と呼ぶべき、というわけです。 ただし、連鎖するように見えるプロセスの中でも、スクリーン上のレーザーポインターの点の動きは、スクリーンの前に障害物があってそれを横切ると、一瞬で障害物上に位置が移動します。つまり、局所性の制約を受けません。このような見かけのプロセスを真の因果と区別するため、運動量やエネルギーといった保存量をもつ対象に注目するのが、プロセス説を精緻化した保存量説です。ビリヤードの球がテーブル上を運動し他の球に当たると、双方の球の速度が変化する、すなわち運動量の交換が発生します。このように、保存量をもつ対象の動き(時空間座標上の軌跡である世界線)と、その保存量の交換を通じた相互作用が因果であると考えれば、物理学に基づいて客観的に因果の考察が可能となります。また、必ずしも物理学のレイヤーまで微視的に分解せずとも、科学の営みは通常、1段階だけ微視的なレベルでの説明で十分とされているとするメカニズム説も登場しました。 プロセス説やメカニズム説は自然科学を学んだ方には特に馴染みやすい考え方かもしれませんが、やはり難点もあります。日常の世界ではしばしば「当然こうすべきもの」というルールが存在し、そこからの逸脱を問題にします。たとえば、「横断歩道を渡っている歩行者がいたら車は停止すべき」というルールがあり、運転者がブレーキを踏まずに事故が起きてしまった場合、この事故の原因は「ブレーキを踏まなかったこと」と考えるのが妥当と思われます。しかし、プロセス説ではこのような「何かの事象が存在しなかったため」という、欠落因果を自然に扱うことが難しいです。 このように、因果といっても適用される分野によってさまざまな考え方があり、要素還元的な定義として統一することは難しいと考えられています。むしろ近年は、因果を考えたい理由、我々が因果と捉えているものの特徴を記述することに焦点が移っているようです。 その1つが、ジェームズ・ウッドワードによる介入説です。介入説は、「原因に介入すれば(その変数としての値を変更すれば)結果が変化する」というものです。反事実条件の流れを汲みつつ、個別具体的な事象に関する反事実を求める代わりに、対象を記述した変数に関して議論することが特徴です。これにより、同種の事例を比較可能とし、観測不能な可能世界に訴える必要なく、現実世界での検証を可能としました。本書で扱う意思決定は基本的に介入説をベースに考えることができます。ただし、先に議論した面接における性別のように、介入不可能な状況に対する分析はやはり反事実説に基づく必要があります。統計的因果推論は主にこれら2つの説に基づいていると言ってよいと思います。 一方でプロセス説やメカニズム説も因果推論と無関係ではありません。たとえば11.1節で紹介するフロントドア基準に基づく因果推論は、原因と結果の間を媒介する変数を用いる手法です。多くの因果推論手法は、シンプソンのパラドックスを引き起こす交絡因子が観測されていない場合には対処ができません。その場合でも、原因と結果の間を媒介する変数を観察することによって、一定の条件下でバイアスのない推定が可能になることが知られています。我々がしばしば統計のみに基づくブラックボックス的な説明に納得できず、詳細なメカニズムの説明を求めたくなるのは、巨視的に見ると背景因子が入り込む余地が増えるため信用できない、という直観に基づくのかもしれません。 #因果機械学習入門 #pr amazon.co.jp/dp/4274235629
2
23
2,205
「ご飯 is eat」 3歳児語録
2
260
時オカ、老いぼれの今際の際の世迷言を間に受け、勇気のトライフォースに選ばれし勇者として薄汚い(自主規制)からコソ泥みたいに姫の自宅に忍び込むとこまできた。頭を使って困難を乗り越える実行力の大切さを教えてくれる
1
2
1,061
スマブラの厄介キャラヤングリンクのイメージ変わるかなと思ってやり始めたが、今のところロクでもないクソガキという印象が強まる
1
250
AI語のhumanizeにも "効く" らしいです。なるほど。
左がclaudeそのまま、右が0.8Bのplamo-3-translate(ローカル) ぱっと見ただけだけど、いいぞこれ
1
1
8
1,101
小さい割には賢い翻訳モデルを作ろうと思ったら、小さいくせに最強のモデルができてしまったそうです。重みもオープンです: huggingface.co/collections/p… 経緯も面白いです preferred.jp/ja/blog/tech/pl…
最近は翻訳特化LLMの開発リードをやっていました。 翻訳特化LLMとしてはぶっちぎりで世界最高クラスで、特にSLM領域のフロンティアを開拓できたと思います 開発秘話とモデル重みを公開したので見てね!4サイズで量子化とかGGUF全部出したので28リポジトリも準備しました
1
57
3
420
29,579
日本人って(?)若きスーパースターの出現によって既存の知識体系が否定されることによる代理的な下克上に夢を抱きがちなんだよな。しかも知識体系に疎くて真贋を見極めるために自ら論文読んだりもしないからスター性の担保に東大だの米国研究機関だのといった権威に頼らざるをえないという皮肉。
東大休学の林央氏(20)「卒業待てば間に合わない」急速に高度化するAIに警鐘(後編) sankei.com/article/20261101-… AIが人類を滅亡させる可能性を警告する米国の機械知能研究所(MIRI)のアウトリーチ日本責任者、林央氏(20)は、東京大学を休学し、AIの安全性を巡る問題に取り組んでいる。
4
36
3
384
25,749
相対論の件で同じ議論が進行していた nitter.cf/YasuNomu1/status/21172…
相対性理論についてやり取りしていた方に公開での議論を持ちかけましたが、考え直して、取り下げることにしました。 何度も挑発されて、私もちょっと感情的になってしまいました。相手の主張を十分に確認しないまま公開討論を提案したのは軽率だったと思います。 改めて相手の方の主張を見てみましたが、現時点では物理理論として成立しているものではなく、相対性理論と対等に討論するという形は適切ではないと思っています。 こちらから提案しておきながら取り下げることになり、相手の方には申し訳ありません。今回の件については、私自身も反省しています。お騒がせしてすみませんでした。
1
3
1,372
とはいえチャレンジするパスが全く無いのも健全では無いと思うので、相対論チャレンジャー、物理学会とかでそれ系専用のセッションが(永久機関発明家とかと一緒に)あると聞くのでそこで議論して一本化してもらってから頂上決戦する、将棋のタイトル戦みたいなシステムならアリなのではないか
1
337
実際若さへの執着は日本で特に強い気もしている。例えば、アイドル選抜番組とか甲子園に注目が集まりやすいのも、同世代とかになると急に比較してしまって「それに引き換え私は/アンタは何も積み上がってない」となって安全に応援できない。日本人は同質性が高く比較可能と思いやすいからかも。人は人
ほう、日本に限らないのですか?私も、そうかもなとは思ったものの確信がなかったので「?」をつけていました。ぜひどんな事例があるかご教示ください!
1
2
540
自分も高校の頃に地方局に取り上げてもらったことなどあり、いろいろ撮られてどういう感じになるのかなと思ったらただ「色々頑張ってる若者がいます!」くらいの感じで、オモシロコメント1つ残してあとカットされたの、なんか心性キショいなと思ったのであった(面白く仕上がっていたので良かったが)
2
189
ほう、日本に限らないのですか?私も、そうかもなとは思ったものの確信がなかったので「?」をつけていました。ぜひどんな事例があるかご教示ください!
Replying to @akira_dev
出た。日本に限らない話を日本だけに限定して話し出す奴
1
771
良い話
Replying to @akira_dev
まあお前も内容についての議論ができてない時点でかがくてきな見方ができてるとは到底思えないけどな
1
582