ゆるコンピュータ科学ラジオ ゆるコンピュータ科学ラジオ
-
- Technology
ゆるく楽しくコンピュータの話をするラジオです。「コンピュータ科学をやるのにコンピュータは不要」「プログラミング言語には思想が宿る」「サーバーはかわいいので○人と数える」など、とっつきやすい話をふざけながらしています。
-
【数えるだけ】AIが単語を理解するトリックが巧妙すぎる【大規模言語モデル2】#130
プロモーション:Notion AI
Notion は無料で使えて、月額10ドルでNotion AIをご利用いただけます。
https://ntn.so/yurucom1
大規模言語モデルの肝「単語ベクトル」とは?「単語を数字の組で表す」「ぬくもりを捨てることで実現した技術」「Transformerはとにかく何かいい感じになる」など、自然言語を扱うコンピュータ科学の技術について話しました。
【ことラボ】
◯Twitter → https://x.com/KotoLaboRyo
◯YouTube → https://www.youtube.com/@kotolabo
◯「単語ベクトル」とは何か? → https://youtu.be/l8YCKz15Hn8
【目次】
0:00 コアラの対義語は?
0:46 大規模言語モデルの肝「単語ベクトル」
6:36 単語を数字の組で表す
14:32 実際には「次元圧縮」している
18:00 対義語は真逆のベクトル?
21:57 ぬくもりを捨てることで実現した技術
26:56 素晴らしきNotionAI
30:18 文脈化単語埋め込みは味付け化係
38:34 とにかく何かいい感じになる
43:33 ニューラルネットワークとは何なのか
【参考文献】
◯大規模言語モデル
https://amzn.to/3VKqed7
◯キテレツおもしろ自然言語処理
https://amzn.to/3VwInd4
◯風俗の虫―捜査官が覗いた日本の風俗70年
https://amzn.to/4bbs62W
◯自然言語処理の必須知識!Word2Vec とは?
https://www.kikagaku.co.jp/kikagaku-blog/word2vec/
※単語ベクトルの出典
◯【入門】深層学習の革命児!Transformer を今こそ理解しよう
https://www.kikagaku.co.jp/kikagaku-blog/deep-learning-transformer/
※文脈化単語埋め込みの出典
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→ht -
大規模言語モデルはただの遷移図。実際に作って理解しよう!【大規模言語モデル1】#129
プロモーション:Notion AI
Notion は無料で使えて、月額10ドルで Notion AI をご利用いただけます。
https://ntn.so/yurucom1
ことラボのりょーさんをお招きした「大規模言語モデル」シリーズ。「手書きで小規模水野言語モデルを作ろう」「本質の遷移図から長年の工夫により実った」など、大規模言語モデルの根幹について話しました。
【目次】
0:00 大規模言語モデルについて気になるよね?
2:00 りょーさんは自然言語処理の専門家
5:00 手書きで小規模言語モデルを作ろう
10:13 水野言語モデルでどんな文が生成できる?
15:39 NotionAIの有効な使い方
24:36 本質は遷移図、長年の工夫が実る
【参考文献】
◯LLMの現在(スライド)
https://speakerdeck.com/pfn/llmnoxian-zai
◯大規模言語モデル
https://amzn.to/3VKqed7
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→https://twitter.com/kenhori2
noteマガジン→https://note.com/kenhori2/m/m125fc4524aca
個人YouTube→ -
おもしろ半分で技術ブログを読もう!!【Qiita基調講演】#128
おもしろ技術ブログ回です。「おばあちゃんが寝るとエラーが起きる」「中国人が出社するとネットが遅くなる」「おばあちゃんにインストールキーを吐かせる」など、笑っちゃう技術記事を紹介しました。
【目次】
0:00 『鬼滅の刃』に関するとある技術トラブル
3:26 Qiitaカンファレンスの基調講演
7:12 おばあちゃんが寝るとエラーが起きる
14:43 デバッグはウミガメのスープ
16:57 中国人が出社するとネットが遅くなる
23:52 おばあちゃんの温情に付け込む技術
29:29 おばあちゃん直伝「ナパーム弾の作り方」
32:59 論文にできないエンジニアのやらかし
34:55 1日1失敗 アドベントカレンダー
44:12 技術ブログで人の失敗も許容できる
【Qiita Conference 2024】
◯Day1 → https://youtu.be/xv8ChImHIEk
◯Day2 → https://youtu.be/vm3b6wdAuzw
◯Day3 → https://youtu.be/J9FlEz0vg0I
※ゆるコンピュータ科学ラジオの基調講演は2日目にありました。
【参考文献】
◯UTF-8のテーブル(MySQL5.6)に竈門禰󠄀豆子が格納できない問題を調べてみた
https://qiita.com/ykami/items/d45ec72f8a5ea8b3288d
◯祖母が就寝するとDBインサートができなくなる
https://qiita.com/bohemian916/items/46f9f1e8bb32fc0a1f99
◯「中国人のAさんがお茶を淹れると会社のネットが繋がらなくなる」
そんな訳ないと思いながら調べたら…まさかの日常ミステリー
https://togetter.com/li/1618067
◯テスト文字列に「うんこ」と入れるな
https://www.infiniteloop.co.jp/tech-blog/2021/09/unko/
◯本番サーバー60台のホスト名を全部 cat にしてしまった話
https://qiita.com/yonex/items/204a5f41d1b40efe305e
◯Science Fictions あなたが知らない科学の真実
https://www.valuebooks.jp/bp/VS0089114584
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マ -
【大いなる罠】プログラミング言語の意味論を勉強したら7時間がムダになった#127
プログラミング言語の意味論の勉強をしたら7時間がムダになりました。「自作プログラミング言語に憧れる」「意味論なのに意味論じゃなかった」「自然言語は本当に出来が悪い?」など、意味論について勉強した成果を話しました。
【目次】
0:00 引き続き温泉旅館からお届け
4:05 自作プログラミング言語に憧れる
10:00 7時間40分がムダになった真相
14:43 山に登り、意味論の景色を見た
26:28 言語学が定義する意味はどこまで?
34:56 自然言語は本当に出来が悪いのか?
47:33 大学生は勉強しよう
【参考文献】
◯プログラミング言語の形式的意味論入門
https://amzn.to/3R4TIiQ
◯型理論
https://amzn.to/3KugmNT
◯新装版 プログラミング言語の基礎理論
https://amzn.to/3wYdhTj
◯論理学をつくる
https://amzn.to/4bHFlJB
◯チューリングを読む コンピュータサイエンスの金字塔を楽しもう
https://amzn.to/4bx0arf
◯形式意味論入門
https://amzn.to/4c129E8
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→https://twitter.com/kenhori2
noteマガジン→https://note.com/kenhori2/m/m125fc4524aca
個人YouTube→ -
マグカップのフタが買えなくて、技術に絶望した話。シンギュラリティは遠い。#126
私生活の不満をぶちまけた雑談回。「セールだったマグカップがもたらした惨劇」「ケチすぎて茶渋が洗うタイミングが分からない」「老いを感じるふたり」など、究極のコスパを求めた生活について話しました。
【目次】
0:00 マグカップを買うまでの経緯
4:35 マグカップがもたらした惨劇
6:40 惨劇の第2章、フタの適合企画
11:12 現代社会の不便さにキレる堀元
15:32 結論:技術革新は起きていない
18:45 茶渋は限界まで洗うべきではない
21:33 一番の問題は歯のコーヒー渋
23:24 ケチすぎて顔を犠牲にする水野
28:24 人に会うときは臭う方が得
【参考文献】
◯Invention and Innovation
https://www.valuebooks.jp/bp/VS0089403266
◯サーモス 保温マグカップ 350ml JDC-351ESP
https://amzn.to/3TyLdyk
※動画内で紹介されたマグカップ
◯アイリスオーヤマ 家具転倒防止伸縮棒ML
https://amzn.to/4dUJ4F9
※水野の家で余ってる突っ張り棒。ほしい方はinfo@pedantic.jp までメールください!
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→https://twitter.com/kenhori2
noteマガジン→https://note.com/kenhori2/m/m125fc4524aca
個人YouTube→ -
機械式コンピュータの挫折。その原因は、凡庸な人間ドラマだった。【バベッジ2】#125
チャールズ・バベッジは偉人だけど全部惜しい。「進学先にも恵まれず保守派と戦った」「世界初だから職人への報酬が高すぎた」「職人のせいで機械式コンピュータが未完」など、バベッジが揉めた話をしています。
【目次】
0:00 自営業者が必ず通るミスとは?
1:44 バベッジは偉人だけど惜しい
3:43 行く先々も惜しい
7:38 いくら天才でも凡人でも同じミスをする
22:47 惜しかったからこそ生まれたドラマ
24:32 バベッジエアプ撃墜講座
【参考文献】
◯バベッジのコンピュータ
https://amzn.asia/d/7tU5zE5
◯チャールズ・バベッジ: コンピュータ時代の探索者
https://www.valuebooks.jp/bp/VS0004280002
◯ディファレンスエンジン
https://amzn.to/44O4Aas
◯The Indifference Engine
https://amzn.to/4dBNm4e
【サポーターコミュニティへの加入はこちらから!】
https://yurugengo.com/support
【親チャンネル:ゆる言語学ラジオ】
https://www.youtube.com/@yurugengo
【実店舗プロジェクト:ゆる学徒カフェ】
https://www.youtube.com/@yurugakuto
【おたよりフォーム】
https://forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています!
【お仕事依頼はこちら!】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→https://twitter.com/kenhori2
noteマガジン→https://note.com/kenhori2/m/m125fc4524aca
個人YouTube→https://www.youtube.com/@kenHorimoto