Content-Length: 376071 | pFad | http://b.hatena.ne.jp/bluescreen/AI/
CLINEに全部賭けろ
Cline を使い始めて2ヶ月ぐらい経った。 自分の直感として、Cline は真のイノベーションの入口であり、そして開けてはいけないパンドラの箱でもあったと思う。 ここでいう Cline は Cline型コーディングエージェントであり、広義には Devin / Cursor や Copilot Agent 等を含む話。だが、後述するように Cline でしか見えない世界がある。 その先の未来に、プログラマとしての自分はフルベットする、という話をする。 私たちが知っているプログラミングの終焉 大事なことは次の記事に全部書いてある。まずこれを読んでほしい。 (Google翻訳) Steve Yegge 氏は、置き換えられるのはジュニアおよび中級レベルのプログラマーではなく、新しいプログラミング ツールやパラダイムを受け入れず過去に固執するプログラマーであると指摘しています。 <略> これはプロ
いま文章を書くのに「CURSOR」を使わないのは損だ
粘土板からプロンプトへ 人間が「ことば」を記録するようになったのは、紀元前3300年頃のメソポタミアでのことだそうだ。シュメール人たちが、粘土板に楔型文字を使って文字を印した。この人間が「ことば」を記録するという営みが、いま生成AIによって大きく変化しはじめている。 生成AIで「ことば」を生み出すといえば、ChatGPTでメールの返事を書かせたり、人間が書いたとしか思えない小説ができたといった話題もある。それらはどちらかというと、何か小石のようなものをジャラジャラとシャッフルして自分の納得するパターンを見つける特別な仕掛けのようなものだ。 それに対して、自分の頭の中にあるものを言葉として表現して、相手に伝えるための手段として生成AIを使うことも始まっている。それをいまのところいちばん理想に近い形で実現していると見られているのが、コードエディタ「CURSOR」（カーソル、カーサー）のようだ。
数学者が書いた深層学習講義 数学と錯視の科学館電子出版部
大学1年で学ぶ微分と行列を使って，特に畳み込みニューラルネットワークの深層学習の基礎事項を数学的厳密性を重視して解説します．数学はどのようになっているのだろうか，という疑問を持たれた場合に参考になることを目指しています．適宜，改訂版・増補版を発信していく予定です。更新はこのサイトに掲載していきます。 公開日 2025/1/6. Ver. 1.2 (2025/1/7) typo. Ver. 1.3 (2025/1/8）typo. Ver. 1.4 (2025/1/10) 文の微小修正 最新版 Appendix Ver. 1.3（2025/1/12） 文の追加 ブラウザーによっては pdf が文字化け等する場合があります。その場合は pdf をダウンロードしてご覧ください。 引用の際は 新井仁之， 数学者が書いた深層学習講義，畳み込みニューラルネット篇，MATLABプログラム付き，2025.
ゼロから始めるAITuberの作り方｜ニケちゃん
こんにちは、ニケです。 皆さん、AITuber 開発していますでしょうか？ AITuber、最近よく聞く言葉ですね。 面白そうだけどどこから始めればよいか分からない、という方も多いと思います。 というわけで今回は、AITuberという分野に興味を持っている方のために、できるだけ簡単にAITuberの作り方について解説していこうと思います。 具体的に「Youtubeのライブチャットに反応してキャラクターが応答を返すAITuber」を作成します。 下記が完成版のサンプルです。 なお、非エンジニアの方でも理解できるように、今回は仕組みの説明に注力し、コードの中身は解説しません。 動作コードはほぼ1つのファイルに収まっているため、コードに興味がある方は、ChatGPTにそのままコピペして解説してもらうと良いでしょう。コードは後ほど共有します。 ちなみに簡単に自己紹介すると、私は普段 AITuber
大学教員による論文を読む際の「AIとの付き合い方」のポストが話題に→「この言語化は有難い」「土台作りはいいけど調整は必要」文章を読む力、文章を書く力の大切さ
ぼうけん @yt4421 この一文、このいい回し、この単語はこの人のバックグラウンドあるいは自分の研究や知識からすると、もちろん一般的にはaと解釈されるとしても自分の読み方だと違う解釈なるみたいな場合はしょっちゅうあったから自分で読んだ方がましだと思ってしまう。 x.com/kaityo256/stat… 2025-02-21 04:56:52
え？本買ってるの？？もっと良い方法あります。 - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? はじめに 日々の業務で新しい技術をキャッチアップするのは大変ですよね。特にライブラリやフレームワークの学習では、公式ドキュメントが丁寧でないこともあり、どこから手をつければいいか悩むことも多いと思います。 先日の会社の定例で紹介したTipsが好評だったので、その内容を共有します。 本記事では、「本を読むのが無駄」という主張ではなく、「本以外にも便利な学習手段がある」という視点でお話しします。 本の必要性 各分野には「名著」と呼ばれる本が存在し、それらは基礎をしっかりと学ぶのに適しています。 しかし、ライブラリやフレームワークの学習ではど
AIや統計の数式を解説する美少女VTuber「AIcia Solid Project」生みの親が語る、継続できるアウトプット活動とは？
AIcia Solid Projectは「本気でデータサイエンスに取り組むあなたを応援する」と掲げ、毎週YouTubeにデータサイエンスに関係する論文要旨や数式解説を投稿している。解説者は、赤いフレームのメガネをかけた女の子「アイシア=ソリッド（AIcia Solid）」という名前のキャラクターだ。そのAIcia Solidの生みの親である杉山聡氏は、VTuberとして活動する傍ら、普段は企業でデータサイエンティストとして働いている。アウトプット活動を続けるようになった経緯や、得られるメリットについてお伺いした。 データサイエンスVTuber「AIcia Solid Project」とは？ 「AIcia Solid Project」は、データサイエンスVTuberの「アイシア=ソリッド（AIcia Solid）」（以下、アイシア）が、データサイエンティスト向けAIに関連する技術を解説する動
ChatGPTのdeep researchが凄すぎるので、徹底的に使い方と出力結果をまとめていくよ その1｜カレーちゃん
ChatGPTのdeep researchが凄過ぎる。OpenAIがこれまでいくつも新モデル・新サービスを出してきましたが、その中でも一番驚きの大きかったサービスとなりました。自分の中では。 なので数回にわたって、deep researchの使用例などをまとめていきたいと思います。 その2 すごい使用例をまとめたnoteは次のリンク 結局何ができるのdeep researchはdeep researchは、ChatGPTに追加された新機能。これは、インターネット上の複雑な調査タスクを複数ステップに分けて実行する高度なエージェント機能。人間が何時間もかけて行う調査を、数十分で完了させることができる。 https://openai.com/index/introducing-deep-research/ 上の公式の説明によると次のように説明されている。 以下のような集中的な知識作業を行う人々の
わずか26分間の学習と1000円以下の計算コストでOpenAI o1-preview相当のAIモデルを構築する方法が発表される
2025年1月31日、スタンフォード大学で大規模言語モデルを研究するニクラス・ミュニホフ氏らの研究チームが、少ないデータサンプルと簡単な方法でOpenAI o1-previewとほぼ同等のスケーリングとパフォーマンスを再現する手法を、未査読論文リポジトリのarXivに発表しました。AIアーキテクトでソフトウェアエンジニアのティム・ケロッグ氏が、この論文について解説しています。 [2501.19393] s1: Simple test-time scaling https://arxiv.org/abs/2501.19393 S1: The $6 R1 Competitor? - Tim Kellogg https://timkellogg.me/blog/2025/02/03/s1 ミュニホフ氏らが発表した論文は、テスト時の計算リソースを増やすことで言語モデルの推論性能を向上させる「Sim
「フラッシュメモリで」AI演算 消費電力はGPU比で1000分の1に
フラッシュメモリIP（Intellectual Property）を手掛けるフローディアが、SONOS構造のフラッシュメモリを用いて超低消費電力でAI演算を行うCiM（Computing in Memory）技術を開発中だ。 フローディアは、ルネサス エレクトロニクスでフラッシュメモリの開発を20年以上手掛けていた7人のエンジニアにより、2011年4月に設立された。BCDプロセスを適用したSONOS構造のフラッシュメモリ（SONOSメモリ）技術を、IPとして半導体メーカーやファウンドリーに提供している。 SONOSメモリは、窒化シリコン（SiN）膜に電子をトラップする（チャージトラップ方式）ことでメモリ機能を実現する。フローティングゲート方式を用いた一般的な組み込みフラッシュメモリでは、ゲート酸化膜が高温に弱く電荷が大量に漏れてしまうのに対し、SONOSメモリは電荷が結晶の微細な構造に閉じ
2025年版データサイエンス、データ分析、機械学習に必要な数学 - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 非アカデミックで機械学習を学んでいる皆さん！ こんな感じじゃないですか 2017年にこれらを書いて7年 いろいろ挫折とか挫折とかしながら考え続け中かつ絶賛積読中ですが、ChatGPTが家庭教師をしてくれるようになったのでまた加速したいと思い、記事をUpdateしました。 私が学んだことかつこれでいいかとChatGPTに聞いた感じこんな流れです。 おそらく冒頭の「ここに何かいる」は「およそ2〜3年次」としているところ特に「関数解析」などを攻略しないといけないと思っています。 統計学・確率論の方は、図が煩雑になってしまうので分けましたがこん
まだ人間が議事録書いてるの？ 日本語特化の文字起こしAI『kotoba-whisper-v2.0』がスゴいらしい
まだ人間が議事録書いてるの？ 日本語特化の文字起こしAI『kotoba-whisper-v2.0』がスゴいらしい 企業の業務の中でも会議やプレゼンなどの議事録作成は効率化したい作業の上位に挙がってくるのではないでしょうか。実際、2023年8月にソースネクスト株式会社が行った「議事録に関する意識調査」によると、議事録の作成には平均50.4分の時間が費やされており、また部下の75.8%が会議中の議事録の作成によって発言しにくいと感じることがあるといいます。 そこで利用を検討したいのが、AIによる自動音声認識を利用した議事録の作成です。本記事では、日本語に特化して高い精度と速度を誇ると話題を呼んだ『kotoba-whisper-v2.0』を主に取り上げ、AIによる議事録作成の最前線をご紹介します。 日本語特化の文字起こしAI『kotoba-whisper-v2.0』とは？ 『kotoba-whi
低コストで超高性能な「DeepSeek-R1」に似たAIモデルを誰でも開発できるようにオープンでない部分を補完するプロジェクト「Open-R1」をHugging Faceが始動
中国のAI企業が2025年1月20日(月)にリリースしたAIモデル「DeepSeek-R1」は、「OpenAI o1」と同等の性能を備えつつ学習コストや運用コストが低いことを特徴としています。このDeepSeek-R1は、モデルデータが無料で公開されているのですが、学習に必要なデータセットやコードは公開されていません。新たに、AI開発プラットフォームの「Hugging Face」がDeepSeek-R1の非公開部分を再現してオープンソース化するプロジェクト「Open-R1」を開始しました。 Open-R1: a fully open reproduction of DeepSeek-R1 https://huggingface.co/blog/open-r1 DeepSeek-R1は中国に拠点を置くAI企業のDeepSeekが開発したAIモデルで、数学性能やコーディング性能などを測定する複
LLMチューニングのための強化学習：GRPO（Group Relative Policy Optimization） - どこから見てもメンダコ
DeepSeek-R1にも採用されたLLMチューニングのための強化学習手法 GRPO（Group Relative Policy Optimization）について考えたことをまとめます。 GRPO: DeepSeek-R1の強化学習ファインチューニング手法 前提手法：TRPO/PPO TRPO: Trust Region Policy Optimization PPO: Proximal Policy Optimization GRPOとPPOの差分：①アドバンテージ算出と②参照モデルからのKL距離制約 変更点①： アドバンテージAの算出方法 REINFORCE： 価値関数近似なし方策勾配法 PPO（Actor-Critic）： 価値関数近似あり方策勾配法 GRPO： スケーリングされたREINFORCE 変更点 ②： 参照モデル（SFTモデル）からのKL距離制約 従来は参照モデル制約は
ChatGPT超えの中国AI「DeepSeek-R1」の衝撃
中国のAIスタートアップ「DeepSeek」は2025年1月20日、数学的推論やコーディング能力でOpenAIの最新モデル「o1」と同等性能を持つ大規模言語モデル「DeepSeek-R1」を公開した。 使用・複製・改変・再配布を自由に許可する寛容なMITライセンス下でのオープンソース提供および従来比95〜97%のコスト減となるAPI価格が特徴で、AI業界に激震が起きている。 強化学習を重視、コールドスタート問題にも対応 論文によると、DeepSeek-R1の特筆すべき点は、強化学習（RL：Reinforcement Learning）を駆使し、従来の教師あり学習（SFT：Supervised Fine-Tuning）に頼らず、自律的に思考連鎖（CoT：Chain-of-Thought）を学習する点だ。このアプローチにより、モデルは複雑な問題を解決するための思考の連鎖を探索し、自己検証や振り
DeepSeek-R1の論文読んだ？【勉強になるよ】
本記事は、DeepSeek-R1の論文とDeepSeekMathの論文を読んだ私の理解をもとに記載しています。 本論文で使われている技術に関しては、ある程度の知識を持っているので、大きくは外していないとは思いますが、私の主観も入っている部分もありますので、ご了承ください。 また、DeepSeek-R1の論文が公開される前に、小型モデルに対して同様の実験（強化学習）をしていたグループがあるようです。 そちらのレポートは下記になります。 意図せず、DeepSeek-R1-Zeroの再現実験のようなレポートになっていますが、レポートの著者はDeepSeek-R1論文の公開前から実験していると主張しています。 こちらも非常に興味深かったため紹介です。 本論文の興味深いところ 本論文は、大きく分けて3つの構成でできています 強化学習による思考能力の強化 LLM（DeepSeek-V3-Base）に対
AI業界に激震、突如公開の中華AI「DeepSeek」“驚きポイント”まとめ
1月20日（日本時間）に登場した大規模言語モデル「DeepSeek-R1」に、AI開発者やユーザーたちが驚いている。中国のスタートアップDeepSeekが開発したこのモデルは、分野によっては米OpenAIの「o1」に匹敵するとうたう性能が特徴。モデルは無料でダウンロードも可能で、商用利用も認められている。 DeepSeekはChatGPTに似たチャットUIも無料で提供しており、同サービス上では、現時点ではo1と併用できないWeb検索機能も利用できる。つまり、OpenAIをはじめとした他社のハイエンドモデルに近い性能のモデルがスタートアップから突然公開され、さらに同等以上の機能とコストパフォーマンスを持つサービスとしてもリリースされたわけだ。 それだけでも衝撃だが、開発コストや地政学的リスクなど、業界に影響を与える話題は枚挙にいとまがない。世界中のハイテク株に影響を与えた可能性も出ており、S
Ryzen AI Max+ 395 のゲーミング性能が判明。APUでデスクトップ向けGeForce RTX 4060 Ti相当の性能に
Ryzen AI Max+ 395 のゲーミング性能が判明。APUでデスクトップ向けGeForce RTX 4060 Ti相当の性能に AMDはCES 2025でノートPC向けに内蔵GPUやCPUを大幅強化した高性能APUであるコードネームStrix Haloこと、Ryzen AI Max 300シリーズを発表しました。このRyzen AI Max 300シリーズではCPU側にはZen 5 CPUを最大16コア搭載するほか、内蔵GPUにはRDNA 3.5アーキテクチャーで構成されるCompute Unitを最大40コア搭載することで、APU単体でディスクリートグラフィックカード並みの性能を実現すると言われています。 AMDはこのRyzen AI Max 300シリーズの性能についてCES 2025では主にCPU性能に焦点を当てたプレゼンテーション資料を展開していましたが、今回グラフィクス性
「月3000円で万能の家庭教師がいるみたいなもん」受験勉強にAIを活用する「AIネイティブ」がリアルに生まれているという話
ひろちゅ～ @hirochuu8 「高1の冬にGPT-4が出て、現在高3で受験生」という子達がこの世に存在している事実。なにげに水面下で受験界に地殻変動を起こしてると思うw x.com/jammaru_lab/st… 2025-01-16 13:59:00 じゃむまる │10代で1番Dify詳しい人 @jammaru_lab AIの進化で、勉強効率が本当に劇的に上がった。学校の勉強も同じで、昔は数学の問題が分からなかったら答えを見て、詳しい解説を友達に聞く必要があったけど、今はGPTやo1に問題の画像をアップするだけで、めっちゃ丁寧に解説してくれる。効率が爆上がりしてるから、今の中学生とかが羨ましい。 2025-01-16 11:19:36
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Fetched URL: http://b.hatena.ne.jp/bluescreen/AI/
Alternative Proxies:
DeepSeekに官能小説の執筆頼んだら「OpenAIのポリシーに触れる」と言われた→「やっぱOpenAI使って学習してんじゃん！」疑惑がさらに広がる
