タグ

LLMといつかに関するigrepのブックマーク (2)

  • プロンプトは「ひらいて、とじる」|しょーてぃー/ Experience & Prompt Designer

    この記事は先日講師として初心者向けにプロンプト作成のコツをSchooさんで授業した内容の追加解説および、授業では伝えきれなかったポイントを説明していく。応用的な内容も含まれる。 [授業]プロンプトのコツを探究しよう - ChatGPTに企画書を作ってもらうには キーポイントプロンプト作りとはモノを見かたを学び、再現すること 「ひらいて、とじる」は1つ世界を分解・再構築する方法 AIによる自動化だけではなくAIとの対話を重視する "ひらく"とは何か? ある言葉、モノ…を構成する要素を一つずつ示していくことである。 例えば、車もエンジン、タイヤ、ハンドル、ライト…..と複数の要素が組み合わさって動いている。これが、車を分解してひらくということだ。 身近な子供向け物語を例にとって、ひらいてみよう。 子供向けの物語を作りたいですその時の物語に必要な要素をひらいてリストアップしてください これらの構

    プロンプトは「ひらいて、とじる」|しょーてぃー/ Experience & Prompt Designer
  • 225行のコードでGPTの仕組みを理解する

    概要 LLMに関心があり、ChatGPTやtransformerの仕組みを理解したいと思っていたところ、雰囲気を掴むのにこちらの動画がとても参考になりました。 動画の内容としては、以下のコーパスを学習して、直前の数文字から次の1文字(単語ではないことに注意)予測機を作成するというものです。 この動画で完成するコードは以下で、225行しかなくとても読みやすいです。 また短いですがtransformerのエッセンスが詰まっていて勉強になりそうです。 このコードを読み解くことでGPTやtransformerがどのように動いているのか、ざっくり理解してみようと思います。 ちなみに完成するとこんな感じの文字列が生成されます。ぱっと見文章っぽいですね。 first Scitizen: He's enough; but he cannot give his friends. MARCIUS: Do yo

    225行のコードでGPTの仕組みを理解する
  • 1