Colab

本記事はColabでも公開しています。 ※Colabの解説記事はこちら condacolabとは？ condacolabの使い方 インストール メソッド：condacolab.install condacolab.install_miniconda() condacolab.install_miniforge() condacolab.install_mambaforge() condacolab.install_anaconda() condacolab.install_from_url() condacolab.install() メソッド：condacolab.check ライブラリのイ…

こんにちは、ラボで研究開発をしたりプロトタイプを作っている藤本(X(Twitter))です。ABEJAアドベントカレンダー2023の21日目の記事です。ここ近年、生成AIの勢いが凄いです。最近は一夜明けたら世界が変わっているみたいなことがしょっちゅう起きています。そんな状況なので、なかなか世の中についていくのが難しいのではないかと思います。そこで今回は、これまでに色々と出てきた生成モデルを振り返りつつ、ひたすら思いつく限りColabで動かしまくってみる企画をやってみようかと思います。流石に全部Colabで動かすのは大変でした・・・。 まずは言語を対象として日本語モデルを含む様々なモデルを対象に…

元々のJupyterコマンドとかぶるかららしいです。 Google Colabは、Jupyterコマンドを継承しています。Jupyterでは、現在の作業ディレクトリを変更する場合は、組み込みのマジックコマンド%cdを使用します。 上記は、いかの記載を引用。 github.com だから、、、 びっくりマークをはずす。 または、％をつける。

個人的な勉強会で作った資料です。 詳しい方から見たらふざけるな的な内容ですが10分解説なので許して下さい。 本記事はGitHub、nbviewer、Colab、Marp（スライド形式）でも公開しています。 ※Colabの解説記事はこちら ※Marpの解説記事はこちら 数値解析のアプローチ 離散化について -差分法を例に- 計算例1：放射性物質の崩壊 現象 数学モデル（微分方程式） 数値モデル（代数方程式） 厳密解 計算結果 の計算結果 の計算結果 の計算結果 の計算結果 他の差分法 の計算結果 計算例2：移流方程式 現象 数学モデル（微分方程式） 数値モデル（代数方程式） 前進差分 後退差分 …

開発環境構築なし。ブラウザ上ですぐに実行できるサービス。Pythonの実行、コメント追加、公開もできるんだそう。 https://colab.research.google.com ※Googleアカウントのログインが必要です。 Colabノートブックという形式になっている。テキストとコードの２つが並んでいく形。 コード入力用のセルと呼ばれるエリアが最初に表示されているので、文字列の出力をしてみました。 print()を省略して変数名だけぽんとおいても内容を出力するらしいので試してみました。 三角ボタンで実行。 テキストの入力はマークダウンらしく、改行は見た目どおりではなく「 (半角スペース２…

www.jcp.or.jp

初心者が１０分もあれば作れるAIがあるだと！？ そんなHappyなことあるわけなかろう… ということで作ってみました。

Google Colabの料金体系と活用方法：完全ガイド はじめに Google Colaboratory（以下、Google Colab）は、プログラミングや機械学習の学習・開発を劇的に効率化するクラウドベースの開発環境です。本記事では、Google Colabの特徴や料金体系、具体的な活用方法について詳しく解説します。 Google Colabの主な特徴 ブラウザ上で即座にPython開発環境が利用可能 無料でGPUやTPUが使用できる 環境構築が不要で、すぐに作業開始が可能 主要な機械学習ライブラリが事前にインストール済み 料金プラン別の機能比較 無料プラン 無料プランでも充実した機能が…

はじめに Google Colabとは？ Google Colabのメリット Google Colabの使い方 1. 事前準備 2. コードの実行 例：簡単な計算を実行 結果 3. メモの記述 例：Markdown記法 Google Colabの活用方法 ファイルの扱い方 Google Driveとの連携 ファイルのアップロード Google Colabの有料版（Colab Pro） Google Colabの開発ポイント ライブラリのインストール GPUの有効化 まとめ はじめに Google Colaboratory（略称: Google Colab）は、ブラウザ上でPythonコードを実…

Google Colabのサブスクリプション(定期購入)ではなく90日間 Pay As You Go (買い切り)の期限の確認方法。 chromeを開き右上の自分のアイコンクリック「Googleアカウントの管理」「お支払いと定期購入」「利便性を管理する」「Google Payでご確認ください。」 #stablediffusion #aiart #画像生成ai

grapevine-AI/Athene-V2-ChatをColab L4環境でお試しします。試す前から無謀なのは覚悟です。コーヒーを用意してチャレンジです。ollamaを利用すると、それでもなんとか動くのは凄いです。もちろん、実用レベルの生成速度は得られません。やはり、生成の質は高い。RAG用途でも、このレベルの質は欲しいですよね。これくらいのモデルがローカルでサクサク動くといろいろとはかどります。ただし、商利用はできません。いろいろ試す環境が欲しくなります。 少々遅くなってしまいましたが、Athene V2 ChatのGGUFが完成しました！今回のAtheneはQwenベース、現状ローカル最…

Google Colabの料金プラン完全ガイド：無料版と有料版の徹底比較 はじめに：なぜGoogle Colabが注目されているのか Google Colaboratory（以下、Colab）は、環境構築不要でPythonプログラミングが始められる革新的なクラウドサービスとして、データサイエンティストやAI開発者から高い支持を得ています。特に、高性能なGPUを無料で利用できる点は、機械学習プロジェクトを始める際の大きな障壁を取り除いてくれます。 Google Colabの基本：3つのプランの概要 Colabには以下の3つのプランが用意されています： 無料版：誰でも即座に利用開始可能な基本プラン…

Qwen2.5-3B-128KのGGUFモデルを作成されている方がいらっしゃったので、Colab T4環境で試してみました。有難く試してみます。なんやかやで、長文の投入は出来るモデルは心強いですよね。長文の解析で恩恵をあずかるのは、コード解析や論理性のないストーリーだと思います。そこで、github掲載のコードを題材としました。ollamaが不安定でやりなおしが多かったため、ストーリーの題材としての小説解析はまたの機会に。 huggingface.co コード解析。bolt.newのコード解析という漠然とした指示をしてみましたが、それらしい解析をします。日本語でなかなか答えてくれないのは、コー…

SFTTrainerでdataset_text_fieldの引数を使う場合、学習データの構造次第では意図した学習が行われない可能性がある トラブルがあったコンペに学ぶデータ分析 LangGraph Agents with Amazon Bedrock 「関西Kaggler会 交流会 in Osaka 2024#3」に参加してきました 好みの定量化に基づいてLLMを改善するOffline RLHFの検討 S3にあるALBログの調査はAthenaよりDuckDBのほうが簡単 Personalization of Large Language Models: A Survey 生成AIにアプリを作ら…

Stable Diffusionの使い方ガイド Stable Diffusionは、画像生成AIとして注目されているツールで、テキスト入力（プロンプト）から高品質な画像を生成できます。以下は、Stable Diffusionを利用するための基本的な流れと準備方法です。 1. 準備編：必要な環境を整える A. Web版の利用（簡単・手軽） • おすすめ対象: インストール作業なしで試したい人。 • サイト例: • DreamStudio（公式） • Hugging Face • 手順: 1. アカウント登録（必要な場合）。 2. プロンプト（生成したい画像の説明文）を入力。 3. オプション（解…

1. 今週の予定 以下の内容を勉強します。 映像作品としてのLevelの作成 AIの勉強 Nvidia Omniverseの勉強 Gaeaの勉強 Houdiniの勉強 VFXの勉強 DirectX12の勉強 2. 映像作品としてのLevelの作成 2.1 PCGの勉強 2.1.1 Create Entire Cities Automatically With PCG Splines! Procedural Content Generation in Unreal Engine [2]を勉強する 以下のTutorialで街をPCGで作成する方法を説明していました。 私のVFXの撮影は別に家の中ま…

Athene-V2-ChatをColab A100環境で試してみます。Qwen-2.5-72Bをベースにファインチューニングしたモデルとのこと。もともとのQwenの性能も高いので期待できます。VRAM占有率は39829MiB / 40960MiB。GGUFはImstudio-communityのものをありがたく使います。話の流れが微妙なこともありましたが、要約や計算については高い性能を感じました。GGUFも日本語を重視した変換だと、また、印象が変わるのではないでしょうか。一般人が、お手軽に使えるサイズではありません。Colab A100環境でも生成にはそれなりに時間がかかりますが、ローカルで立…

Google Colab Proの更新が昨日朝に掛かる予定だったが、突然注文が保留されているというメールが届いた件。毎月支払っているはずのカードでいきなり通らなくなるのはちょっとおかしい(フィッシングの可能性もあるけど)。それを裏付けるのがカードの利用速報通知であり、オーソリ自体は成功している(その後決済エラーと同時にオーソリは取り消されている)。支払いに使用しているカード情報を何もいじらずに更新したら普通に通ることは確認した(200円オーソリ後即取り消し)が、支払いするカードを変えないと保留状態になっている決済の即再試行ができないっぽいので、同日中にGoogle お支払いセンターの通知から別…

皆さんこんにちは。ソニー・ミュージックエンタテインメントで生成AIの調査・検討を行っているみみずくです。 皆さんはコンピューター上で言語を処理するというと、どんな技術を想像するでしょうか。多くの方は、ChatGPTをはじめとする大規模言語モデル（LLM）をイメージされると思います。 しかし、LLMは必ずしも万能の存在ではなく、思ったように動いてくれないことも少なくありません。そんな時にはLLMに頼りきりにならず、あえて少し古い技術に当たってみることも有効です。 そこで、ここではLLMが登場するまで中心的な言語処理技術であった「Word2Vec（ワード・トゥ・ベック）」について紹介し、その中で行…