個人的なメモ

Tomohiro Suzuki @hiro128_777 のブログです。Microsoft MVP for Developer Technologies 2017- 本ブログと所属組織の公式見解は関係ございません。

Phi Silica (Language Model)で日本語の実用性があるか試してみた。

 

はじめに

コンソールアプリで、Phi Silica が動かせるようになったのが分かったので、検証アプリを作成して日本語で実用性があるか試してみました。
当然ながら、現状 Experimental リリースですので不具合がたくさんあって当たり前という前提での検証です。

Phi Silica バージョン:2025-02 arm64 ベースのシステムの Phi Silica version 1.7.516.0 (KB5053338)

 

検証 1

システムプロンプト
あなたは歴史学者です。あなたの知識を最大限活用して質問内容について解説してください。

 

ユーザープロンプト
徳川家康について600字以内で説明してください

 

レスポンス
徳川家康は、日本の関ヌカ時代の?遷(1600年)までの緊迫した政治的混乱時期に成功にとどまった戦国大名です。1590年の元隰豊臣秀秀(以後豊迥)の出身と、織田義氏を主要な家族とします。家康は横山忠勝とともに、討倒織川忠(豊迥)の敗北と戦えず試続け、名門の煙火にとんがりくる。成功に反って生き抜かながたくとなった日曜?豊?孟。その驚石にもかかされ、1596年に北関近衛長の世臣として、安房の扶助とともに政敵を失う。その後、埼玉では?高に従事すし、日光出来臣と大顧に相続しん。でござさらう耀託にて、?豪しかの子と和大名の連行が?(つとば)つくたまて豊?岬が繰(まな)き。そきかすたにおけて、平祀家康が出立つ。

天の傲政(天下鎮元)をとなべて輸まの武政が調る。この俑事役が成るために、関ヂ族、佐野斉豊呂の??(訝しのたみら)なる家臣を盛(なる)つく。家康は関所の改名をし?(うり)なる名を取り朽んる、東京(江戸)と称を得た。慢(もど)てしにお仲と嫡臣が陲つきてかりまたの子供ととのまつつな。?地下剛

回答内容がどうこうという次元ではなく、途中から日本語が破綻していており、まだ実用はできない感じですね。
 

検証 2

システムプロンプト
** あなたは日本人で50年以上日本に住んでいます。あなたの知識を最大限活用して質問内容について解説してください。

 

ユーザープロンプト
東京について600字以内で説明してください

 

レスポンス:
<|assistant|)

東京は日本の忙しい都市で豊かな人文書物と魅力的な都市景観が見られる場所です。豊かで速度のある発展を遂げる繁華通さなじ忙しい市の中心。公的と私的な空間は互いに繰り延ばされており、伝統とモダニズムが静かに共存しています。例えば、歴史的な皇居と静かで沿ったアモデルシェルズ、独特の文化風景が息をのせ継ぐ。 騒

こちらも、chat format の一部が出力されていたり、レスポンスが途中で終了していたりと、まだ実用はできない感じですね。
 

比較用:英語での検証

システムプロンプト
You are Japanese and have lived in Japan for over 50 years. Please explain the question to the best of your knowledge.

 

ユーザープロンプト
Please describe Tokyo in 600 characters or less.

 

レスポンス:
Tokyo, the capital city of Japan, is a bustling metropolitan area that combines a blend of traditional culture and modern modernity. Famous for both its historic sites like Senso-ji Temple and Meiji Shrine, alongside towering architectural marvels and innovations like Shiodome and Tokyo Skytree, it's a global tech mecca in Shinjuku and Shibuya. A world culinary hub, it hosts Michelin-starred dining and Izakayas offering ramen. Tokyo's vibrant district, Harajuku, is renowned for its fashion-forward youth. Amid the city's relentless dynamic, calm is found in localized spots, Zozojiwa and garden oases like Rikugani.

 

まとめ

英語ではかなり実用性がある回答が出せるので、Phi Silica も基本的には英語前提のモデルのようです。
ただ、モデル自体もアップデートが WIndows Update で配信されており、正式リリースまでにどれくらい改善されるか見守ることにします。