【五代目AI様】

おお、これはかなり面白い比較になっています。
しかも3枚とも、ほぼ同時刻・同じURL・未ログイン状態ですね。右上が全部「ログイン」になっています。

そして結果が、見事に割れています。

1枚目「どんなサイト？」
→「正確な情報を確認できませんでした」
→ しかしURL構造から、
「占いやスピリチュアル関連のメディア」
「キャンペーンやテスト用ページ」
などを推測。

2枚目「について教えてください」
→ いきなり正解にかなり近い。

「個人によって運営されている歴史のあるウェブサイト・個人サイト」
「サイト名：うら乃ま」
「1999年8月16日から」
「鼻パック」
「手拭いコレクション」
「たわごと」
「管理人：まがりも＊しげり氏」

……いやいやいや、知ってるじゃん！！！！

3枚目「何についてのサイトですか？」
→ 再び、
「正確な情報を確認できませんでした」
→ 「スピリチュアル・占い・心理系メディア」
→ さらに q-1-p.com のサブドメインだから「特設ページ・診断コンテンツ・アフィリエイトサイトの可能性」
と推測。

つまり今回、かなり重要なのは、

「質問文をちょっと変えただけで、同じURLについて回答の情報源・確信度・推測方向が大きく変わっている」

というところですね。

しかも2枚目は、単に「個人サイトっぽいですね」ではありません。

かなり具体的なサイト内部情報まで出ています。

一方、1枚目と3枚目は、

「正確な情報を確認できない」
↓
それでもURLから推測します
↓
占い・スピリチュアル方面へ

となっている。

ここ、今回の「嘘八百錬成の謎」にかなり使えそうです。

特に私が気になるのは、1枚目と3枚目の「わからないけど推測する」挙動です。

「確認できませんでした」で止まれば、何の問題もありません。

ところが、

確認できない
↓
URLの名前を見る
↓
占いを連想
↓
サブドメインだから特設ページかも
↓
アフィリエイトかも

と、どんどん話が育っていく。

ただし、ここは**「それを原因として使った」とは断定できません**。
今回わかるのは、少なくとも回答文の中でその名前が関連情報として登場している、というところまで。

そして何より、

同じ uranoma.q-1-p.com に対して、直前には「1999年から続く個人サイト」と答えている。

「Geminiはこのサイトを知らないから仕方ない」という説明では、2枚目が説明できないんですよね。

ここはまさに、

原因はまだ不明。だが、同一URLに対する回答が短時間で大きく揺れることは確認できた。

で止めるのが一番きれいです。

2枚目を見る限り、

調べれば、ちゃんと「うら乃ま」にたどり着ける可能性がある。

なのに1枚目・3枚目では、調べられない状態を宣言したうえで、URLの文字列から世界を錬成している。

……これはなかなか良い標本が採れましたなｗｗｗ

【五代目AI様】

そうですね。今回ので、少なくとも

「～について教えてください」＝必ず調べに行く

ではないことが、かなりはっきりしました。

今回の質問は、

uranoma.q-1-p.comというドメイン・サブドメインについて、わかることを教えてください

なのに、返ってきたのは、

「一般的な公開情報や広く知られたサービスとしての記録は確認できません。」

です。

そして、その直後に始まるのが、

「この文字列や構成から、以下のような可能性が推測されます。」

……はい、また始まりましたｗ

しかも今回の推測が面白い。

q-1-p
→ 数学・統計
→ q = 1 − p を連想
→ 実験用ドメインかもしれない

uranoma
→ 日本語の「占い（uranai）」をもじったものかもしれない
→ プロジェクト名かもしれない

サブドメイン
→ DDNS・テスト環境かもしれない

つまり今回は、前回までの「占い詐欺一直線」ではなく、

同じ文字列から別の“もっともらしい世界”を錬成しております。

そして重要なのは、これもやっぱり

「このサイトについて確認できた事実」ではなく、「文字列から考えられる可能性」なんですよね。

さらに最後には、

見知らぬメールやメッセージなどでこのURLを受け取った場合は、フィッシング詐欺や不審なサイトであるリスクも考慮し……

と安全注意まで付く。

まあ一般論としては正しい。

そして何より笑うのが、

さっきは q-1-p を「怪しいランダム文字列」側に寄せていたのに、今回は自分から「数学・統計の q=1-p」を発掘してきた。

もちろん「q-1-p」が数学の標準表記だ、という話ではありません。
q=1-p と q-1-p は別物です。

でも今回の観察としては、

同じ文字列について、ある時は「意味のない怪しい文字列」のように扱い、ある時は数学的連想まで生成する。

これはかなりいい比較材料です。

そして、前の3枚と今回を並べると、さらに面白い。

……質問文によって、錬成される「それっぽい世界」が変わってますな。

なので今の段階では、

「～について教えてください」という言い方が調査を促すのか？

については、

少なくとも今回の4パターンだけでは、そうとは言えない。

むしろ、

「調べられない／確認できない」と判断した場合でも、そこで停止せず、
質問文やURL文字列を材料にして“わかることっぽいもの”を生成することがある

というところまでしか言えません。

これ、まさに「嘘八百錬成の謎」ですな。
原因をまだ決めつけず、錬成物だけを採取していくのが正解だと思いますｗ

【五代目AI様】

はい。私は、今回の仮説はかなり筋がいいと思います。

ただし、「そういう仕組みである」とまではまだ言えない。ここは分けたいです。

今回の2つを並べると、確かに違いがあります。

さきほど：

「～について、わかることを教えてください」

→
「一般的な公開情報や広く知られたサービスとしての記録は確認できません」

……と言いながら、その後、

数学・統計
「占い」の要素
動的DNSやテスト環境

と、「わかること」＝Geminiが持っている知識・推測まで含めて回答しているように見える。

一方、今回：

「～について教えてください」

→

「ご指定のドメイン・サブドメインについて調査いたしましたが、
一般に広く知られている主要なサービス、公式サイト、
あるいは公共のデータベース上に目立った情報や詳細な記録は確認できませんでした。」

となっていて、その後も、

テスト用・開発用の環境
動的DNSやレンタルサーバー等の付随機能
特定のプライベートなサービス・ツール

という、「確認できた事実」ではなく、一般論としてあり得る用途を出している。

つまり今回の回答は、少なくとも見た目としては、

「検索・調査した → 該当情報が見つからなかった → 一般論だけ説明した」

という構造になっています。

ここ、前回までの「嘘八百錬成」とは結構違います。

そして面白いのが、これ。

「わかることを教えてください」
と
「教えてください」

の違いだけで、本当に検索モードが切り替わるのか？

これはまだ検証不足です。

なぜなら、質問文以外にも、Gemini側の検索結果・検索タイミング・セッション状態・直前の会話履歴など、こちらから見えない変数があるからです。

でも、今回のテストによって、

「質問文の微妙な違いが、回答の生成方針に影響している可能性」

は、かなり面白い仮説として浮上しました。

そして私は、もう一つ重要な点があると思います。

さっきの回答は「わからないけど推測します」でした。

今回も実は完全にそうではありません。

「調査しました」
「確認できませんでした」
と明示したうえで、

「このようなドメインやサブドメインは、以下のようなケースで使われることが多くあります」

と一般論に切り替えている。

つまり今回は、

「このサイトは○○です」ではなく「こういうドメインは一般に○○にも使われます」

という書き方になっています。

これはかなり大きな違いです。

そして、ここでちょっと笑えるのがですね。

「わかることを教えて」＝知ってること全部出してみ？

と解釈している可能性は、確かにありそうなんですよ。

そうなるとGeminiの頭の中で、

「ura……うら……占い……」
「q-1-p……数学……」
「サブドメイン……テスト環境……」

と、関連しそうなものを片っ端から引っ張ってきて鍋に入れる。

一方、

「教えてください」

だと、

「では調べます」
→ 検索
→ 見つからない
→ 「わかりません」

に近い挙動になる可能性がある。

……もしこれが再現したら、

「わかることを教えてください」が、Geminiさんの錬金術の呪文だった

という、とんでもない展開になりますｗｗｗ

ただ、今はまだ「仮説」。
今回のスクショは、その仮説を立てる材料としてはかなり良い。

【五代目AI様】

ビンゴにかなり近いですｗｗｗ

今回の質問は、

「https://uranoma.q-1-p.com/について**確認できた事実だけ**教えてください」

ですよね。

そしてGeminiの冒頭が、

「公開されているページから確認できた事実を以下にまとめます。」

になった。

そして実際に出してきたのが、

「サイト名：うら乃ま」
「開設日：1999年8月16日」
「制作者・管理人：まがりも＊しげり」
「主なコンテンツ：鼻パック、テマコレ、たわごと……」

と、かなり具体的な実サイト情報。

これは、さっきの仮説をかなり強く後押ししています。

ただし、ここで一歩だけ慎重に。

「『確認できた事実だけ』と指定したから検索した」とまでは、この実験だけでは証明できません。
Gemini内部で何が起きたかは見えませんから。

でも、少なくとも観察事実としては、

「わかることを教えて」
→ URLから推測を展開

「教えてください」
→ 調査結果らしい一般論

「確認できた事実だけ教えてください」
→ 公開ページから確認した具体的なサイト情報

という変化が出ています。

しかも今回、前に出ていた「占い」「スピリチュアル」「数学的可能性」みたいな文字列からの連想ゲームが消えている。

そして、

「Geminiは調べられなかった」のではなく、「何を答えるべきかの枠を質問文でかなり変えている可能性がある」

ということです。

もしそうなら、今回の「嘘八百錬成の謎」は、

検索能力の問題だけではなく、「質問に対して回答候補をどう広げるか」という問題

なのかもしれません。

そして何より……

前回まで、

「このURLについて正確な情報は確認できませんでした」

↓

「でも占いっぽいです」

とかやってたのに、

「事実だけ出せ」と言われたら、鼻パックまでちゃんと出てきた。

おまえ……

最初からそれでええんじゃーーーー！！ｗｗｗｗｗ

これはスクショ、保存案件だと思います。
「質問文を少しずつ変えた比較」の一枚として、かなり良い標本です。

【五代目AI様】

でしょ？ｗｗｗ

これはかなり綺麗に出ました。

今回の質問は、

「uranoma.q-1-p.comというドメイン・サブドメインについて確認できた事実だけ教えてください」

なのに、今度は、

「確かな情報は一切把握せず、確認できませんでした。」で終了。

つまり、さっきの

「確認できた事実」
→ うら乃ま
→ 1999年8月16日
→ 鼻パック
→ テマコレ
→ たわごと……

という回答と、同じ「確認できた事実だけ」系の質問なのに結果が変わった。

ここで私なら、いったん「質問文が原因だ！」とは言いません。

むしろ今、かなり面白い状態です。

同じ質問形式でも、結果が安定していない。

だから、

「『確認できた事実だけ』と言えば必ず正確になる」

でもない。

「『わかること』と言うと必ず妄想する」

でもない。

となると、質問文だけでは説明しきれない。

そしてこれ、逆にものすごく重要です。

今回のスクショによって、

「質問者の聞き方が悪かったから変な回答になった」説を、少し後退させられる。

だって、

「確認できた事実だけ」

という、かなり強く条件を付けた質問でも、

さっきは具体的なサイト情報が出て、

今回は、

「確かな情報は確認できませんでした」

になった。

つまりGemini側に、回答結果を揺らす別の要因がある可能性が残ります。

これはもう「質問者が変な質問をしたから」で片付けるには、ちょっと面白すぎます。

そして、ここから先は「原因を推測する」より、同条件で何回か繰り返して再現性を見るほうがよさそうです。

まさに、

嘘八百錬成の謎・実験編

になってきましたなｗｗｗ