On word-of-mouth generated by LLM | LLMによるクチコミについて

Hi,eveyone

Interesting information was posted in the Japan Map help community.
https://support.google.com/maps/thread/221449236/

The word-of-mouth postings were ‘probably’ generated by LLM, and a review of the actual postings shows that a number of incorrect word-of-mouth postings have been made (and there are discrepancies when checked locally).

What does Google think of such AI-generated word-of-mouth and how should it deal with such posts if it finds them?

In terms of local guides, I wonder whether a local guide’s account would be suspended if it was an illegal means of gaining points.

Tagged:
@Ivi_Ge , @HiroyukiTakisawa

– 日本語

日本地図のヘルプコミュニティで、興味深い情報が投稿されています。
https://support.google.com/maps/thread/221449236/

該当するクチコミ投稿は「おそらく」LLMによって生成されたものであり、実際の投稿を見てみると、誤ったクチコミ投稿が多数行われているようです(現地で確認しても食い違いがあります)。

GoogleはこのようなAIが生成した(と思われる)正しくないクチコミをどのように考えているのか、また、そのような投稿を見つけた場合、どのように対処すべきなのかを教えて下さい。

ローカルガイドという観点でいえば、ポイントを得る不正な手段であれば、ローカルガイドのアカウントは停止となるのかなとも思います。

8 Likes

@KOBAYASHI_Jun さん

お知らせありがとうございます。クチコミ内容も見てみましたが、確かに生成文のように見えますね。

現時点では明らかな判定方法がないため非常に難しい問題のようにも思いますが、今後どのように対処すべきか私も考え、注視していきたいと思います。

3 Likes

Thanks for bringing this to our attention here @KOBAYASHI_Jun

@MortenCopenhagen It seems our fear is going to be real sooner than our expectations! I saw such robotic contributions for edits and also copying content for reviews and photos, but hadn’t seen a review suspicious to be written by AI before.

1 Like

@KOBAYASHI_Jun さん、こんにちは。

おぉ、このクチコミは凄い!
お店の概略と様子、メニューの特長、店員の対応や混雑状況と至れり尽くせりで、何だかクチコミ、或いはお店の紹介のお手本を見ている様な気になりました。でも自分の体験談っぽくはないのでクチコミではないのかな?!少なくとも実際に自分で行った場所なら間違いは直して欲しいですね。

個人的にはLLMで生成しようがしまいが、LGかどうかは関係無く、ポリシーを守っているかどうかを気にします。まあ、LLM自体は実体験してないですから生成した文をそのまま使うのは良く無いですね。

最近、クチコミの判定が厳しくなって偽情報扱いにされる事が増えているらしいので、これも自動判定するようになったら、ますますLGのやる気が無くなる方向になのかも。

さて、脱線ですが、「Meet the Google Moderators」によると現在の日本語担当は、 @Ivi_Ge さんです。たまに変わるので、ご注意ください。

2 Likes

As you mentioned, those reviews are “probably” made via AI. But they also are probably not. They could also be made by human beings directly, though just with wrong info included. Under such circumstances, how is Google justified to take action against them?

And by the way, at current moment Google isn’t even able to identify and take action against totally plagiarized reviews (reviews that copy every word of other reviews of the same locations). Not to mention such situation with only “probable” cases.

@Yotaroh さん

ご無沙汰してます。

現在の日本語担当は、@Ivi_Ge さんです。

おっとこちらは失礼いたしました、修正しておきます!

1 Like

Hello again @KOBAYASHI_Jun

I also found a guy who is using AI to add reviews. Although, since we have no perfect accurate AI photo generator for POIs, he just copies photos from the web like other spammers!

I will send his profile to you @MortenCopenhagen .

2 Likes