ChatGPTのような対話AIのAPIを利用するときのノウハウ

1776 views Post
wakairo @wakairo

APIを通してユーザーインプットを渡している場合、悪意のあるユーザーインプットによる攻撃が可能な場合がある。そういった攻撃をどう防ぐかといったノウハウについてのTopicです。

0
Raw
https://www.techtips.page/ja/comments/104
wakairo @wakairo
最終更新

ユーザーインプットをそのままAPIに渡すのではなく、ユーザーインプットの前後に文を追加することで、悪意のあるユーザーインプットによる攻撃を緩和しようというアイデア。

ChatGPTを使ったサービスにおいて気軽にできるプロンプトインジェクション対策

ちなみに、プロンプトインジェクション(悪意のあるユーザーインプットによる攻撃)の一例はこちら。

https://twitter.com/Ahmet_stak/status/1633085605994459139

0
Raw
https://www.techtips.page/ja/comments/105