視覚モデレーションモデル
画像や動画全体で、ヌード、暴力、武器、ヘイトシンボル、流血表現、自傷行為、薬物、アルコール、ギャンブル、金銭、火、軍事シーン、宗教的コンテンツを検出します。モデレーションモデル群は、コンテンツの安全性とポリシー適用のために設計されています。
Sightengineは、画像、動画、テキスト、音声にまたがるコンテンツモデレーションとメディア分析のためのAPIプラットフォームです。安全でない、望ましくない、または合成されたコンテンツを検出し、その後に自社製品内でプログラム的な処理を行う必要があるチーム向けに設計されています。
この製品は、モデレーションモデル、OCRとQRの処理、AI生成メディアの検出、ビジュアル検索、画像分析ツールを1つのワークフローにまとめています。ドキュメントによると、必要なモデルを選び、1回のAPI呼び出しで複数のモデルを組み合わせ、各モデルの信頼度スコアを含むJSONレスポンスを受け取れます。
サイトでは、このサービスを拡張可能なモデレーションパイプライン向けに位置付けており、テスト向けの無料プランから、より大きな利用向けの有料プランまで用意されています。料金ページには、上位プランでのライブモデレーション対応や、エンタープライズ向けのカスタムオプションも記載されています。
画像や動画全体で、ヌード、暴力、武器、ヘイトシンボル、流血表現、自傷行為、薬物、アルコール、ギャンブル、金銭、火、軍事シーン、宗教的コンテンツを検出します。モデレーションモデル群は、コンテンツの安全性とポリシー適用のために設計されています。
画像や動画内の不適切表現、個人情報、埋め込みテキスト、QRコード、OCRテキストを検出します。これは、メディア自体にテキストが含まれるモデレーションワークフローを支援します。
AI生成の画像や動画、ディープフェイク、その他の合成メディアを識別します。製品には、サイトのナビゲーションとドキュメントにAI音声やAI音楽の検出モデルも含まれています。
類似またはほぼ同一の画像や動画を見つけ、悪用防止のためのカスタム禁止リストをサポートします。スパム対策や重複コンテンツの確認に役立ちます。
画像品質、顔の可視性、生体検知、年齢層、顔分析、プロフィール画像の妥当性を評価します。これらのツールは、本人確認関連やプロフィール画像のユースケースの検証に役立ちます。
公開前に、ユーザーがアップロードした画像や動画を対象に、ヌード、暴力、武器、ヘイトシンボル、自傷行為、その他のポリシー制限カテゴリをモデレーションします。
投稿、コメント、キャプション、またはOCRで抽出したテキストを、不適切表現、個人情報、制限対象の活動、プラットフォームのルールに違反するリンクがないかスキャンします。
マーケットプレイス、本人確認、編集レビューなど、真正性が重要な場面で、AI生成画像、AI動画、ディープフェイクを検出します。
アップロード全体で、近似重複やカスタム禁止リストとメディアを比較し、スパム、反復的な不正行為、回避の試みを減らします。
アカウント作成や認証の前に、顔の可視性、品質、生体検知、年齢層、その他の画像属性を確認してプロフィール写真を検証します。
Sightengineは、画像、動画、テキスト、音声のAPIベースのモデレーションを提供します。ドキュメントによると、必要なモデルを選び、メディアをAPIに送信し、JSONレスポンスを解析して返された信頼度スコアに基づいて処理できます。
料金ページには、テストや概念実証向けのFreeプランに加え、Starter、Pro、Enterpriseの有料プランが掲載されています。Freeプランは無期限で利用でき、有料プランは現在の請求期間の終了時に変更またはキャンセルできます。
はい。ドキュメントでは、効率性のために複数の検出モデルを1回のAPI呼び出しで組み合わせられると説明されています。これにより、モデレーションや分析のパイプラインを簡素化できます。
ソースではJSONベースのAPIレスポンスがサポートされており、cURL、Python、PHP、Node.jsのサンプルコードが含まれています。ただし、収集された資料にはSDKやWebhookオプションの完全な一覧はありません。
トラフィックデータは参考情報としてご利用ください。
arena.im
Arenaは、ウェブサイトやアプリにコメント、ライブブログ、グループチャット、投票、AI支援モデレーションを追加できるコミュニティエンゲージメントプラットフォームです。パブリッシャー、メディア、ブランド、ECチームが自社プロパティに交流を集約できます。
communityone.io
CommunityOneは、AIサポート、モデレーション、エンゲージメント、発見、分析に対応するDiscordコミュニティプラットフォームです。運営者は日常業務を自動化し、Discord、ウェブ、YouTubeコメントでのメンバーの交流を把握できます。
platform.openai.com
OpenAI Moderation helps applications identify potentially harmful content in text and images. Developers can classify standalone inputs or receive moderation signals alongside generated responses through the OpenAI API.
sendbird.com
チャット、顧客サポート、モデレーション、AI支援に対応する企業向けAI顧客体験プラットフォーム
thehive.ai
Hive provides APIs for understanding, searching, moderating, and generating text, image, video, and audio content. Developers can use its pre-trained and open-source models for content workflows such as moderation, classification, brand protection, and media generation.
canopy.us
Canopyは、家族や大人向けのコンテンツフィルタリング・ペアレンタルコントロールアプリです。ウェブサイト、SNS、AIチャットボット上の露骨な画像・動画・テキストを、インターネット全体を遮断せずにフィルタリングします。