Olostep + Mastra 統合

npm install @olostep/mastra-tools @mastra/core

import { Mastra } from '@mastra/core';
import { createOlostepIntegration } from '@olostep/mastra-tools';

// Olostep統合を作成
const olostep = createOlostepIntegration();

// APIを登録（これによりエージェントで使用可能になります）
olostep.registerApis();

// Mastra設定に追加
export const mastra = new Mastra({
  config: {
    integrations: [olostep],
    // ... その他の設定
  },
});

export OLOSTEP_API_KEY=your-api-key-here

OLOSTEP_API_KEY=your-api-key-here

// エージェントまたはワークフロー内で
const result = await mastra.callApi({
  integrationName: 'olostep',
  api: 'scrapeWebsite',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      url_to_scrape: 'https://example.com',
      formats: ['markdown'],
      country: 'US',
    }
  }
});

const result = await mastra.callApi({
  integrationName: 'olostep',
  api: 'batchScrape',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      batch_array: [
        { url: 'https://example.com', custom_id: 'site1' },
        { url: 'https://test.com', custom_id: 'site2' },
      ],
      formats: ['markdown'],
    }
  }
});

const result = await mastra.callApi({
  integrationName: 'olostep',
  api: 'createCrawl',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      start_url: 'https://docs.example.com',
      max_pages: 50,
      follow_links: true,
      formats: ['markdown'],
    }
  }
});

const result = await mastra.callApi({
  integrationName: 'olostep',
  api: 'createMap',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      url: 'https://example.com',
      search_query: 'blog',
      top_n: 100,
      include_urls: ['/blog/**'],
    }
  }
});

import { Agent } from '@mastra/core';
import { createOlostepIntegration } from '@olostep/mastra-tools';

const olostep = createOlostepIntegration();
olostep.registerApis();

const agent = new Agent({
  name: 'web-researcher',
  instructions: `
    あなたはウェブリサーチアシスタントです。ユーザーがウェブサイトから情報を取得するように求めたとき、
    OlostepのscrapeWebsite APIを使用してコンテンツを抽出し、それを要約して提供します。
  `,
  model: 'openai/gpt-4',
});

// エージェントはMastraのAPIシステムを通じてOlostep APIを使用できます

// 1. ウェブサイトをマップしてURLを発見
const mapResult = await mastra.callApi({
  integrationName: 'olostep',
  api: 'createMap',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      url: 'https://example.com',
      include_urls: ['/blog/**'],
    }
  }
});

// 2. 発見されたURLをバッチスクレイプ
const batchResult = await mastra.callApi({
  integrationName: 'olostep',
  api: 'batchScrape',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      batch_array: mapResult.urls.slice(0, 10).map(url => ({ url })),
      formats: ['markdown'],
    }
  }
});

// 3. 結果をエージェントで処理
const summary = await agent.generate({
  messages: [{
    role: 'user',
    content: `このコンテンツを要約してください: ${batchResult.result.markdown_content}`
  }]
});

エージェントワークフロー:
1. 商品ページをスクレイプ（scrapeWebsite）
2. 構造化データを抽出（パーサーを使用）
3. 価格変動を追跡
4. アラートを生成
5. データベースを更新

エージェントワークフロー:
1. ウェブサイト構造をマップ（createMap）
2. 重要なセクションをクロール（createCrawl）
3. コンテンツの質を分析
4. SEOの機会を特定
5. 推奨事項を生成

const result = await mastra.callApi({
  integrationName: 'olostep',
  api: 'scrapeWebsite',
  payload: {
    data: {
      apiKey: process.env.OLOSTEP_API_KEY,
      url_to_scrape: 'https://www.amazon.com/dp/PRODUCT_ID',
      formats: ['json'],
      parser: '@olostep/amazon-product',
    }
  }
});

import { Mastra } from '@mastra/core';
import { Agent } from '@mastra/core';
import { createOlostepIntegration } from '@olostep/mastra-tools';

// Olostep統合を作成して登録
const olostep = createOlostepIntegration();
olostep.registerApis();

// Mastraを初期化
export const mastra = new Mastra({
  config: {
    integrations: [olostep],
    // ... その他の設定
  },
});

// リサーチエージェントを作成
const researchAgent = new Agent({
  name: 'research-assistant',
  instructions: `
    あなたはウェブデータを検索、抽出、構造化できるリサーチアシスタントです。
    ユーザーがトピックを調査するように求めたとき：
    1. OlostepのcreateMapを使用して関連ページを発見
    2. batchScrapeを使用して複数のソースからコンテンツを抽出
    3. 調査結果を分析し要約
    4. 構造化されたリサーチレポートを提示
  `,
  model: 'openai/gpt-4',
});

// エージェントを使用
async function researchTopic(topic: string) {
  // ステップ1: 関連ページを発見
  const mapResult = await mastra.callApi({
    integrationName: 'olostep',
    api: 'createMap',
    payload: {
      data: {
        apiKey: process.env.OLOSTEP_API_KEY!,
        url: `https://example.com/search?q=${topic}`,
        top_n: 20,
      }
    }
  });

  // ステップ2: 発見されたページをスクレイプ
  const batchResult = await mastra.callApi({
    integrationName: 'olostep',
    api: 'batchScrape',
    payload: {
      data: {
        apiKey: process.env.OLOSTEP_API_KEY!,
        batch_array: mapResult.urls.slice(0, 10).map(url => ({ url })),
        formats: ['markdown'],
      }
    }
  });

  // ステップ3: エージェントで分析
  const summary = await researchAgent.generate({
    messages: [{
      role: 'user',
      content: `このリサーチデータに基づいて、${topic}の包括的な要約を提供してください`
    }]
  });

  return summary;
}