並び順

ブックマーク数

期間指定

  • から
  • まで

1 - 14 件 / 14件

新着順 人気順

web scraper github pythonの検索結果1 - 14 件 / 14件

  • Dify の ワークフロー の概要|npaka

    以下の記事が面白かったので、簡単にまとめました。 ・Workflow - Dify 1. ワークフロー1-1. ワークフロー「ワークフロー」は、複雑なタスクを小さな「ノード」に分割することで、LLMアプリケーションのモデル推論への依存を減らし、システムの説明可能性、安定性、耐障害性を向上させます。 「ワークフロー」の種類は、次のとおりです。 ・Chatflow :  顧客サービス、セマンティック検索など、応答作成に複数ステップのロジックを必要とする会話シナリオ用 ・Workflow : 高品質な翻訳、データ分析、コンテンツ作成、電子メールの自動化など、自動化・バッチ処理シナリオ用 1-2. Chatflow自然言語入力におけるユーザー意図認識の複雑さに対処するため、「質問分類」「質問書き換え」「サブ質問分割」などの問題理解ノードを提供します。さらに、LLMに外部環境との対話機能、すなわち「

      Dify の ワークフロー の概要|npaka
    • Shai Hulud Strikes Again (v2) - Socket

      Shai Hulud Strikes Again (v2)Another wave of Shai-Hulud campaign has hit npm with more than 500 packages and 700+ versions affected. Update: November 26, 2025 PostHog has published a detailed post mortem describing how one of its GitHub Actions workflows was abused as an initial access vector for Shai Hulud v2. An attacker briefly opened a pull request that modified a script executed via pull_requ

        Shai Hulud Strikes Again (v2) - Socket
      • GitHub - BehiSecc/awesome-claude-skills: A curated list of Claude Skills.

        web-artifacts-builder - Suite of tools for creating elaborate, multi-component claude.ai HTML artifacts using modern frontend web technologies (React, Tailwind CSS, shadcn/ui). test-driven-development - Use when implementing any feature or bugfix, before writing implementation code using-git-worktrees - Creates isolated git worktrees with smart directory selection and safety verification. finishin

          GitHub - BehiSecc/awesome-claude-skills: A curated list of Claude Skills.
        • awesome-selfhosted

          Awesome-Selfhosted# Self-hosting is the practice of hosting and managing applications on your own server(s) instead of consuming from SaaSS providers. This is a list of Free Software network services and web applications which can be hosted on your own server(s). Non-Free software is listed on the Non-Free page. HTML version (recommended), Markdown version (legacy). See Contributing. Software# Thi

          • Introducing the Overflow Offline project - Stack Overflow

            Jessica Hicklin was 16 when she entered a juvenile correctional facility. Earlier this year, after 26 years, she left the justice system a free woman, and set to work in her new role, as CTO of Unlocked Labs. The organization supports coding education programs in three prisons across the state of Missouri, and runs a development shop at one prison, empowering currently incarcerated individuals to

              Introducing the Overflow Offline project - Stack Overflow
            • Playwrightを使ってNotebookLMへのURL追加を自動化してみた | DevelopersIO

              こんにちは。たかやまです。 みなさんNotebookLMを使っていますか? NotebookLMはGoogleが提供するAI リサーチ アシスタントで、ドキュメントやWebページなどの「ソース」を追加することで、そのソースに基づいた正確な回答を得ることができます。 普段から情報を調べる際にChatGPTやClaudeなどのLLMを活用していますが、LLMは質問に対して誤った情報を返すハルシネーションが発生するリスクがあります。 また、PerplexityなどのAI検索エンジンを使うことで正確性の高い情報を得ることができますが、ソースもとが多岐にわたるケースがあり、その中から必要な情報を見つけるのが難しいこともあります。 AWSに関する情報を調べる場合、AWSドキュメントを1次ソースにしたいケースがあります。そこで、提供ソースに基づいて回答を返すNotebookLMにAWSのドキュメントをイ

                Playwrightを使ってNotebookLMへのURL追加を自動化してみた | DevelopersIO
              • Useful patterns for building HTML tools

                10th December 2025 I’ve started using the term HTML tools to refer to HTML applications that I’ve been building which combine HTML, JavaScript, and CSS in a single file and use them to provide useful functionality. I have built over 150 of these in the past two years, almost all of them written by LLMs. This article presents a collection of useful patterns I’ve discovered along the way. First, som

                  Useful patterns for building HTML tools
                • Anthropicが公開しているskill-creatorをGitHub Copilot用に書き換えてみた|hidet

                  「最近GitHub CopilotがAgent Skillsに対応したので、Anthropicが公開してるSkillsを試してみよう」と思い立ったのが始まりでした。基本的には汎用的な内容なので期待が高まります。 ところが、特に便利そうなskill-creatorの中身を見てみると、Claudeの文字列が随所に…。このままでは使いづらそうです。 「どうせ書き換えるなら、ついでに改善もしよう」と考え、llms.txtの読み込みやWeb検索の義務化など、自分なりの工夫を加えることにしました。 このnoteでは、skill-creatorの書き換え手順に加えて、llms.txtの活用やWeb検索の義務化など、実用性を高めるための改善ポイントも紹介します。 AIエージェントのSkillsは本当に汎用的なのかSkillsは汎用的AIエージェント向けの「Skills」って、どのツールでも使えるものだと思

                    Anthropicが公開しているskill-creatorをGitHub Copilot用に書き換えてみた|hidet
                  • Using GPT-4o for web scraping

                    tl;dr; show me the demo and source code! I’m pretty excited about the new structured outputs feature in OpenAI’s API so I took it for a spin and developed an AI-assisted web scraper. This post summarizes my learnings. Asking GPT-4o to scrape data The first experiment was to straight ask GPT-4o to extract the data from an HTML string, so I used the new structured outputs feature with the following

                    • GitHub - langroid/langroid: Harness LLMs with Multi-Agent Programming

                      import langroid as lr import langroid.language_models as lm # set up LLM llm_cfg = lm.OpenAIGPTConfig( # or OpenAIAssistant to use Assistant API # any model served via an OpenAI-compatible API chat_model=lm.OpenAIChatModel.GPT4o, # or, e.g., "ollama/mistral" ) # use LLM directly mdl = lm.OpenAIGPT(llm_cfg) response = mdl.chat("What is the capital of Ontario?", max_tokens=10) # use LLM in an Agent

                        GitHub - langroid/langroid: Harness LLMs with Multi-Agent Programming
                      • The Perfect Commit

                        Sponsored by: Teleport — Prevent access bottlenecks. Unify identity. Teleport replaces fragmented identity and access tooling with a single identity layer that security teams trust, and engineers want to use. 29th October 2022 For the last few years I’ve been trying to center my work around creating what I consider to be the Perfect Commit. This is a single commit that contains all of the followin

                          The Perfect Commit
                        • awesome-selfhosted

                          Awesome-Selfhosted# Self-hosting is the practice of hosting and managing applications on your own server(s) instead of consuming from SaaSS providers. This is a list of Free Software network services and web applications which can be hosted on your own server(s). Non-Free software is listed on the Non-Free page. HTML version (recommended), Markdown version (legacy). See Contributing. Software# Thi

                          • GitHub - fr0gger/Awesome-GPT-Agents: A curated list of GPT agents for cybersecurity

                            MagicUnprotect: This GPT allows to interact with the Unprotect DB to retrieve knowledge about malware evasion techniques. GP(en)T(ester): A cybersec assistant for pentesting guidance. Threat Intel Bot: A specialized GPT for the latest APT threat intelligence. Vulnerability Bot: A specialized GPT on vulnerability, secure code, ransomware attacks SourceCodeAnalysis: Upload any project's source code

                              GitHub - fr0gger/Awesome-GPT-Agents: A curated list of GPT agents for cybersecurity
                            • テキスト生成AIのRAGをGo言語とベクトルDBで実装してみた

                              はじめに こんにちは。よこやんです。 株式会社バニッシュ・スタンダードという会社でサーバーサイドエンジニアをやっています。 前回はHuggingFaceのAIモデルで画像の特徴をテキスト化しようという業務外で勉強したことをブログのネタにさせていただきました。 今回も懲りずに生成AIネタでブログを書きたいと思います。 RAG(Retrieval Augmented Generation)とは? RAGという言葉をきいたことはありますか? 生成AIに興味を持っているエンジニアであれば、小耳に挟んだことくらいはあると思います。 RAGは「検索拡張生成」という意味で、生成AIがより正確な回答をするための技術です。具体的には、AIが質問に答えるとき、まず外部のデータベースから必要な情報を探し出し、その情報を基にして新しい文章を作り出す仕組みです。 RAGの仕組み RAGの働きは大きく分けて二つのステ

                                テキスト生成AIのRAGをGo言語とベクトルDBで実装してみた
                              1