CompressGPT: Decrease Token Usage 70%
I saw @VictorTaelin's tweet recently on increasing the effective context window for GPT-* by asking the LLM to compress a prompt which is then fed into another instance of the same model. This seemed like a neat trick, but in practice presents some issues; the compression can be lossy, crucial instructions can be lost, and less characters != less tokens. I set out to build a more usable version of
Canarytokensサービスを試ã—ã¦ã¿ãŸ - ã“ã‚“ã¨ã‚ーるã—ーã“ã‚“ã¨ã‚ーるã¶ã„
ã‚る調ã¹ã‚‚ã®ã‚’ã—ã¦ã„ãŸã¨ã“ã‚ã€Canarytokensã¨ã„ã†ã‚µãƒ¼ãƒ“スãŒã‚ã‚‹ã“ã¨ã‚’知ã£ãŸã€‚ canarytokens.org Canarytokensã¯ã‚«ãƒŠãƒªã‚¢ãƒˆãƒ¼ã‚¯ãƒ³ã‚’生æˆã™ã‚‹ã‚µãƒ¼ãƒ“スã§ã‚ã‚Šã€ç„¡æ–™ã§åˆ©ç”¨ã§ãã‚‹ã»ã‹ã€githubã§ã‚½ãƒ¼ã‚¹ã‚³ãƒ¼ãƒ‰ã‚„DockerfileãŒå…¬é–‹ã•ã‚Œã¦ã„ã‚‹ãŸã‚自分ã§ã‚µãƒ¼ãƒ“ス稼åƒç’°å¢ƒã‚’構築ã§ãる。カナリアトークンã¨ã¯ã‚¿ãƒ¼ã‚²ãƒƒãƒˆï¼ˆè¢«å®³è€…）ãŒWebページã€é›»åメールã€ãƒ•ã‚¡ã‚¤ãƒ«ãªã©ã®ãƒªã‚½ãƒ¼ã‚¹ã«ã‚¢ã‚¯ã‚»ã‚¹ã™ã‚‹æ“作をã—ãŸã¨ãã«ã€ãã®ã‚¢ã‚¯ã‚»ã‚¹ã—ãŸäº‹å®Ÿã‚„ターゲットã®ç’°å¢ƒæƒ…å ±ï¼ˆIPアドレスã€UserAgentã€ãƒ¦ãƒ¼ã‚¶åãªã©ï¼‰ã‚’攻撃者ã«é€šçŸ¥ã™ã‚‹ãŸã‚ã®ä»•æŽ›ã‘ã§ã‚る。 ã“ã®ã‚µãƒ¼ãƒ“スを知ã£ãŸæ™‚ã¯ã€ã‚¢ã‚¯ã‚»ã‚¹è§£æžã§ä½¿ã‚れるよã†ãªWebページã«æ¥µå°ã®é€æ˜Žç”»åƒã‚„iframeを埋ã‚込むよã†ãªæ–¹å¼ã‚’想åƒã—ãŸãŒã€ãƒ‰ã‚ュメントをèªã‚“ã§ã„ã‚‹ã¨ä»–ã«ã‚‚様々ãªæ–¹å¼ã‚’サãƒãƒ¼ãƒˆã—ã¦ã„ã‚‹ã“ã¨ãŒã‚ã‹ã£ãŸã€‚ãã“ã§ã€å®Ÿéš›ã«ã©ã†ã„ã£
見ã¦ã„るサイト上ã«éœ²å‡ºã—ã¦ã„ã‚‹æ©Ÿå¯†æƒ…å ±(APIトークンã€IPアドレスãªã©)を見ã¤ã‘るブラウザ拡張を作りã¾ã—ãŸ
見ã¦ã„るサイト上ã«éœ²å‡ºã—ã¦ã„ã‚‹æ©Ÿå¯†æƒ…å ±(APIトークンã€IPアドレスãªã©)を見ã¤ã‘るブラウザ拡張を作りã¾ã—㟠Secretlintã¨ã„ã†APIトークンãªã©ã®æ©Ÿå¯†æƒ…å ±ãŒãƒ•ã‚¡ã‚¤ãƒ«å†…ã«å«ã¾ã‚Œã¦ã„ã‚‹ã‹ã‚’ãƒã‚§ãƒƒã‚¯ã§ãるツールを書ã„ã¦ã„ã¾ã™ã€‚ Secretlintã¯ã‚³ãƒžãƒ³ãƒ‰ãƒ©ã‚¤ãƒ³ãƒ„ールã¨ã—ã¦å‹•ãã®ã§ã€ä¸»ã«CIã‚„Gitã®pre-commit hookを利用ã—ã¦ã€ãƒªãƒã‚¸ãƒˆãƒªã«æ©Ÿå¯†æƒ…å ±ãŒå…¥ã‚‹ã®ã‚’防æ¢ã§ãã¾ã™ã€‚ Secretlintã§APIトークンや秘密éµãªã©ã®ã‚³ãƒŸãƒƒãƒˆã‚’防æ¢ã™ã‚‹ | Web Scratch 一方ã§ã€å®Ÿéš›ã®ã‚¦ã‚§ãƒ–サービスãªã©ã¯æ©Ÿå¯†æƒ…å ±ãŒãƒ•ã‚¡ã‚¤ãƒ«ã«ãƒãƒ¼ãƒ‰ã‚³ãƒ¼ãƒ‰ã•ã‚Œã¦ã„ã‚‹ã‚ã‘ã§ã¯ãªã(Secrelint自体ãŒã“ã†ã„ã†ãƒãƒ¼ãƒ‰ã‚³ãƒ¼ãƒ‰ã‚’防ãツールã§ã™)ã€ç’°å¢ƒå¤‰æ•°ã‚„Databaseã«ä¿å˜ã—ã¦ã„ã‚‹ã¨æ€ã„ã¾ã™ã€‚ ã“ã®ã‚ˆã†ãªå ´åˆã«ã‚‚ã€ã‚³ãƒ¼ãƒ‰ã®ãƒŸã‚¹ãªã©ã«ã‚ˆã£ã¦å…¬é–‹ã™ã‚‹ã¹ãã§ã¯ãªã„æƒ…å ±(秘密éµã€APIトークンã€Sl
Auth0を使ã£ã¦SPA(Vue.js, Python)ã®èªè¨¼æ©Ÿèƒ½ã‚’作ã£ã¦ã¿ãŸ - JX通信社エンジニアブãƒã‚°
ã¯ã˜ã‚㫠インターンã§ãŠä¸–話ã«ãªã£ã¦ã„ã‚‹ã€ã‚³ã‚¦ã‚²ã¨ç”³ã—ã¾ã™ã€‚ç¾åœ¨æ‹…当ã•ã›ã¦ã„ãŸã ã„ã¦ã„る仕事ã¯æ¥å‹™ã§ä½¿ç”¨ã—ã¦ã„る管ç†ç”»é¢ã®ãƒžã‚¤ã‚¯ãƒã‚µãƒ¼ãƒ“ス化ã§ã™ã€‚ マイクãƒã‚µãƒ¼ãƒ“ス間をã¤ãªãèªè¨¼æ©Ÿèƒ½ãŒå¿…è¦ã ã£ãŸã®ã§ã€èªè¨¼ãƒ—ラットフォームã¨ã—ã¦ä½¿ã„ã‚„ã™ãã†ãª 「Auth0ã€ã§ ã©ã‚“ãªã“ã¨ãŒã§ãã‚‹ã®ã‹ã€å®Ÿç¾ã—ãŸã„ã“ã¨ã¯å¯èƒ½ãªã®ã‹ã‚’検証ã—ã¦ã¿ã‚‹ã“ã¨ã«ãªã‚Šã¾ã—ãŸã€‚ ãªãœAuth0ãªã®ã‹ ダッシュボードã®è¨å®š + å°‘ãªã„コード ã§èªè¨¼æ©Ÿèƒ½ãŒç°¡å˜ã«å®Ÿè£…ã§ãる。 Auth0専用ライブラリやSDKã‹ã‚™å¤šæ•°å˜åœ¨ã—ã€ç›®çš„ã«å¿œã—ã‚™ã¦ãれを利用ã™ã‚‹ã“ã¨ã¦ã‚™ ç°¡å˜ã«ãƒã‚¯ã‚™ã‚¤ãƒ³æ©Ÿèƒ½ã‚’実装ã™ã‚‹ã“ã¨ã‹ã‚™ã¦ã‚™ãる。 実ç¾ã—ãŸã„ã“㨠発表 ã‚ã‚ŠãŒãŸã„ã“ã¨ã«ã€èª¿ã¹ãŸçµæžœã‚’社内ã§ç™ºè¡¨ã™ã‚‹å ´ã‚’è¨ã‘ã¦ã„ãŸã ãã¾ã—ãŸã€‚ ブãƒã‚°ã®å†…容より少ã—詳ã—ã書ã„ã¦ã„ã¾ã™ã€‚èªã‚“ã らå³å®Ÿè£…ã§ãるよã†ãªã‚¹ãƒ©ã‚¤ãƒ‰ã‚’心ãŒã‘ã¦ä½œã‚Šã¾ã—ãŸ! speakerdeck.c
SPA開発未経験者ã«ã‚ˆã‚‹Nuxt.jsを使ã£ãŸè‡ªç¤¾ã‚µãƒ¼ãƒ“ス開発ã®è£å´
2019å¹´1月30æ—¥ã€æ ªå¼ä¼šç¤¾Re:BuildãŒä¸»å‚¬ã™ã‚‹ã‚¤ãƒ™ãƒ³ãƒˆã€Œã€Nuxt.js/Vue.js】スタートアップä¼æ¥å°Žå…¥äº‹ä¾‹ã€ãŒé–‹å‚¬ã•ã‚Œã¾ã—ãŸã€‚近年注目を集ã‚ã‚‹Nuxt.jsã‚„Vue.jsを実際ã®é–‹ç™ºç¾å ´ã§ã©ã®ã‚ˆã†ã«æ´»ç”¨ã—ã¦ã„ã‚‹ã®ã‹ã€ã‚¹ã‚¿ãƒ¼ãƒˆã‚¢ãƒƒãƒ—4社ãŒé›†ã„ã€è‡ªç¤¾ã®å–り組ã¿ã‚’語りã¾ã™ã€‚プレゼンテーション「SPA開発未経験者ã«ã‚ˆã‚‹Nuxt.jsを使ã£ãŸè‡ªç¤¾ã‚µãƒ¼ãƒ’゙ス開発ã€ã«ç™»å£‡ã—ãŸã®ã¯ã€æ ªå¼ä¼šç¤¾ãƒªãƒ“ルドã®å˜‰æ•°ä¾‘èµ·æ°ã€‚講演資料ã¯ã“ã¡ã‚‰ SPA開発未経験者ã«ã‚ˆã‚‹Nuxt.jsを使ã£ãŸè‡ªç¤¾ã‚µãƒ¼ãƒ“ス開発 嘉数侑起æ°ï¼ˆä»¥ä¸‹ã€å˜‰æ•°ï¼‰ï¼šã¿ãªã•ã‚“ã€ã“ã‚“ã°ã‚“ã¯ã€‚「SPA開発未経験者ã«ã‚ˆã‚‹Nuxt.jsを使ã£ãŸè‡ªç¤¾ã‚µãƒ¼ãƒ“ス開発ã€ã¨ã„ã†ã‚¿ã‚¤ãƒˆãƒ«ã§ã€ãƒ—レゼンã•ã›ã¦ã„ãŸã ãã¾ã™ã€‚æ ªå¼ä¼šç¤¾Re:Buildã®å˜‰æ•°ã¨ç”³ã—ã¾ã™ã€‚よã‚ã—ããŠé¡˜ã„ã—ã¾ã™ã€‚ ã“ã¡ã‚‰ãŒã‚¢ã‚¸ã‚§ãƒ³ãƒ€ã§ã™ã€‚ 今回ã€Nuxt.jsã‚’ã“ã‚Œã‹ã‚‰å°Žå…¥ã—よã†ã¨æ¤œè¨Žã—
OAuth アクセストークンã®å®Ÿè£…ã«é–¢ã™ã‚‹è€ƒå¯Ÿ - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? ã¯ã˜ã‚ã« ã“ã®è¨˜äº‹ã§ã¯ã€OAuth 2.0 ã®ã‚¢ã‚¯ã‚»ã‚¹ãƒˆãƒ¼ã‚¯ãƒ³ã®å®Ÿè£…ã«é–¢ã™ã‚‹è€ƒå¯Ÿã‚’è¡Œã„ã¾ã™ã€‚本記事ã®åŸ·ç†è€…本人ã«ã‚ˆã‚‹å‹•ç”»è§£èª¬ã‚‚『OAuth & OIDC 勉強会 ã€ã‚¢ã‚¯ã‚»ã‚¹ãƒˆãƒ¼ã‚¯ãƒ³ç·¨ã€‘ã€ã§å…¬é–‹ã—ã¦ãŠã‚Šã¾ã™ã®ã§ã€ä½µã›ã¦ã”å‚ç…§ãã ã•ã„。 English version of this article is here → "OAuth Access Token Implementation". 1. アクセストークン実装方法ã®åˆ†é¡ž OAuth ã®ã‚¢ã‚¯ã‚»ã‚¹ãƒˆãƒ¼ã‚¯ãƒ³â€»ï¼‘ã®å®Ÿè£…方法ã¯èªå¯ã‚µãƒ¼ãƒãƒ¼ã®å®Ÿè£…ä¾å˜ã§ã™ã€‚ 実装ä¾å˜ã§ã¯ã‚ã‚Šã¾ã™ãŒã€RFC 67
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Gitlab Reconnaissance Introduction · Embrace The Red
Know. Before it matters
GitHub - daffainfo/Key-Checker: Go scripts for checking API key / access token validity
Secrets Scanning with Nuclei
Know. Before it matters
pentest-tools/keyhacks.sh at master · gwen001/pentest-tools
GitLab.com / GitLab Security Department / Security Operations Department / Red Team / Red Team Public / Tools / gitrob · GitLab
GitLab.com / GitLab Security Department / Security Operations Department / Red Team / Red Team Public / Tools / Token-Hunter · GitLab
Automated Github Queries (Can open 29 tabs at a time)
GitHub - streaak/keyhacks: Keyhacks is a repository which shows quick ways in which API keys leaked by a bug bounty program can be checked to see if they're valid.
Github bash generated search links (from hunter.sh)
GitHub - josehelps/git-wild-hunt: A tool to hunt for credentials in github wild AKA git*hunt
Scrapy - scraped website authentication token expires while scraping
How to authenticate Yelp API in scrapy? Pass Secret_Token and Search params?
{{#tags}}- {{label}}
{{/tags}}