V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  pike0002  ›  全部回复第 9 页 / 共 11 页
回复总数  211
1  2  3  4  5  6  7  8  9  10 ... 11  
2025 年 1 月 11 日
回复了 hxlgg01 创建的主题 问与答 Gemini API 的 token 到底是怎么计的?
@pike0002 给错例子了。应该是

package gemini

import (
"context"
"log"

"cloud.google.com/go/vertexai/genai"
"cloud.google.com/go/vertexai/genai/tokenizer"
)

// CalculateToken calculates the number of tokens in a given content using a specified encoding model.
func CalculateToken(ctx context.Context, content string, encoding string) (int, error) {
client, err := tokenizer.New(encoding)
if err != nil {
log.Printf("Failed to get encoding: %v", err)
return 0, err
}

resp, err := client.CountTokens(genai.Text(content))
if err != nil {
log.Printf("Failed to count tokens: %v", err)
return 0, err
}
return int(resp.TotalTokens), nil
}
2025 年 1 月 11 日
回复了 cxz2998 创建的主题 问与答 技术论坛和新知识获取渠道相关
可以看看这个 https://www.pixelstech.net/feed 。当然仅限于技术类的。每天不定时从各大热门渠道获取趋势信息。虽说它是英文的。但是你登录后是可以看到清新版中文内容的,所以也没什么阅读障碍。
2025 年 1 月 11 日
回复了 hxlgg01 创建的主题 问与答 Gemini API 的 token 到底是怎么计的?
基本的公式:统计分词后得到的所有 Token 的总数,包含:
* 单词或子词
* 空格(如果分词器将空格视为 Token )
* 标点符号
* 特殊控制标记(例如 <start>、<end> 等)
对于中文的话,也是差不多,只是分词的规则不是太一样。比如基于单字的方式,那就是一个汉字,一个标点都算一个。还有基于单词(有意思的单词)。

一般大家会用一些计算工具看一下它大概是多少。比如 Gemimi 就提供了接口可以本地计算。例子: https://www.pixelstech.net/article/1735013847-calculating-token-count-for-claude-api-using-go%3a-a-step-by-step-guide?lang=chinese

也有现成的工具: https://www.pixelstech.net/application/tokencalculator
2025 年 1 月 11 日
回复了 iceriver99 创建的主题 问与答 如何把项目代码全部提交给 AI 进行阅读呢
cursor 和 windsurf 这些 AI 辅助编程工具都行,打开对话框或者 composer 然后 @Codebase 就可以阅读项目代码。
2025 年 1 月 10 日
回复了 pike0002 创建的主题 Chrome Page Saver - 保存网页成图片或者 PDF 的插件
@Exp 这个主要是保存成 html ,虽然在下载的时候把一些资源转码不依赖原始资源了。
2025 年 1 月 10 日
回复了 pike0002 创建的主题 Chrome Page Saver - 保存网页成图片或者 PDF 的插件
@youcandoit 可以的
2025 年 1 月 10 日
回复了 pike0002 创建的主题 Chrome Page Saver - 保存网页成图片或者 PDF 的插件
@Fred18 它这个对现有页面有侵入(可能可以这么设计的),另外好像不支持精简模式。
辅助编程还是选 cursor 吧,底层可以基于 claude 。目前体验下来 cursor 是最符合需求和体验最好的。
2025 年 1 月 8 日
回复了 ethusdt 创建的主题 程序员 使用 cursor/windsurf 创建新项目的一点小疑惑
建议是你自己编写框架,然后让 Cursor 填写缺失的组件。例如,你正在编写一个游戏,你应该编写游戏面板 div 、游戏控制 div 、状态 div ,然后让 Cursor 填写每个部分。避免编写所有内容(尤其是在你已经构建了一些功能的情况下)。不然它比较容易给你绕进去。
2025 年 1 月 8 日
回复了 DBQ 创建的主题 程序员 听李开复说,今年是大模型公司的淘汰赛
@marquina 说是因为训练没啥钱了只能转应用了。
2025 年 1 月 8 日
回复了 DBQ 创建的主题 程序员 听李开复说,今年是大模型公司的淘汰赛
@DBQ 对,所以算被淘汰了
其实光是做出来倒不是那么费事。要做到成熟,后续的维护,推广,安全才是最关键的。

维护:你的功能可能有 bug ,要修复,你需要保持更新内容,你需要添加新功能,你需要升级软件。
推广:你做的东西肯定是希望别人访问或者使用。那别人凭什么在茫茫网海中找到你并持续关注你呢?可能就需要推广,推广不是一蹴而就的, 需要持续的投入,做 seo ,社交媒体分享,论坛分享,跟人交换友链...
安全:很多时候你的网站被来自各种地方的恶意攻击,你的数据库担心拖库,你的代码可能有安全漏洞( xss, sql injection ),你的 ssl 证书可能过期,你被 ddos 攻击等等。这些你都得应对。

还有很多东西在这个过程中需要经历。祝好运!
2025 年 1 月 8 日
回复了 DBQ 创建的主题 程序员 听李开复说,今年是大模型公司的淘汰赛
他家的似乎就被淘汰了
2025 年 1 月 7 日
回复了 jedeft 创建的主题 Cursor cursor 简直是神器啊
2025 年 1 月 6 日
回复了 EmbraceQWQ 创建的主题 程序员 想请教大佬们个问题
纯粹来吐槽一下这个标题的
2025 年 1 月 6 日
回复了 siyemao 创建的主题 程序员 用 cursor 半小时写了个 vscode 小插件
还是建议大家只是用它来做辅助。对于正常复杂点的项目还是自己跟。不然容易基操退化。
2025 年 1 月 6 日
回复了 luojiedev 创建的主题 生活 2024 年度总结:勇气
加油,跟随内心
2025 年 1 月 6 日
回复了 microka 创建的主题 RSS 超能网的 RSS 是否有问题?
他是个 php ,估计有动态逻辑控制了。
2025 年 1 月 5 日
回复了 sfdev 创建的主题 程序员 看到有人吐槽 cursor,我也忍不住吐槽一下。
2025 年 1 月 5 日
回复了 wryyyyyyyyyyyy 创建的主题 程序员 被 cursor 气出脑血栓
1  2  3  4  5  6  7  8  9  10 ... 11  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1279 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 26ms · UTC 17:17 · PVG 01:17 · LAX 10:17 · JFK 13:17
♥ Do have faith in what you're doing.