由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - Golang 批量insert到sqlite最好的办法是什么?
相关主题
一道C++面试编程题Project求建议
有人能解释一下这段C++代码吗各种语言程序猿被鄙视级别排序 (转载)
帮帮看看这段tree insertion有没有简化的xml? (转载)
[合集] 如何得到一个指向STL元素的指针?怎样用Python选一部分数据出来
Please recommend embedded RDBMS for .Net 2.0 (转载)打算开始学golang 了
构建一个快速查询字典(数据结构题)?现在android programmer工资非常高啊,比java developer都高。 (转载)
取代C++!Google 开发自己的编程语言Golang了 (转载)为啥python的人都用postgreSQL
一个小问题C# 和 SQLite 连接问题,多谢拉
相关话题的讨论汇总
话题: insert话题: sqlite话题: golang话题: br话题: 批量
进入Programming版参与讨论
1 (共1页)
c*******v
发帖数: 2599
1
以1秒钟5k个insert为例。在能力有限的设备上,想用golang 快速insert到SQLite 3。
有没什么好的参考办法?
谢谢指点!
n******t
发帖数: 4406
2
因该是啥地方没搞对,python 都能搞到5k/s.

【在 c*******v 的大作中提到】
: 以1秒钟5k个insert为例。在能力有限的设备上,想用golang 快速insert到SQLite 3。
: 有没什么好的参考办法?
: 谢谢指点!

c*******v
发帖数: 2599
3
The naive solution is good enough. However, I want to know better solutions.

【在 n******t 的大作中提到】
: 因该是啥地方没搞对,python 都能搞到5k/s.
m******r
发帖数: 1033
4
每款数据库是不是都应该自带一个bulkload的工具, 比如oracle自带sqlloader,
sqlserver自带ssrs/ssis, ibm那套东西叫nettezza loader .
第三方的工具, 一般都会慢一点; 有点像汽车配件, 原配总是好一点。
c*******v
发帖数: 2599
5
Did not find such insertion tool for SQLite


: 每款数据库是不是都应该自带一个bulkload的工具, 比如oracle自带sqlloader
,

: sqlserver自带ssrs/ssis, ibm那套东西叫nettezza loader .

: 第三方的工具, 一般都会慢一点; 有点像汽车配件, 原配总是好一点。



【在 m******r 的大作中提到】
: 每款数据库是不是都应该自带一个bulkload的工具, 比如oracle自带sqlloader,
: sqlserver自带ssrs/ssis, ibm那套东西叫nettezza loader .
: 第三方的工具, 一般都会慢一点; 有点像汽车配件, 原配总是好一点。

n******t
发帖数: 4406
6
没point。用sql 就是图方便和兼容性。怎么搞都是矮子里面充高子。

solutions.

【在 c*******v 的大作中提到】
: The naive solution is good enough. However, I want to know better solutions.
c*******v
发帖数: 2599
7
Well, if possible, I'd like to accumulate the small technique advantages in
a software.

【在 n******t 的大作中提到】
: 没point。用sql 就是图方便和兼容性。怎么搞都是矮子里面充高子。
:
: solutions.

m******r
发帖数: 1033
w********m
发帖数: 1137
9
Python是内嵌的
Go只能用性能低下的cgo
还真没python快
x****u
发帖数: 44466
10
在能力有限的设备上一秒5000个insert?你这是行为艺术啊
这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。

【在 c*******v 的大作中提到】
: 以1秒钟5k个insert为例。在能力有限的设备上,想用golang 快速insert到SQLite 3。
: 有没什么好的参考办法?
: 谢谢指点!

相关主题
取代C++!Google 开发自己的编程语言Golang了 (转载)各种语言程序猿被鄙视级别排序 (转载)
一个小问题有没有简化的xml? (转载)
Project求建议怎样用Python选一部分数据出来
进入Programming版参与讨论
g****t
发帖数: 31659
11
说到细节技术问题,你全是一窍不通。你知道1秒有多长么。


: 在能力有限的设备上一秒5000个insert?你这是行为艺术啊

: 这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。



【在 x****u 的大作中提到】
: 在能力有限的设备上一秒5000个insert?你这是行为艺术啊
: 这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。

x****u
发帖数: 44466
12
友提:细节技术问题问Google聊天向导得到答案快点,这里大家都默认你是行为艺术家

【在 g****t 的大作中提到】
: 说到细节技术问题,你全是一窍不通。你知道1秒有多长么。
:
:
: 在能力有限的设备上一秒5000个insert?你这是行为艺术啊
:
: 这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。
:

M*******d
发帖数: 176
13
cache ? 这是insert啊

【在 x****u 的大作中提到】
: 在能力有限的设备上一秒5000个insert?你这是行为艺术啊
: 这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。

x****u
发帖数: 44466
14
你觉得insert不可以cache

【在 M*******d 的大作中提到】
: cache ? 这是insert啊
n******t
发帖数: 4406
15
他已经被日本公司养废了。上来就是这种不着边际的事。
看来日本这地方的确不错,建议大家考虑。

【在 g****t 的大作中提到】
: 说到细节技术问题,你全是一窍不通。你知道1秒有多长么。
:
:
: 在能力有限的设备上一秒5000个insert?你这是行为艺术啊
:
: 这类问题从计算机诞生之前就有标准答案:上cache,不要一秒5000次。
:

c*******v
发帖数: 2599
16
他是合同工吧?我现在还挂在一个slack group,里面好几个日本人。
迄今,尚未发现日本公司有什么大问题。
我怀疑他在日本几十年没人理会。新冠4个月了,
不知道肥皂洗手20秒是怎么回事!

【在 n******t 的大作中提到】
: 他已经被日本公司养废了。上来就是这种不着边际的事。
: 看来日本这地方的确不错,建议大家考虑。

n******t
发帖数: 4406
17
日本公司不怎么清查这种不干活的人。可以一呆几十年,反正公司有工作狂把活都干了。
其实某个角度来说,比美国好一些,美国公司里面斗得太厉害了,因为美国公司不养(
至少
claim不养)闲人。所以大家都要拼命证明自己有value。

【在 c*******v 的大作中提到】
: 他是合同工吧?我现在还挂在一个slack group,里面好几个日本人。
: 迄今,尚未发现日本公司有什么大问题。
: 我怀疑他在日本几十年没人理会。新冠4个月了,
: 不知道肥皂洗手20秒是怎么回事!

x****u
发帖数: 44466
18
你能不能学一下伪装健康心态啊。。。

【在 n******t 的大作中提到】
: 他已经被日本公司养废了。上来就是这种不着边际的事。
: 看来日本这地方的确不错,建议大家考虑。

x****u
发帖数: 44466
19
他羡慕你认识好几个日本人

【在 c*******v 的大作中提到】
: 他是合同工吧?我现在还挂在一个slack group,里面好几个日本人。
: 迄今,尚未发现日本公司有什么大问题。
: 我怀疑他在日本几十年没人理会。新冠4个月了,
: 不知道肥皂洗手20秒是怎么回事!

x****u
发帖数: 44466
20
贵司内斗归内斗,养闲人还是不含糊的,不过你得努力进入闲人的层次才行。

了。

【在 n******t 的大作中提到】
: 日本公司不怎么清查这种不干活的人。可以一呆几十年,反正公司有工作狂把活都干了。
: 其实某个角度来说,比美国好一些,美国公司里面斗得太厉害了,因为美国公司不养(
: 至少
: claim不养)闲人。所以大家都要拼命证明自己有value。

g****t
发帖数: 31659
21
你是不是真的是合同工?工作了多少年。結果對公司的體制一竅不通。
支持外部公司的工作,從常規來講,是application engineer或者field engineer。屬
於入門工
種。
尤其支持外國客戶的,有時需要出差,更加沒多少人願意幹。哪裡存在你想像的羨慕這
回事。
我現在的team有此日本公司投資,所以我掛著slack群,表示重視。交流和支持都是我
這邊新畢業生在做。


: 他羡慕你认识好几个日本人



【在 x****u 的大作中提到】
: 贵司内斗归内斗,养闲人还是不含糊的,不过你得努力进入闲人的层次才行。
:
: 了。

1 (共1页)
进入Programming版参与讨论
相关主题
C# 和 SQLite 连接的问题Please recommend embedded RDBMS for .Net 2.0 (转载)
looking for summer interns (转载)构建一个快速查询字典(数据结构题)?
c++ programmer们就不用悲愤了取代C++!Google 开发自己的编程语言Golang了 (转载)
一个问题,关于数据存储的选择一个小问题
一道C++面试编程题Project求建议
有人能解释一下这段C++代码吗各种语言程序猿被鄙视级别排序 (转载)
帮帮看看这段tree insertion有没有简化的xml? (转载)
[合集] 如何得到一个指向STL元素的指针?怎样用Python选一部分数据出来
相关话题的讨论汇总
话题: insert话题: sqlite话题: golang话题: br话题: 批量