o**y
发帖数: 1466 | 1 我在做一个项目,要求在1个小时的窗口内,把整个数据库全部更新一次(头的要求很奇怪
,要full,不能incremental).现在的瓶颈在一个BLOB的字段上,这个字段存放一个Object
Type,object不大,BLOB的长度在100-10000之间,但有2 million rows.整个BLOB全部加
起来也不大,只有200MB左右.
我在网上找的例子用SQL LOADER 做LOB,全部是文本CLOB的例子,看不到BLOB的例子,
BLOB的例子也有,但是都是从不同的文件载入的,比如说一条记录对应一个外部文件. 这
对我来说不现实,在本地盘上装2M个文件会慢得要死.我现在的办法是把BLOB变成BASE64
,到了ORACLE里面再把BASE64 decode成BLOB,这样可以把数据搞上去,但是这个数据内解
码耽误时间,速度达不到要求,很慢.
我希望的方法是把所有记录的BLOB内容放在一个文件里,然后用LOBFILE constant指定
一个文件名,所有的记录都在这个文件里找内容,现在的问题是我不知道怎么样把各条记
录的BLOB在一个文件里分割.ORACLE DOC上说可以... 阅读全帖 |
|
o**y
发帖数: 1466 | 2 Today I had a little progress in this problem. Here is my temporary solution:
1. In the client side, save all of the objects' BLOB bytes to one BIGBLOB
file, and have records like that in another separate file:
obj1, length 20, offset 1
obj2, length 500, offset 21
.....
then sql*loader 1) the records; 2) the BIGBLOB file to the server. The
content of BIGBLOB file is saved into another table (single row, BLOB field)
2. In the server side, then split the BIGBLOB into small chunks based on the
offs... 阅读全帖 |
|
c***c
发帖数: 6234 | 3 我有一table1，不知为什前面的人把一cloumn设成blob。我有新table叫problem_
history_summary，想得到table1的blob。
我运行
update problem_history_summary set (problem_history, problem_blob，
datestamp，type)= (select UTL_RAW.CAST_TO_VARCHAR2( t.description ), t.
description ，t.datestamp，t.type from table1 t where t.thenumber = '
001A1965');
没有问题。但我设了个trigger，每当table1里insert了new row，我就运行以上的sql
，当然稍微变下
update problem_history_summary set (problem_history, problem_blob，
datestamp，type)= (UTL_RAW.CAST_TO_VARCHAR2( :new.description ), :ne |
|
B*****g
发帖数: 34098 | 4 下面这个work，没有用dbms_lob。我估计那个append在trigger之后。
CREATE TABLE PROBLEM_HISTORY_SUMMARY
(
PROBLEM_HISTORY VARCHAR2(4000 BYTE),
TYPE VARCHAR2(10 BYTE),
PROBLEM_BLOB BLOB,
DATESTAMP TIMESTAMP(6)
);
CREATE TABLE TABLE1
(
THENUMBER VARCHAR2(20 BYTE),
TYPE VARCHAR2(10 BYTE),
DESCRIPTION BLOB,
DATESTAMP TIMESTAMP(6)
)
;
CREATE OR REPLACE TRIGGER TRIGGER_TABLE1
BEFORE INSERT
ON TABLE1
REFERENCING NEW AS NEW OLD AS OLD
FOR EACH ROW
DECLARE
BEGIN
UPDATE |
|
b***i
发帖数: 3043 | 5 具体问题，我只能逐渐写，因为mitbbs居然
数据库一列是blob，用下面的语句生成table,但是这个blob不是utf8。
String create ="CREATE TABLE File (
"name varchar(255) character set utf8 not null,
type varchar(64) character set utf8 not null,
data mediumblob,
ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
primary key (name)
) ENGINE=MyISAM DEFAULT CHARSET=utf8; |
|
b***i
发帖数: 3043 | 6 Dao里面：
插入 到 表 (name, type, data) 值 (?, ?, ?)
jdbcTemplate.update(
sql,
new Object[] { dFile.getName(), dFile.getType(), blob,},
new int[] {Types.VARCHAR, Types.VARCHAR, Types.BLOB}); |
|
b***i
发帖数: 3043 | 7 其中blob就是Sql的Blob。结果发现，数据库里面的文件不对，变长了，看起来是被utf
-8给编码了。比如数据开始原来是
ff d8 ff e0-00 10 4a 46，结果变成
ef bf bd ef-bf bd ef bf-bd ef bf bd-00 10 4a 46
我是让数据库把所有通讯都utf-8了，在 spring-servlet.xml里面
jdbc:mysql://10.0.16.16:4066/mysql?useEncoding=true&characterEncoding=
UTF-8"
请问如何才能正确insert？ |
|
c*****t
发帖数: 1879 | 8 【 以下文字转载自 CS 讨论区 】
发信人: coconut (coconut), 信区: CS
标 题: RODBC and BLOB
发信站: BBS 未名空间站 (Tue Aug 16 18:10:39 2005), 站内
Can RODBC (for R) read/write blob objects? I am trying to read/write
some large binary data to/from database.
Thanks |
|
s*****w
发帖数: 1527 | 9 据说node里没有blob type, 只能用Buffer。
现在前端送我一个json，里面有一个是base64 data converted from image,
在node里想把它转换成blob，
请问怎么做？
谢谢！ |
|
s*****w
发帖数: 1527 | 10 是这样，主要是cassandra要blob type, 然后node没有专门的blob，就乱了
谢谢！ |
|
|
|
|
l*****p
发帖数: 103 | 14 新买的ipad 1, 刚升级到4.3.1, 想要JB；用TinyUnbrella备份shsh blob, 但是备份文
件只有
5K.
请问文件大小正常吗？
谢谢 |
|
c*****t
发帖数: 1879 | 15 Can RODBC (for R) read/write blob objects? I am trying to read/write
some large binary data to/from database.
Thanks |
|
k*****t
发帖数: 161 | 16 Client用C编程, 调MySQL的C
lib.Client和Server不在一台机器。请问怎么用SQL远程地set Text或Blob column?
Load_file()肯定是不能用了。这个SQL语句怎么写？
多谢。 |
|
B*****g
发帖数: 34098 | 17 I guess is because most of insert blob, it is insert an empty_blob() first,
then update the column to real value. so insert trigger fired when the value
is empty_blob(). But when you try
INSERT INTO table
SELECT *
FROM table
the trigger works. |
|
B*****g
发帖数: 34098 | 18 http://www.acs.ilstu.edu/docs/oracle/appdev.101/b10795/adfns_tr.htm
Example: Modifying LOB Columns with a Trigger
You can treat LOB columns the same as other columns, using regular SQL and
PL/SQL functions with CLOB columns, and calls to the DBMS_LOB package with
BLOB columns:
drop table tab1;
create table tab1 (c1 clob);
insert into tab1 values ('HTML Document FragmentSome text.');
create or replace trigger trg1
before update on tab1
for each row
begin
dbms_output.put_line('Ol |
|
c***c
发帖数: 6234 | 19 你是对的。:new.blob_field能得到value。我直接写query insert a row into table1
可以。但通过我们的application就不行。明明每次都看见新row，也得到除
description外所有数值，就是得不到description。哪怕我增加一个blob field 来存
desciption也没用。
多谢了 |
|
m**d
发帖数: 14 | 20 我有一个socket，给我一段一段stream。我要把它存到mysql的一个blob里面去。有一
个问题是，我不能按照原始stream的顺序存，而必须反过来存，比如进来的数据如果是：
line1111
line2222
line3333
那存在数据库里就必须是:
line3333
line2222
line1111
所以我不能直接吧stream迭代到mysql sql statement哪里去。我现在是手工把原始数
据搞成serizliable的object, 再把每次读进来一组array of object 转成bytes，再把bytes写到数据库。结果eclipse就崩溃了说Exception in thread "
main" java.lang.OutOfMemoryError: Java heap space
这个东西应该怎么样搞比较好？谢谢 |
|
g*****g
发帖数: 34805 | 21 Not neccesary, Java by default uses only 64MB I believe, which is
way too small for many applications. A search on tables using blob
can cause outofmemory easily. |
|
c*********e
发帖数: 16335 | 22 text存入数据库不是很好吗，为啥要换成blob? |
|
s*****w
发帖数: 1527 | 23 原先是个png file，上面说转成base64，然后存入数据库用blob，我脑袋木，转不过来。 |
|
|
|
|
|
|
w****a
发帖数: 186 | 29 从首页看见这篇文章，来参加技术讨论。
首先，要得到3D depth有好几种方式：
(1) stereo camera:用两个平行放置的摄像头来采集一对图像，计算图像中沿着水平线
的视差
(disparity)，然后来计算3d depth。这种方法计算量很大(速度慢)，精度也不太稳定
，所以离
家庭中的实用还很远；
(2) structured lighting:这种方法是用一个光源投出各种预先设计好的图案到物体上
，根据
投射后看到的图案来估计物体的三维结构。PrimeSense的camera应该是属于这种，它用
左边的一
个红外投影仪每秒投出几十个structured pattern，再用右边的红外摄像机来采集、分
析图像，
计算出3维深度图。这种方法很适合封闭环境下的短距离的成像，比如说家庭里；速度
也很快，每秒
30帧，精度也不错。
(3) 3d scanning: 这种方法用一束红外激光在三维空间中扫描，根据反射光的相位变
化来计算到
点的三维距离，这种方式也可以叫做Time-of-Flight。这种方法分辨率低，速度慢，不
适合实时的
应用。
Kinect选择PrimeSen... 阅读全帖 |
|
R*******e
发帖数: 25533 | 30 http://www.musikid.com/article/index/id/1753
丁薇《流浪者之歌》MV首发｜如果不远离，就没有归来
作者： 紫悦 发布时间：2015/11/18 21:25 分类： 乐童动态 点击：83
阅读：39 回复：0
今日，著名前卫音乐人丁薇在乐视音乐首发新单曲MV《流浪者之歌》，除歌曲旋律本身
创作前卫，兼具艺术性与哲思性之外。MV的呈现也使用了极具艺术张力的表现手法，配
合非线性非故事性画面，讲述和探讨人与人之间的关系。
为了在拍摄上准确呈现，避免演员表演代入，MV中关键性的长镜头一条通过，演员在拍
摄前一分钟才得知自己的拍摄内容。丁薇的搭档Salt说：“我们觉得人生的一切都是馈
赠，人生就是一段’我’和礼物的奇妙关系。我们是父母的、爱人的、孩子的、你我彼
此的，我们想纪念这一切。如果你是生命的流浪者，你走得越远，生命就馈赠你越多。
”《流浪者之歌》的MV作为歌曲另一种形式的延续，这句话诠释了二者共同的主题。
blob.png
2006年我开始着手《流浪者之歌》的编曲的时候，觉得歌词好玩，不是常规的写法，没
有叙事，丁薇写... 阅读全帖 |
|
t*******a
发帖数: 4055 | 31 16国专家就国际毛驴产业发展达成“东阿共识”
中国新闻网 2017-08-18 09:27:38 本文作者：沙见龙 赵晓本网编辑：欧文
分享到： 邮件 一键分享 微信 QQ空间 新浪微博 QQ好友 复制网址 打印
更多
blob.png
会议期间，各国“毛驴”专家代表就毛驴繁殖技术与遗传育种、营养与保健、驴产业开
发利用等方面进行了专题交流。 梁犇 摄
国际毛驴产业发展学术交流会17日在山东东阿闭幕，来自16个国家和地区的150余位专
家就国际驴产业发展达成“东阿共识”。
blob.png
专家们在茶歇之余相互交流中国驴产业模式对世界驴产业发展的借鉴。 梁犇 摄
记者从国际毛驴产业发展学术交流会闭幕式上了解到，本届学术交流会上达成的“东阿
共识”包含多个方面：携手保护和发展全球驴遗传和种群资源;按照国际农业动物福利
理念提高驴健康生存状况;共同发起并成立总部设在中国的国际驴产业技术创新战略联
盟;建立1000万美元的国际驴产业技术创新专项基金;呼吁并推动政府对驴业的关注和政
府间涉驴经济、技术合作等。
blob.png
两位专家就国际驴产业发展进程中的“中国方案”相互交流。 梁犇 摄
... 阅读全帖 |
|
b**********5
发帖数: 7881 | 32 A Blob is a shape in two-dimensional integer coordinate space where all
cells have at least one adjoining cell to the right, left, top, or bottom
that is also occupied. Given a 10x10 array of boolean values that represents
a Blob uniformly selected at random from the set of all possible Blobs that
could occupy that array, write a program that will determine the Blob
boundaries.
Optimize first for finding the correct result, second for performing a
minimum number of cell
Boolean value reads, and ... 阅读全帖 |
|
c*****s
发帖数: 214 | 33 完整的例子太长，程序大概是这样。
写（假设用commons-fileupload）：
org.apache.commons.fileupload.FileItem fileItem = ...;
//我的程序很多是在jakarta
turbine框架里，拿到FileItem很容易。如果你也想用commons-fileupload请参考文档，
应该不难。
InputStream fileIn = fileItem.getInputStream();
...
Statement statement = dbcon.createStatement(...)//ResultSet类型不要READ_ONLY
ResultSet rs = statement.execute(...);
...
java.sql.Blob blob = rs.getBlob("file_content"); //假设字段是Blob类型
OutputStream blobOut = blob.setBinaryStream();
org.apache.commons.io.CopyUtils.copy(fileIn, |
|
|
p********r
发帖数: 1465 | 35 不是别人装逼，而是我们自己太low
0 看准军 2014-11-12 06:40:13
社团迎新的时候，每个人都要自我介绍。到一个一身LV、爱马仕的女孩自我介绍，说起
爱好，她想了想说：喜欢跑车。然后很淡定的坐下了。很多同学你看我我看你：“这个
妹子是来拉仇恨的？”
但是在后来的聊天中，我们发现，这个女孩子谦逊乖巧、真实纯朴，并不是热衷炫富的
人。其实，女孩从小家境就很优越，周边朋友也都一样。在她们眼中，一件香奈儿就和
优衣库一样普通，她也从来没有觉得“喜欢跑车”是炫耀。因为在她的生活圈子里，喜
欢跑车和我们很多人喜欢邮票一样的普通。
为什么她“穿着香奈儿，喜欢跑车”，我们就会觉得她炫耀；如果她“穿着优衣库，喜
欢吃肯德基”我们就不会觉得呢？不是因为她炫耀，而是我们太low。挣扎在基本生活
水平线的我们，面对一句从容淡定的“喜欢跑车”瞬间心生鄙视，原因不是人家爱炫，
而是因为我们太穷。
blob.png
本科毕业时候，一个同学去了某投行，年薪市场价60-80w一年。那年就业环境很烂，能
有个年薪12w的工作已经不错了。而他一脸无奈的说：其实这个工资我不满意。有些人
说：他太能装逼了，还... 阅读全帖 |
|
w****o
发帖数: 2260 | 36 这个第二题到底指的是什么？给不能给个例子？
(2) you have a binary image (0 black, 1 white), count how many white blobs
in the image? Assume 4 neighborhood.
什么是4 neighborhood?
这道题是不是问有多少个全是1连起来的块？还是说必须一个1的上下左右也必须是1的
才算一个块？
比如整个image全都是1的话，结论是一个blob? 还是多个blobs?
谢谢！ |
|
Z*****l
发帖数: 14069 | 37 $5以下的好多deal, 俺买了十几个。最搞笑的是max payne 3 + Red dead redemption
打包后卖得比max payne 3单个还便宜，只好又买了一次Red dead redemption, 幸好原
来有的是xbox360版，不算完全浪费。
这个链接里的排版比较好。
http://slickdeals.net/f/8298789-psn-co-op-sale-select-ps4-ps3-o
Title Platform Sale Price Discount Plus Price Discount
Original Price
Battlefield 4 PS4 $15.00 50% $12.00 60% $29.99
Battlefield 4 Premium Edition PS4 $24.00 60% $18.00 70% $
59.99
Battlefield Hardline PS4 $21.99 45% $19.9... 阅读全帖 |
|
|
x***d
发帖数: 227 | 39 何选择时间，
id value sps time time_database
1 [BLOB-1.4 KiB] 300 1170797401 2007-02-06 14:31:25.247
2 [BLOB-1.4 KiB] 300 1170797402 2007-02-06 14:31:26.128
3 [BLOB-1.4 KiB] 300 1170797403 2007-02-06 14:31:27.186
...............
...........
这个是一个table一部分的sample，我的目标是从每一天 选择几个时间点(比如 3：00,
6:00, 12:00 点），然后从这个时间开始选择 600秒，采样频率300，600秒就是 600*
300 = 180000点，
这样每天都选择，持续几个月，总体数据还是很大的，
我的问题是 如何定位这个时间点，
query = sel |
|
c*****t
发帖数: 1879 | 40 It is quite different from BLOB. There are a lot of restrictions
for BLOB in terms storage, update, and indexing etc. As the result,
there are implications in terms of the performance, how it can be
utilized etc.
Basically, if I have to use BLOB, I might as well just write my
own database engine. That's how much work gets involved.
Variable length byte array is by no means a trivial feature and
it has profound impact on the database engine itself. PostgreSQL
which supports this feature (and |
|
m******t
发帖数: 2416 | 41
My experience with blob/clob wasn't that bad either.
Since you are looking for java databases, I assume you want to embed one in
your application. If that's correct, do you actually care that much about
the performance difference between this and blob?
(bah, I kept mis-typing "blob" as "blog") |
|
x***d
发帖数: 227 | 42 何选择时间，
id value sps time time_database
1 [BLOB-1.4 KiB] 300 1170797401 2007-02-06 14:31:25.247
2 [BLOB-1.4 KiB] 300 1170797402 2007-02-06 14:31:26.128
3 [BLOB-1.4 KiB] 300 1170797403 2007-02-06 14:31:27.186
...............
...........
这个是一个table一部分的sample，我的目标是从每一天 选择几个时间点(比如 3：00,
6:00, 12:00 点），然后从这个时间开始选择 600秒，采样频率300，600秒就是 600*
300 = 180000点，
这样每天都选择，持续几个月，总体数据还是很大的，
我的问题是 如何定位这个时间点，
query = sel |
|
d*********8
发帖数: 2192 | 43 简单说只要不link gpl的库就可以不遵循gpl 有些库采用lgpl 可以link而不用公开代
码 比如glibc 就是lgpl
所以在linux上跑的oracle使用glibc 但不用公开代码 各个公司开发的内核驱动都要公
开代码 但有个workaround 就是商业公司提供一个binary blob 用内核调用这个blob
这样只需要公开wrapper的代码 |
|
b**e
发帖数: 3199 | 44 史上最强的厄尔尼诺之后并没有出现拉尼娜现象，相反东北太平洋海水近年来持续异
常升温，叫做BLOB现象。今年BLOB继续扩大，南下延伸到了南加州，给南加带来了久违
的大量冬季降水。
这让科学家大惑不解，因为他们预期要发生的拉尼娜将会给南加带来大旱。他们的预言
全都失败了。 |
|
n********g
发帖数: 6504 | 45 最近湾区天气真的诡异。今天这场雨上周末就没有被预报。就是今天看谷歌卫星云图，
也没确切看出是哪里冒出来的。从俄勒冈到北加州，都“万里无云”。
这个周末犯了一个错误。习惯了稳定如一的天气。提前几天查了天气预报，没有像飞机
那样起飞前和飞行途中不断检查天气，就出海了。结果返程的时候在狂风和“惊涛骇浪
”中搏斗了三个多小时。创了好多个人记录。幸运的是预计人多找了艘大一点的船。就
是操控也特别吃力。现在还觉得浑身都累。
还好，朋友们都兴致很高。不破浪湿身都不好意思说自己扬了帆。浪花飞溅几十尺高三
角帆和主帆都湿了一半。我的操船技术看来还可以，乘客晕了两位，但一个都没吐。乘
波体，在浪尖上跳舞。当然，也有乘风过山车般冲向浪谷的刺激冲浪时刻。有没有人脸
吓白了就不好说了。
事后小结。和上周末没头没脑突然90多度高温联系起来看。太平洋上不断发生着变化。
一个巨大的天气系统不断的延伸。环流一旦打破，地区气候就出现不稳定。直觉告诉我
这就是灭绝无数生物，别说珊瑚，连鲸鱼都死绝的所谓的BLOB在不断南下。现在估计到
达弯曲西南。昨天的狂风巨浪和今天这场雨就是BLOB逆时针环流带来的。
风云变幻。中美经济和... 阅读全帖 |
|
r****o
发帖数: 1950 | 46 来自主题: JobHunting版 - 贴点面试题 多谢。
那个binary image的题里面，blob是什么意思啊？任何连通的whilte pixel在一起算一
个blob?
P(
b1 |
|
|
y****9
发帖数: 252 | 48 哎呀, 我已经尽量避免是钓鱼贴了。 我算上实习也只是入行两年一个月， 投递微软写
预期工资我只敢写92K，不敢投SDE II， 我能牛到哪里去。
“知识分子最容易犯的错误是什么？”，“往往认为讲道理是行得通的。”媳妇儿说我
就是这类。这里庆幸的是我的老板不是阿三，都是老白。 我很同意yuxrose 说的时不
我待，所以我才搬到公司附近，基本上六点半七点钟吃完饭我就可以开始上课或者看书
了。 我老板也是推荐我每半年去出外面面试一次，半年前面试了用 Ocaml 的Jane
Street， 第三轮灭了， 太多脑筋急转弯了。我们组还有每个月两天Hack Day 的福利
，也就是为啥我上面叽叽喳喳地说我有机会可以提出各种改进方案。 但有时候，也顿
足捶胸的，这头刚刚写完federation，回头发现最新版的Windows Server 2012 的AD就
已经有了Federated Service。 再提出要改的时候，产品已经到了QA。 这种也就是我
经验不足，研究没做足导致的。
我后来也和一些朋友聊，除了自己学习， 他们鼓励我多交流，写博客，答题，混沙龙
。 我觉得也有道理。 负能量有点多了 ... 阅读全帖 |
|
c*******f
发帖数: 378 | 49 for 3gs, if u haven't had the 3.1.3 signature blob saved, u can ONLY upgrade
to 4.0. if u have the signature blob for 3.1.3, u should be able to upgrade
or downgrade to it. my guess is that u don't have it... |
|
c********t
发帖数: 5706 | 50 请问什么是signature blob? 怎么save 现在的signature blob.
我应该是没有，我现在还是3.0呢。看来只能等4.0的直接越狱出来了。
upgrade
upgrade |
|
